cara setting robot.txt di blogspot agar Seo Friendly - cara setting robot.txt di blogspot menurut kebanyakan orang sangat penting bagi blog agar seo Friendly, tapi apakah kita mengetahui apa itu Robot.txt dan kegunaanya ? dulu saya pernah mencari tahu apa itu Robot.txt dan apa kegunaan Robot.txt dan penjelasan singkatnya Robot.txt merupakan sebuah ketentuan pengguna blog untuk mencegah dari mesin pencarian yang tidak di izinkan untuk di Index oleh mesin pencarian, pengertian singkatnya Robot.txt sendiri berfungsi untuk mengontrol serta mengatur halaman atau page dan direktori mana yang boleh diindex oleh mesin pencari, di dalam blogger robot.txt di kenal dengan custom robot.txt yaitu robot txt khusus .
Robots.txt adalah berisi pedoman atau pengaturan untuk Robot-crawler tentang bagaimana mereka akan meng-crawler dan mengindexs situs web atau blog anda, maka dari itu, blogger menyediakan pengaturan khusus untuk mengatur beberapa pengaturan SEO yang sangat dasar dan sangat mudah dari dashboard blog anda. Salah satunya adalah menetapkan custom robots.txt untuk blog anda sesuai kebutuhan sobat.
Baca juga : Cara Memasang Title Tag pada Blogspot
Ketika robot crawler search engine mengunjungi halaman atau situs web dan blog, maka hal pertama yang terlihat adalah file robots.txt. bagi pemakai platform Blogger, sekarang anda bisa atau mempunyai pilihan untuk mengontrol bot crawler search engine dan menentukan mana yang harus di rayapi dan di indexs dari situs web atau blog sobat.
Menarik di baca : cara memasang anti View Source pada website
Pada dasarnya setiap blog dari platfrom blogger memiliki robots.txt setelan default, namun dengan perubahan baru di blogger ini, anda dapat mengubahnya sesuai dengan kebutuhan, nah..untuk itu dalam posting kali ini, anda akan tahu tentang bagaimana stelan robots.txt default blogger dan cara menambahkan atau mengedit robots.txt custom untuk blog anda.
hal yang harus anda ketahui untuk setting Robot.txt Penggunaan yang tidak tepat dari fitur tersebut dapat mengakibatkan blog Anda diabaikan oleh mesin telusur. jadi kita harus berhati-hati agar blog kita tidak berakibat di abaikan oleh google atau search engine lain gara-gara kita tidak tepat dalam menyetting robot.txt tersebut , ikuti cara berikut :
berikut adalah Contoh Robot.txt Standar Default Blogger .
User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /search
Allow: /
Sitemap: https://tempat-ngeblogs.blogspot.co.id/feeds/posts/default?orderby=UPDATED
Keterangan :
Ubah Url yang saya beri tanda Merah dengan Url blog masing-masing .
Settingan Robot.txt default di atas ini sama untuk setiap blog. tapi jika anda merasa settingan ini sudah mampu memenuhi kebutuhan SEO untuk blog anda dan blog sudah memiliki banyak visitor, maka anda tidak perlu menggantinya jika ini memang tidak perlu,karena stelan robots.txt ini akan sangat berpengaruh terhadap blog anda,tapi tentu anda juga harus tau jika dalam settingan ini, mungkin ada yang anda butuhkan dan ini penting untuk blog anda.
Penjelasan
Kode ini dibagi menjadi tiga bagian. Mari kita pelajari dulu masing-masing setelah itu kita akan belajar cara menambahkan file robots.txt custom di blogspot blog.
“User-agent: Mediapartners-Google” : Kode ini memiliki makna yaitu:
Kode yang ditempatkan di bawahnya hanya berlaku untuk Bot Crawler/robot perayap Mediapartners-Google. Mediapartners-Google adalah bot crawler untuk google adsense, jadi jangan takut kalao bot ini akan menjadi seperti auto visitor.
B. “Disallow: ” : Kode ini memiliki makna yaitu:
Kode Ini berarti bermakna bahwa tidak ada batasan halaman merangkak oleh crawler. Dengan kata lain, memungkinkan crawler merangkak semua halaman di situs/blog.
C. “User-agent: *”: Kode ini memiliki makna yaitu:
Ini berarti bahwa kode/perintah yang ditempatkan di bawahnya berlaku untuk semua robot crawler (diwakili dengan kode ‘*’).
D. “disallow: /search” : Kode ini memiliki makna yaitu:
Untuk melarang crawler untuk menjelajah url yang memiliki awalan urlbloganda.com/search.
E. “allow: /”: Kode ini memiliki makna yaitu:
Membiarkan crawler merayapi semua halaman kecuali yang dicantumkan pada perintah disallow.
F. “Sitemap: ” : Kode ini memiliki makna yaitu:
Ini adalah sitemap dari situs Anda yang diberitahukan kepada crawler agar mudah ketika menjelajahinya lagi. Sitemap berisi semua link yang ada disitus untuk dirayapi crawler.
Cara Memasang Custom Robot.txt Pada Blogger
untuk memasang Atau setting robot txt pada blogspot langkah pertama kita harus masuk pada menu Pengaturan pada menu sidebar kiri blogger
Langsung saja tanpa pikir panjang berikut tutorialnya. Langkah pertama masuk ke dasbor blogger :
1. Login terlebih dahulu ke blog anda masing-masing.
2. Pilih menu Setelan > Preferensi penelusuran. > robots.txt khusus > Edit.
Isi form yang muncul dengan kode di bawah, kamu bisa meng Copy paste kode di atas tadi lalu masukkanlah ke dalam form robot.txt .
Itulah cara untuk memasukkan atau meng-edit custom robots.txt di dashboar. Sekarang mari kita lihat bagaimana menulis custom robots.txt untuk blogger yang baik namun ini juga harus di sesuaikan dengan kebutuhan anda. pada poin-poin ini anda hanya harus memasang kode sesuai yang anda butuhkan saja.
Custom robots.txt yang tepat dalam Blog dengan kebutuhan-nya.
User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /search
Disallow: /p/*
Disallow: /view/*
Disallow: /?m=1
Disallow: /?m=0
Disallow: /*?m=1
Disallow: /*?m=0
Allow: /
Sitemap: https://www.tempat-ngeblogs.blogspot.com/feeds/posts/default?orderby=UPDATED
setelah itu kita juga perlu untuk Setting Tag tajuk robot khusus, untuk mengetahui bagaimana caranya kita hanya perlu melihat di bawah pada robot txt khusus dan silahkan centang seperti gambar Berikut.
Setelah itu silahkan Save dan Selesai !
Catatan : dalam penggunaan robots.txt ini,anda harus benar-benar menggunakan kode yang anda butuhkan saja, karena dalam penerapan robots.txt ini jika anda hanya asal saja menerapkan tanpa tahu fungsi-fungsi dari setiap kode tersebut,akan berakibat fatal ,bahkan dampak parahnya bot crwaler tidak akan mengindex blog anda, jadi lebih baik pelajari terlebih dahulu dari setiap kode dan fungsi-fungsinya.
Anda bisa mengecek file ini di blog Anda dengan menambahkan /robots.txt akhirnya ke URL blog Anda di browser. Lihatlah contoh di bawah ini untuk demo.
https://www.tempat-ngeblogs.blogspot.com/robots.txt
Setelah Anda mengunjungi URL file robots.txt, Anda akan melihat keseluruhan kode yang Anda gunakan di file robots.txt kustom Anda. Lihat gambar di bawah ini.
Sampai disini kita sudah berhasil membuat setting robots.txt sendiri dengan mudah.
Semoga Tutorial yang saya sampaikan tentang cara Setting Custom Robot.txt dapat membantu anda Semoga saja dengan anda membaca artikel, permasalahan anda dapat teratasi dan semoga postingan ini dapat membuat anda memahami mengeanai apa itu robots.txt, manfaatnya, serta cara yang di tempuh untuk membuatnya.
Jika ada ide yang lain yang menurut anda lebih bagus atau ada yang di pertanyakan silahkan diskusi di kolom komentar. oke sobat blogger saya rasa cukup sekian dulu di tutorial Cara Setting Custom Robots.txt Yang Benar menurut saya :). lebih dan kurangnya saya mohon maaf. semoga sukses
Tags:
Cara Setting Robot.txt
Setting Robot.txt blogspot
Robot.txt blogger
2 komentar