Cara setting dan mengaktifkan robot txt di blog blogger

Cara setting dan mengaktifkan robot txt di blog blogger

Pada kesempatan hari ini saya akan membahas cara mensetting dan mengaktifkan robot.txt di blog blogger/blogspot.

Robots.txt adalah perintah bagi robot mesin pencari untuk menelusuri atau tidak menelusuri halaman pada blog kita. Boleh dikatakan robots.txt adalah filter blog kita dari mesin pencari.

CARA AKTIFKAN ROBOT.TXT .

*Masuk dashbor blogger
*pilih pengaturan
*Lalu buka Preferensi Penelusuran Blog
*lalu pilih robot txt

masukan kode di bawah ini.

User-agent: Mediapartners-Google
Disallow:
User-agent: *
Disallow: /search
Allow: /
Sitemap: http://url.blogspot.com/feeds/posts/default?orderby=UPDATED

ganti url.blogspot.com dengan url sobat
trus simpan perubahan.selesai kini robot txt blog sobat sudah aktif.

Apa arti dari kode-kode di atas?

User-agent: Mediapartners-Google
Robot Google Adsense merayapi blog

Disallow:
Yang tidak diperbolehkan tidak ada

User-agent: *
Semua robot Search Engine / mesin pencari

Disallow: /search
Tidak diperbolehkan merayapi folder search dan setrusnya, seperti..../search/labeldan... search/search?updated...

Allow: /
Mengizinkan semua halaman untuk dirayapi, kecuali yang tertulis pada Disallow di atas. Tanda (/) kurang lebih artinya nama blog.

Sitemap: http://namablog/feeds/posts/default?orderby=UPDATED
sitemap atau alamat feed blog kita.Dengan memasang robot.txt blog kita akan lebih seo frendly.