Nah pada bahasan kali ini tentang bagaimana carakostumsasi robot txt pada setingan blog kita, robot txt secara umum fungsinya untuk mengoptimalisasi konten, mencegah duplikasi konten juga, namun pengaktifan ini penuh resiko, jika salah maka blog kalian akan didepak keluar dari google alias tidak bisa terindek sama sekali di google, (pikir2 dulu deh hehe ), namun yang jelas jika kita ingin bermain secara opitimal apalagi dlam masalah seo, tentu saja resiko ini harus kita lewati, sebab kata master seo, setting robot txt ini sangat berguna sekali, ini kata mereka ya bro bukan kataku hihihi..
Oke deh bagi yang berjiwa kesatria blogger dan berani ambil resiko, berikut ada 2 cara settin robot txt :
A.. cara setting dengan sitemap blogger dan sepanjang sepengetahuanku ini resikonya kecil dalam kesalahan dan banyak dipakai oleh blogger termasuk blog ini, sitemap ini bisa kita buat melalui web2 penyedia layanan robot txt dan pada dasarnya kode tersebut bentuknya seperti ini :
