Cara Mengatasi Indexed Though Blocked by Robots.txt di Google Webmaster
Daftar Isi
Jika anda memiliki blog dan mendapatkan email seperti gambar dibawah ini, maka blog anda sedang mengalami masalah di index Google. saya sendiri mendapatkan email ini di blog saya yang lain baru-baru ini.
Email tersebut memberitahukan bahwa telah terjadi kesalah di dalam index milik blog saya, lalu bagaimana cara mengatasi eror index coverage di Google Webmastes?
Cara Mengatasi Indexed Though Blocked by Robots.txt
Setelah saya browsing dan mbaca-mbaca, saya temukan penyebab terjadinya pemblokiran yang menyebabkan eror tersebut , lalu saya memperbaikinya dengan cara mengaktifkan robot.txt khusus pada blog. caranya sebagai berikut:
1. Masuk ke dashboard blog anda
2. Klik Setting -> Preferensi penelusuran
3. Klik edit/aktifkan penelusuran khusus
4. Klik Ya
5. Kemudian masukan kode berikut :
User-agent: *
Disallow: /
Allow: /
Sitemap: http://namablogAnda.blogspot.com/sitemap.xml
*ubah URL tersebut dengan URL blog anda
*saya tidak menggunakan "Disallow: /search" karena robot.txt default saya itu dan masih eror,jadi saya hapus kata "search" nya.
6. Klik Simpan Perubahan
7. Setting/Aktifkan juga tag tajuk robot khusus di blog anda, dengan settingan seperti gambar dibawah ini:
Jika sudah selesai, Google akan mengirimkan notifikasi kepada anda.
Kesimpulan :
Dari masalah ini bisa saya simpulkan bahwa eror tersebut dikarenakan ada kode "/search" di robot.txt blog saya, yang menyebabkan tidak terindexnya oleh mesin pencari, walaupun sebenarnya itu tidak berdampak apa-apa, namun pasti akan mengganggu ada.
Demikian Cara Mengatasi Indexed Though Blocked by Robots.txt di Google Webmaster, semoga bermanfaat, terima kasih.
