Cara Memperbaiki Kesalahan Perayapan (Crawler) Iklan Google Adsense

Permasalahan gagalnya Google Adsense melakukan perayapan pada situs blog kamu beresiko berkurangnya penghasilan. Untuk itu anda perlu segera memperbaiki kesalahan perayapan (crawler) iklan Google Adsense.

Notifikasi kesalahan ini muncul pada halaman utama Google Adsense, sehingga kamu perlu mengambil aksi untuk membaca permasalahan yang sedang terjadi. Serta situs mana yang terdampak jika kamu memiliki lebih dari satu situs.

Setelah di telusuri ternyata permasalahan terdapat pada robots.txt. File ini berfungsi untuk membatasi mesin pencari merayapi situs, url apa saja yang di izinkan untuk ter-index dan url mana yang tidak. Jika kamu belum membuat robots.txt pada blog, silahkan buat terlebih dahulu. Karena ini sama pentingnya seperti memasang ads.txt pada blog.

Secara default jika kamu baru memasang robots.txt pada blog adalah sebagai berikut.

User-agent: Mediapartners-Google
Disallow:

User-agent: *
Disallow: /search
Allow: /

Sitemap: https://alamatSitus/sitemap.xml

Jika kita lihat pada script robots.txt diatas, terlihat:

User-agent: Mediapartners-Google → Berarti perayapan untuk Google Adsense bisa dilakukan. Namun terdapat Disallow pada bagian bawah, berarti perayapan Google Adsense tidak di izinkan.

User-agent: * → Berarti mengizinkan Google Search merayapi semua halaman pada blog atau situs.

Disallow:/search → Berarti search engine google tidak dapat merayapi halaman pencarian yang di ketikkan pengunjung pada blog.

Allow:/ Sitemap: → Berarti mengizinkan google meng-crawler url sitemaps yang kita tuliskan pada robots.txt.

Setelah membaca secara satu-persatu robots.txt yang telah dibuat, terlihat pada script kita tidak mengizikan Google Adsense melakukan crawler. Untuk itu google sendiri telah menuliskan solusi pada halaman resminya. Dan berikut saya tuliskan pada artikel ini.

Memperbaiki Kesalahan Perayapan (Crawler)

Untuk menyelesaikan masalah ini, kita akan melakukan perbaikan pada robots.txt blogger, dengan mengahapus bagian yang dianggap menghalangi Google Adsense melakukan perayapan (crawler).

• Login ke blogger.
• Klik Settings, kemudian pilih Crawlers dan Indexing.

• Kemudian klik Custom robot.txt.
• Selanjutnya hapus script berikut ini.

User-agent: Mediapartners-Google
Disallow:

• Maka setelah url dihapus akan menjadi seperti ini.

User-agent: *
Disallow: /search
Allow: /

Sitemap: https://alamatSitus/sitemap.xml

• Dan klik Save untuk menyimpan pengaturan.

Dengan menghapus script diatas, berarti kita telah mengizinkan Google Adsense untuk melakukan crawlers pada halaman blog.

Penutup

Dengan mengizinkan Google Adsense melakukan perayapan ke situs atau blog anda, membuat penghasilan tetap stabil. Karena jika tidak segera memperbaiki masalah ini iklan tidak akan tampil pada blog, dan membuat penghasilan menurun.

Dan itulah Cara Memperbaiki Kesalahan Perayapan (Crawler) Iklan Google Adsense. Semoga bermanfaat. Apabila ada yang ingin kamu tanyakan dapat menuliskannya pada kolom komentar. Sekian dulu, terima kasih.