3 Cara Mengatasi Artikel Blog Noindex karena 'X-Robots-Tag'
Kali ini, izinkan saya berbagi tutorial bagaimana caranya mengatasi dan memperbaiki postingan blog yang tidak terdeteksi/terbaca di Google. Penyebabnya karena pesan error "Tidak: 'noindex' terdeteksi di header http 'X-Robots-Tag'" yang muncul di Google Search Console.
Suatu ketika, saya membeli template blogger berbayar (premium). Beruntungnya, saya selalu mendapatkan update versi terbaru kalau memang ada. Setiap kali mendapatkan update versi terbaru ini, saya selalu menggantikannya dengan template blog yang lama. Ditimpa saja begitu 😁
Sepertinya ada masalah dengan tag <meta> pada template blogger versi terbaru sekarang (kemungkinan ya 😁). Buktinya, 80% artikel blog saya tidak diindex oleh Google. Contoh salah satu tag/atribut yang dinamakan <meta> yang dimaksud:
Karena masalah ini, saya terpaksa menurunkan versi template bloggernya ke versi terdahulunya. Tentu saya melaporkan masalah ini ke desainernya agar diperbaiki lebih baik lagi.
Anehnya adalah desainer template mengatakan bahwa meta tag yang terpasang di tema blogger versi terbaru ini tidak ada kaitannya dengan masalah "Tidak: 'noindex' terdeteksi di header http 'X-Robots-Tag'" di atas.
Anggaplah masalahnya bukan di template blogger, melainkan di pengaturan robot.txt yang sudah kawan-kawan setting sedemikian rupa. Nyatanya, robot.txt ini bisa jadi bumerang bagi blog sobat. Kalau salah diatur, resikonya ya artikelnya atau blognya akan tidak muncul lagi (deindeks) oleh Google.
Parahnya, kalau keseringan terjadi duplikat konten karena kesalahan setting robots.txt, blog sobat bakal terkena pinalti oleh Google. Ujung-ujungnya web blog sobat tidak akan pernah lagi tampil di Google (banned).
Lalu, bagaimana cara setting robot.txt blogger.com yang benar?
1. Masuk ke Blogger > Setelan > Crawler dan Pengindeksan
2. Centang aktifkan pada aktifkan robots.txt kustom, lalu klik pada robots.txt kustom, dan isi kode pengaturannya dengan kode di bawah ini:
3. Ganti alamat web blog saya dengan alamat web blog kawan-kawan.
4. Selanjutnya, centang aktifkan pada aktifkan tag header robot kustom, dengan pengaturan sebagai berikut:
4.1. Tag halaman Beranda
4.2. Tag arsip dan halaman penelusuran
4.3. Tag postingan dan halaman
Sampai di sini, cara setting robot.txt blogger.com yang benar sudah berhasil dilakukan. Tolong, pengaturan ini jangan diubah-ubah lagi 😅
Setelah melakukan setting robot.txt, coba cek kembali satu per satu konten blog yang pernah dipublikasikan di menu pengindeksan.
1. Langkah pertama, masuk terlebih dahulu ke Google Search Console
2. Selanjutnya klik pada Inspeksi URL
3. Pada kolom pencarian, masukkan URL artikel/postingan web blog yang ingin diindeks ulang.
4. Setelah URL ditambahkan dan tekan Enter, selanjutnya tekan tombol UJI URL AKTIF terlebih dahulu.
5. Di momen ini, tertulis kalau URL tersedia untuk Google. Selanjutnya klik tombol Minta Pengindeksan.
6. Sampai di sini, pengindeksan yang diminta sudah terverifikasi dengan baik.
Yang perlu diperhatikan, karena kecerobohan kita entah itu karena mengganti template blogger dan/atau mengubah pengaturan robot.txt di pengaturan Blogger.com, semua artikel yang pernah dipublikasikan harus melakukan proses di atas. Semuanya dilakukan satu per satu postingan. Cukup melelahkan 😅
Sampai detik ini, hanya itu saja yang saya ketahui setelah mencari-cari di Google seperti di pemecahan masalah Google dan percobaan berulangkali. Butuh waktu berhari-hari untuk menemukan solusi mengatasi masalah di atas. Kalau ada kekeliruan dalam postingan kali ini, mohon bantuannya 🙏
Saya harus akui bahwa 2 cara di atas tidak cukup berhasil. Alhasil, saya stres dibuatnya. Sampai-sampai saya melakukan uji coba di mana saya menghapus properti di Google Search Console. Ketika didaftarkan ulang, hasilnya tetap saja bermasalah yakni munculnya pesan kesalahan "Tidak: 'noindex' terdeteksi di header http 'X-Robots-Tag'" 😂
Lalu, solusi apa yang berhasil saya terapkan?
Saya menghapus propertinya, lalu mendaftarkan ulang TAPI melalui Domain, bukan lewat Awalan URL. Lihat gambar di bawah ini:
Yang menariknya adalah cara ketiga ini yang saya anggap berhasil 100%. Seluruh artikel saya terdeteksi oleh Google. Akan tetapi, ada kekurangannya di sini:
Googlebot akan menilai web blog kawan-kawan sebagai web blog baru yang baru saja didaftarkan di Google Search Console. Semua konten yang pernah di-crawl oleh Googlebot, akan ditandai ulang sebagai artikel yang baru pertamakali muncul di laman Google. Otomatis, trafik blog akan menurun drastis. Bisa dibilang, dimulai dari nol (0) lagi.
Tapi, ya, itu satu-satunya solusi yang bisa diterapkan.
Mungkin ada solusi lain dari kawan-kawan? Boleh tinggalkan di kolom komentar.
Semoga tutorial bagaimana caranya mengatasi dan memperbaiki postingan blog yang tidak terdeteksi/terbaca di Google karena pesan error "Tidak: 'noindex' terdeteksi di header http 'X-Robots-Tag'" yang muncul di Google Search Console ini berguna bagi kawan-kawan.
Suatu ketika, saya membeli template blogger berbayar (premium). Beruntungnya, saya selalu mendapatkan update versi terbaru kalau memang ada. Setiap kali mendapatkan update versi terbaru ini, saya selalu menggantikannya dengan template blog yang lama. Ditimpa saja begitu 😁
Sepertinya ada masalah dengan tag <meta> pada template blogger versi terbaru sekarang (kemungkinan ya 😁). Buktinya, 80% artikel blog saya tidak diindex oleh Google. Contoh salah satu tag/atribut yang dinamakan <meta> yang dimaksud:
<meta name="robots" content="noindex">Karena masalah ini, saya terpaksa menurunkan versi template bloggernya ke versi terdahulunya. Tentu saya melaporkan masalah ini ke desainernya agar diperbaiki lebih baik lagi.
Anehnya adalah desainer template mengatakan bahwa meta tag yang terpasang di tema blogger versi terbaru ini tidak ada kaitannya dengan masalah "Tidak: 'noindex' terdeteksi di header http 'X-Robots-Tag'" di atas.
1. Cara Setting Robot.txt Blogger yang Benar
Anggaplah masalahnya bukan di template blogger, melainkan di pengaturan robot.txt yang sudah kawan-kawan setting sedemikian rupa. Nyatanya, robot.txt ini bisa jadi bumerang bagi blog sobat. Kalau salah diatur, resikonya ya artikelnya atau blognya akan tidak muncul lagi (deindeks) oleh Google.
Parahnya, kalau keseringan terjadi duplikat konten karena kesalahan setting robots.txt, blog sobat bakal terkena pinalti oleh Google. Ujung-ujungnya web blog sobat tidak akan pernah lagi tampil di Google (banned).
Lalu, bagaimana cara setting robot.txt blogger.com yang benar?
1. Masuk ke Blogger > Setelan > Crawler dan Pengindeksan
2. Centang aktifkan pada aktifkan robots.txt kustom, lalu klik pada robots.txt kustom, dan isi kode pengaturannya dengan kode di bawah ini:
User-agent: *
Allow: /
Disallow: /search
Sitemap: https://www.ariefghozaly.web.id/sitemap.xml3. Ganti alamat web blog saya dengan alamat web blog kawan-kawan.
4. Selanjutnya, centang aktifkan pada aktifkan tag header robot kustom, dengan pengaturan sebagai berikut:
4.1. Tag halaman Beranda
4.2. Tag arsip dan halaman penelusuran
4.3. Tag postingan dan halaman
Sampai di sini, cara setting robot.txt blogger.com yang benar sudah berhasil dilakukan. Tolong, pengaturan ini jangan diubah-ubah lagi 😅
2. Cara Minta Pengindeksan Ulang Artikel
Setelah melakukan setting robot.txt, coba cek kembali satu per satu konten blog yang pernah dipublikasikan di menu pengindeksan.
1. Langkah pertama, masuk terlebih dahulu ke Google Search Console
2. Selanjutnya klik pada Inspeksi URL
3. Pada kolom pencarian, masukkan URL artikel/postingan web blog yang ingin diindeks ulang.
4. Setelah URL ditambahkan dan tekan Enter, selanjutnya tekan tombol UJI URL AKTIF terlebih dahulu.
5. Di momen ini, tertulis kalau URL tersedia untuk Google. Selanjutnya klik tombol Minta Pengindeksan.
6. Sampai di sini, pengindeksan yang diminta sudah terverifikasi dengan baik.
Yang perlu diperhatikan, karena kecerobohan kita entah itu karena mengganti template blogger dan/atau mengubah pengaturan robot.txt di pengaturan Blogger.com, semua artikel yang pernah dipublikasikan harus melakukan proses di atas. Semuanya dilakukan satu per satu postingan. Cukup melelahkan 😅
Sampai detik ini, hanya itu saja yang saya ketahui setelah mencari-cari di Google seperti di pemecahan masalah Google dan percobaan berulangkali. Butuh waktu berhari-hari untuk menemukan solusi mengatasi masalah di atas. Kalau ada kekeliruan dalam postingan kali ini, mohon bantuannya 🙏
3. Cara Jitu Mengatasi Artikel Blog Noindex karena "X-Robots-Tag" Berhasil 100%
Saya harus akui bahwa 2 cara di atas tidak cukup berhasil. Alhasil, saya stres dibuatnya. Sampai-sampai saya melakukan uji coba di mana saya menghapus properti di Google Search Console. Ketika didaftarkan ulang, hasilnya tetap saja bermasalah yakni munculnya pesan kesalahan "Tidak: 'noindex' terdeteksi di header http 'X-Robots-Tag'" 😂
Lalu, solusi apa yang berhasil saya terapkan?
Saya menghapus propertinya, lalu mendaftarkan ulang TAPI melalui Domain, bukan lewat Awalan URL. Lihat gambar di bawah ini:
Yang menariknya adalah cara ketiga ini yang saya anggap berhasil 100%. Seluruh artikel saya terdeteksi oleh Google. Akan tetapi, ada kekurangannya di sini:
Googlebot akan menilai web blog kawan-kawan sebagai web blog baru yang baru saja didaftarkan di Google Search Console. Semua konten yang pernah di-crawl oleh Googlebot, akan ditandai ulang sebagai artikel yang baru pertamakali muncul di laman Google. Otomatis, trafik blog akan menurun drastis. Bisa dibilang, dimulai dari nol (0) lagi.
Tapi, ya, itu satu-satunya solusi yang bisa diterapkan.
Mungkin ada solusi lain dari kawan-kawan? Boleh tinggalkan di kolom komentar.
Semoga tutorial bagaimana caranya mengatasi dan memperbaiki postingan blog yang tidak terdeteksi/terbaca di Google karena pesan error "Tidak: 'noindex' terdeteksi di header http 'X-Robots-Tag'" yang muncul di Google Search Console ini berguna bagi kawan-kawan.
thanks tutorialnya
BalasHapus