Postingan ini saya tulis untuk menjawab pertanyaan yang cukup sering ditanyakan oleh pelanggan template blogger premium milik saya, yaitu tentang permasalahan notifikasi Diindeks meski diblokir oleh robots.txt di Google Search Console.
Di sini saya tidak hanya menyatakan langkah menangani problem ini, tetapi terhitung akan mengatakan kenapa persoalan ini sanggup terjadi. Harapannya tentu saja sehingga sobat lebih paham mengenai langkah kerja mesin pencari, terutama Google.
Langsung saja ke topik pembahasan.
Penyebab peringatan “Diindeks meski diblokir oleh robots.txt”
Mungkin banyak yang belum tahu, penyebab utama munculnya peringatan ini adalah gara-gara mesin pencari Google sudah meremehkan perintah noindex mengfungsikan file robots.txt.
Sedangkan di blogger sampai sementara ini tetap memanfaatkan file robots.txt untuk menahan halaman spesifik sehingga tidak terindex di mesin pencari.
Halaman selanjutnya adalah halaman pencarian dan halaman label.
File robots.txt default blogger
Pada file robots.txt tersebut tercantum perintah :
Disallow: /search
Perintah tersebut berguna untuk memberitahu mesin pencari supaya tidak mengindex URL yang diawali dengan /search setelah alamat blog.
Nah URL yang dimulai bersama dengan /search di blogger digunakan untuk halaman label dan halaman pencarian.
Contoh URL halaman label = https://linkmagz.sugeng.id/search/label/Produk
Contoh URL halaman pencarian = https://linkmagz.sugeng.id/search?q=mantabbbbb
Selain untuk halaman label dan pencarian, URL yang di mulai bersama dengan /search terhitung digunakan untuk menampilkan daftar postingan = https://linkmagz.sugeng.id/search?updated-max=2020-01-05T22:22:00-08:00&max-results=7
Terus bagaimana langkah mengatasinya?
Ada sebagian metode yang sanggup digunakan untuk menanggulangi masalah ini.
1. Cara Pertama
Cara paling gampang adalah dengan menghapus perintah Disallow: /search di file robots.txt menggunakan fitur custom robots.txt di blogger.
Dengan langkah ini sanggup menghalau peringatan diindeks meski diblokir oleh robots.txt di google search console.
Tapi pengaruh buruknya halaman label dan pencarian tetap selamanya bisa terindex di halaman pencarian.
Umumnya kami tidak mendambakan halaman label dan pencarian terindex di halaman pencarian gara-gara halaman selanjutnya termasuk halaman berkualitas rendah.
2. Cara Kedua
Cara ke dua adalah dengan pakai tag header robot untuk memberitahu Google supaya tidak mengindex halaman label dan pencarian.
Saat ini Google masih membantu tag header robot, bersama dengan kata lain tag header robot tidak diabaikan layaknya file robots.txt.
Untuk menempatkan tag header robot ini sebenarnya/seharusnya dapat ditunaikan secara otomatis bersama gunakan fitur “Tag tajuk robot khusus” di blogger.
Ketika pelanggan template blogger premium milik aku bertanya permasalahan ini, saya kebanyakan menyuruh untuk mengatur setelan “Tag tajuk robot khusus.”
Tapi entah kenapa terakhir aku cek fitur “Tag tajuk robot khusus” di blogger telah tidak kembali bekerja sebagaimana mestinya. Sekarang telah tidak otomatis keluar tag header robot noindex di halaman arsip, label, dan pencarian.
Karena cara berikut sudah tidak lagi bekerja, maka alternatifnya dapat bersama menempatkan tag meta robot langsung di didalam template.
Caranya bagaimana, Mas?
Langsung saja salin kode di bawah ini :
Letakan kode berikut pas di bawah kode
di di dalam template.Langkah selanjutnya, sobat termasuk wajib mengapus perintah Disallow: /search terhadap file robots.txt.
Karena terkecuali perintah Disallow: /search tidak dihapus, robot Google tidak dapat membaca perintah dari tag meta robot yang sudah dipasang sebelumnya.
Untuk cara menghapusnya silahkan masuk ke dashboard blogger > setelan > Crawler dan pengindeksan > Aktifkan fitur robots.txt kustom.
Klik pada robots.txt kostum, sehabis itu masukkan kode ini:
User-agent: Mediapartners-Google
Disallow:
User-agent: *
Allow: /
Sitemap: https://linkmagz.sugeng.id/sitemap.xml
Note: pindah linkmagz.sugeng.id bersama alamat blog sobat.
Jangan lupa klik “Simpan”
Jika udah laksanakan perubahan, jangan lupa klik tombol “Validasi Perbaikan” di dashboard Search Console. Setelah itu menanti sampai notifikasi “Diindeks meski diblokir oleh robots.txt” hilang.
Beberapa pesan notifikasi lain
Selain notifikasi “Diindeks meski diblokir oleh robots.txt”, nyaris dipastikan di Google Search Console termasuk muncul notifikasi-notifikasi lainnya.
Notifikasi lain selain “Diindeks meski diblokir oleh robots.txt” kebanyakan bukan berbentuk sebagai peringatan. Artinya meskipun dibiarkan saja tidak begitu masalah. Malah justru lebih baik dibiarkan saja.
Berikut adalah lebih dari satu notifikasi yang paling umum:
Anomali crawling
Notifikasi ini keluar umumnya dikarenakan tersedia URL tulisan yang awalnya telah terindex di mesin pencari namun udah dihapus di blog.
Cara mengatasinya bagaimana, Mas?
Bisa dibiarkan saja atau jika teman baik risih sahabat mampu mengalihkan URL tulisan yang error ke postingan lain dengan pakai fitur pengalihan tertentu di blogger.
Cara menggunakan fitur pengalihan tertentu dapat dibaca di sini : Cara SEO Blogger.
Di-crawl – pas ini tidak diindeks
Notifikasi ini nampak kebanyakan gara-gara tersedia URL RSS feed yang tidak ditampilkan di hasil pencarian.
Cara mengatasinya bagaimana, Mas?
Cek daftar URL yang meraih notifikasi ini. Jika sebagain besar adalah URL RSS feed maka lumayan biarkan saja.
URL RSS feed contohnya seperti ini:
https://viomagz.sugeng.id/feeds/posts/default
https://viomagz.sugeng.id/feeds/273523674801878748/comments/default
Halaman alternatif bersama dengan tag kanonis yang tepat
Notifikasi ini nampak karena adanya URL versi mobile bersama parameter ?m=1 di belakang URL.
Ketika teman akrab terhubung blog lewat perangkat mobile, di belakang URL bakal otomatis ada tambahan paremeter ?m=1.
Di blogger otomatis memberikan tag canonical (kanonis) terhadap halaman/postingan dengan parameter ?m=1.
Tag kanonis ini terhadap intinya memberi mengerti mesin pencari bahwa URL dengan tambahan ?m=1 dan yang tidak tersedia tambahannya adalah satu halaman/postingan yang sama, sehingga tidak menyebabkan duplicate content.
Cara mengatasinya bagaimana, Mas?
Ini normal, memadai biarkan saja.
Dan notifikasi lainnya
Masih banyak notifikasi-notifikasi lainnya yang keluar di Google Search Console. Namun notifkasi selanjutnya lebih dari satu besar sifatnya bukan peringatan.
Selama notifikasinya bukan sebuah peringatan atau warning, maka teman baik tidak mesti terlampau khawatir. Cukup dibiarkan saja apa adanya.
Mungkin cuma hingga di sini saja postingan saya kali ini.
Jika ada pertanyaan silahkan disampikan lewat komentar.
Terima kasih.
If you have any questions relating to where as well as how to utilize Caraseru.com, you possibly can e mail us on our own web-site.