Techno
Beranda / Techno / Jangan Panik! Cara Mengatasi Website “Di-crawl – saat ini tidak diindeks” di Google

Jangan Panik! Cara Mengatasi Website “Di-crawl – saat ini tidak diindeks” di Google

Di crawl saat ini tidak diindeks 1044x587

Mendapati status “Di-crawl – saat ini tidak diindeks” di Google Search Console (GSC) bisa membuat pemilik website khawatir. Pesan ini berarti Google telah mengunjungi halaman Anda, namun memutuskan untuk tidak memasukkannya ke dalam indeks pencarian mereka. Tenang, masalah ini umum terjadi dan seringkali dapat diatasi dengan langkah-langkah yang tepat.

Artikel ini akan membahas penyebab umum status ini dan memberikan panduan praktis untuk membantu Google mengindeks halaman website Anda.

Memahami Arti “Di-crawl – saat ini tidak diindeks”

Ketika Anda melihat status “Di-crawl – saat ini tidak diindeks” untuk suatu URL di laporan “Cakupan Indeks” pada Google Search Console, itu menandakan hal berikut:

  • Googlebot telah mengunjungi halaman Anda: Ini berarti Google dapat mengakses URL tersebut dan menganalisis kontennya.
  • Halaman belum ditambahkan ke indeks Google: Meskipun telah di-crawl, halaman tersebut belum memenuhi syarat untuk ditampilkan dalam hasil pencarian Google.

Penting untuk dipahami bahwa Google memiliki sumber daya crawling dan indexing yang terbatas. Mereka akan memprioritaskan halaman yang dianggap paling relevan dan berkualitas untuk dimasukkan ke dalam indeksnya [Taylor & Scher SEO].

Penyebab Umum Status “Di-crawl – saat ini tidak diindeks”

Ada beberapa alasan mengapa Google mungkin tidak mengindeks halaman Anda setelah berhasil di-crawl. Berikut adalah beberapa penyebab yang paling umum:

Cara Ampuh Melacak HP Android dan iPhone yang Hilang

  1. Konten berkualitas rendah atau tipis (Thin Content): Google cenderung tidak mengindeks halaman dengan konten yang sedikit, tidak orisinal, atau tidak memberikan nilai yang cukup bagi pengguna [Taylor & Scher SEO, Yoast]. Pastikan konten Anda informatif, mendalam, dan unik.
  2. Konten duplikat: Jika halaman Anda memiliki konten yang sangat mirip atau identik dengan halaman lain di website Anda atau di website lain, Google mungkin akan menghindari pengindeksannya [Taylor & Scher SEO, Yoast]. Gunakan tag kanonik (<rel="canonical">) untuk memberi tahu Google versi mana yang lebih disukai jika Anda memiliki konten serupa.
  3. Kurangnya internal linking: Struktur website yang baik dan internal linking yang kuat membantu Google menemukan dan memahami konteks halaman Anda [Onely]. Pastikan halaman yang ingin Anda indeks memiliki tautan internal yang relevan dari halaman lain di website Anda.
  4. Kesalahan teknis (False Positives): Terkadang, status ini bisa muncul karena masalah teknis sementara pada sisi Google [Taylor & Scher SEO]. Anda bisa mencoba meminta pengindeksan ulang setelah beberapa waktu.
  5. Kesalahan dalam file robots.txt: Meskipun Google dapat meng-crawl halaman Anda (menandakan tidak ada pemblokiran total), ada kemungkinan ada direktif dalam file robots.txt yang secara tidak sengaja mencegah pengindeksan. Periksa file robots.txt Anda untuk memastikan tidak ada aturan yang menghalangi pengindeksan halaman penting.
  6. Tag noindex: Pastikan halaman yang ingin Anda indeks tidak memiliki tag meta robots dengan nilai noindex di bagian <head> HTML-nya. Tag ini memberi tahu mesin pencari untuk tidak mengindeks halaman tersebut [Google Search Central Community].
  7. Pengalaman pengguna yang buruk: Halaman dengan kecepatan loading lambat atau desain yang buruk dapat mempengaruhi keputusan Google untuk mengindeksnya [Google Search Central Community].
  8. Intent pencarian yang tidak sesuai: Terkadang, konten Anda mungkin tidak sesuai dengan apa yang dicari pengguna untuk kata kunci yang relevan [Taylor & Scher SEO].

Langkah-langkah Mengatasi “Di-crawl – saat ini tidak diindeks”

Berikut adalah langkah-langkah yang dapat Anda ambil untuk mengatasi masalah ini dan meningkatkan peluang halaman Anda untuk diindeks oleh Google:

  1. Periksa Kualitas dan Keunikan Konten: Evaluasi konten pada halaman yang berstatus “Di-crawl – saat ini tidak diindeks”. Apakah konten tersebut memberikan nilai bagi pengguna? Apakah kontennya unik dan orisinal? Jika tidak, perbaiki dan tingkatkan kualitas kontennya.
  2. Lakukan Audit Konten Duplikat: Gunakan alat bantu untuk memeriksa apakah halaman Anda memiliki konten yang duplikat dengan halaman lain di website Anda atau di internet. Jika ditemukan, terapkan tag kanonik atau gabungkan konten yang serupa.
  3. Perbaiki Struktur Website dan Internal Linking: Pastikan halaman yang ingin Anda indeks memiliki tautan internal yang relevan dari halaman lain di website Anda. Ini membantu Google menemukan dan memahami halaman tersebut [Onely].
  4. Gunakan Fitur Inspeksi URL di Google Search Console:
    • Buka Google Search Console dan pilih properti website Anda.
    • Klik “Inspeksi URL” di menu sebelah kiri.
    • Masukkan URL halaman yang berstatus “Di-crawl – saat ini tidak diindeks”.
    • Setelah Google selesai memeriksa URL, Anda akan melihat informasi lebih detail tentang mengapa halaman tersebut tidak diindeks.
    • Klik tombol “Uji URL Live” untuk melihat bagaimana Googlebot melihat halaman Anda saat ini [Conductor].
    • Jika tidak ada masalah yang terdeteksi dan Anda yakin halaman tersebut layak diindeks, klik “Minta Pengindeksan” [Ahrefs].
  5. Periksa File robots.txt: Pastikan tidak ada aturan dalam file robots.txt yang secara tidak sengaja memblokir pengindeksan halaman Anda. Anda dapat menguji file robots.txt menggunakan alat “Penguji robots.txt” di Google Search Console.
  6. Periksa Tag Meta robots: Pastikan halaman Anda tidak memiliki tag meta noindex. Cari kode <meta name="robots" content="noindex"> di bagian <head> HTML halaman Anda. Jika ada, hapus tag tersebut.
  7. Perbaiki Kecepatan Loading Halaman: Gunakan alat seperti Google PageSpeed Insights untuk menganalisis kecepatan loading halaman Anda dan mengidentifikasi area yang perlu ditingkatkan.
  8. Pastikan Sitemap XML Anda Terbaru: Sitemap membantu Google menemukan semua halaman di website Anda. Pastikan sitemap XML Anda terbaru dan telah dikirimkan ke Google melalui Google Search Console [Conductor].
  9. Pertimbangkan Membuat Sitemap Sementara: Jika Anda memiliki banyak URL yang berstatus “Di-crawl – saat ini tidak diindeks”, Anda bisa membuat sitemap sementara yang hanya berisi URL tersebut dan mengirimkannya ke Google Search Console [Onely].
  10. Validasi Laporan “Di-crawl – saat ini tidak diindeks”: Di Google Search Console, Anda juga dapat menemukan opsi untuk “Validasi perbaikan” pada laporan “Cakupan Indeks”. Setelah Anda melakukan perubahan yang diperlukan, ajukan validasi untuk memberi tahu Google bahwa Anda telah mengatasi masalah tersebut.

Kesimpulan

Meskipun status “Di-crawl – saat ini tidak diindeks” mungkin terlihat mengkhawatirkan, seringkali ini merupakan indikasi bahwa Google sedang mengevaluasi halaman Anda atau ada masalah kecil yang perlu diperbaiki. Dengan memahami penyebab umum dan mengikuti langkah-langkah yang disebutkan di atas, Anda dapat meningkatkan peluang halaman website Anda untuk diindeks oleh Google dan muncul dalam hasil pencarian.

Sumber: