Apa yang memicu masalah ini?
Masalah ini melaporkan semua URL dalam file sitemap website yang mengembalikan salah satu dari kode status HTTP 4xx (Client error).
Mengapa ini penting?
File sitemap dari sebuah website harus mencantumkan semua halaman yang Anda inginkan untuk di-crawl dan diindeks oleh mesin pencari. Selain itu, Google menggunakan data sitemap sebagai salah satu faktor dalam memilih URL kanonikal.
URL 4xx dalam sitemap mengirimkan sinyal yang menyesatkan kepada mesin pencari, menginstruksikan mereka untuk mengindeks URL yang tidak ada (kode 404 (Not Found) atau 410 (Gone)) atau URL yang tidak dapat mereka akses (401 (Unauthorized), 403 (Forbidden), dan lainnya). Anda dapat memeriksa daftar lengkap kode status HTTP 4xx.
Hal ini dapat menyebabkan mesin pencari, seperti Google, mengabaikan sitemap Anda. Dalam hal ini, Anda mungkin akan mengalami beberapa masalah indexability pada website Anda.
Bagaimana cara memperbaikinya?
File sitemap Anda hanya boleh menyertakan URL yang aktif dan mengembalikan kode respon 200 (OK).
Hapus URL 4xx dari sitemap Anda. Jika halaman tersebut seharusnya di-crawl dan diindeks, ubah statusnya menjadi 200 (OK).
Catatan:
Kode respon HTTP 429 (Too Many Requests) mungkin menunjukkan bahwa kecepatan crawling yang ditetapkan dalam pengaturan crawl untuk Proyek Anda terlalu tinggi untuk web server. Kurangi kecepatan tersebut di pengaturan crawl dan jalankan Crawl ulang Proyek.