Di Ahrefs, kami crawl halaman sesuai dengan algoritma khusus yang memastikan penggunaan sumber daya kami secara efisien tanpa mengurangi kualitas data.

Jadi jawaban singkatnya adalah dapat memakan waktu beberapa hari hingga beberapa minggu sebelum kami crawl tautan balik baru Anda.

Beberapa pertimbangan algoritma crawl kami meliputi: prioritas crawl (berdasarkan DR), kecepatan crawl atau pembaruan untuk halaman tertentu (berdasarkan UR), jumlah halaman dalam situs dan jumlah tautan balik baru yang ditemukan.

Secara umum, semakin "populer" suatu situs (yaitu Peringkat Domain (DR) yang lebih tinggi, tautan balik berkualitas lebih banyak), semakin besar kemungkinan domain tersebut akan di-crawl. Domain yang kurang "populer" (yaitu DR yang lebih rendah, tautan balik berkualitas lebih sedikit) akan di-crawl sebagian.

Kecepatan crawl dan pembaruan halaman tertentu tergantung pada Peringkat URL (UR) mereka. Halaman dengan UR lebih tinggi memiliki peluang lebih besar untuk diindeks dan diperbarui lebih sering, dibandingkan dengan halaman yang memiliki rating rendah.

Perhatikan bahwa jika situs web dengan DR rendah memiliki banyak halaman, kami tidak akan dapat mengindeks semua halaman tersebut. Selain itu, frekuensi re-crawling akan relatif lebih rendah.

Di sisi lain, jika situs web memiliki skor DR tinggi dan hanya beberapa halaman, bot kami akan re-crawl semuanya sesering mungkin.

Hal penting lainnya yang perlu diperhatikan adalah jumlah tautan balik baru. Setelah AhrefsBot menemukan setiap tautan balik baru yang menuju ke halaman tertentu, prioritas crawl-nya akan ditingkatkan.

Sebaliknya, jika tidak melihat tautan balik baru yang datang ke halaman tertentu untuk waktu yang lama, bot tidak akan re-crawl halaman tersebut sesering itu.

Catatan: Algoritma kami lebih kompleks dari yang disebutkan di atas dan mempertimbangkan aturan lain untuk menentukan tingkat prioritas setiap halaman tertentu.