Terkadang, bot kami: AhrefsBot mungkin diblokir oleh Cloudflare Firewall yang mencegahnya melakukan crawl pada website.
Jika Anda ingin menghilangkan pembatasan ini, ikuti langkah-langkah di bawah ini.
Masukkan ke daftar putih menggunakan aturan khusus
Masuk ke Cloudflare dan pilih domain.
Buka Keamanan > Aturan keamanan.
Klik Buat aturan, lalu pilih Aturan khusus.
Beri nama aturan tersebut, misalnya “IP Ahrefs”.
Di bagian Saat permintaan masuk cocok... , atur Bidang ke “Alamat IP Sumber”, Operator ke “ada dalam”:
Lihat daftar rentang dari https://help.ahrefs.com/id/articles/78658-what-is-the-list-of-your-ip-ranges di bagian “Crawler kami menggunakan rentang berikut:”
Kembali ke halaman Cloudflare dan tekan “Edit ekspresi” di sisi kanan “Pratinjau ekspresi”
Tempelkan daftar rentang di antara tanda kurung kurawal
{}Salin daftar alamat IP individual dari https://help.ahrefs.com/id/articles/78658-what-is-the-list-of-your-ip-ranges di bagian “Dan alamat IP individual berikut di luar rentang ini:”
Kembali ke halaman Cloudflare, letakkan kursor setelah
202.8.40.0/22dan sebelum}), lalu tekan tombol SpasiTempelkan daftar alamat individual dari papan klip
Tekan “Gunakan pembuat ekspresi” untuk melihat daftar jaringan dan alamat IP dalam tampilan yang lebih rapi.
Di bagian Lalu lakukan tindakan, atur tindakan menjadi “Lewati”.
Di bagian Komponen WAF yang akan dilewati, aktifkan: “Semua aturan khusus yang tersisa, Semua aturan pembatasan laju, Semua aturan terkelola, dan Semua aturan Mode Pertarungan Bot Super”.
Opsional: biarkan “Catat permintaan yang cocok” tetap aktif.
Atur urutan penempatan sesuai kebutuhan dan terapkan aturan tersebut.
Anda dapat merujuk ke gambar ini untuk mengonfirmasi pengaturan aturan:
Ini akan berfungsi untuk sebagian besar situs web dengan pengaturan generik. Jika tidak berfungsi untuk Anda, silakan hubungi Cloudflare Support.
Jika Anda menggunakan Cloudflare dengan manajemen bot
Di bagian Saat permintaan masuk cocok...:
pilih Bidang = “Deteksi bot”, Operator = “ada dalam”, Nilai =
(any(cf.bot_management.detection_ids[*] in {121451232 133933265}) and cf.bot_management.verified_bot)Tambahkan Bidang = “Bot terverifikasi”, lalu aktifkan.
Di bagian Lalu lakukan tindakan:
Pilih tindakan = “Lewati”
Di bagian Lalu lakukan tindakan, atur tindakan menjadi “Lewati”.
Di bagian Komponen WAF yang akan dilewati, aktifkan: “Semua aturan khusus yang tersisa, Semua aturan pembatasan laju, Semua aturan terkelola, dan Semua aturan Mode Pertarungan Bot Super”.
Opsional: biarkan “Catat permintaan yang cocok” tetap aktif.
Atur urutan penempatan sesuai kebutuhan dan terapkan aturan tersebut.


