En Ahrefs, cortamos páginas de acuerdo a un algoritmo específico que garantiza un uso eficiente de nuestros recursos sin comprometer la calidad de los datos.

Así que la respuesta corta es que puede tardar unos días hasta unas semanas antes de que nos rastreemos su nuevo backlink.

Algunas consideraciones de nuestro algoritmo de cangrejo incluyen: prioridad de cangrejo (basada en DR), velocidad de crawl o actualización para páginas específicas (basadas en la UR), número de páginas en un sitio y el número de nuevos backlinks descubiertos.

En general, cuanto más “popular” un sitio es (es decir, una clasificación de dominio más alta (DR), más enlaces de retroceso de calidad), más probable es que un dominio se rastree. Los dominios que son menos “populares” (por ejemplo, DR más bajo, menos enlaces de respaldo de calidad) se rasgarán parcialmente.

La velocidad de rastreo y actualización de páginas específicas depende de su valoración de URL (UR). Las páginas con más alta UR tienen mayores posibilidades de ser indexadas y actualizadas más a menudo, en comparación con las páginas con una baja calificación.

Tenga en cuenta que si un sitio web con un DR bajo tiene muchas páginas, no podremos indexar todas esas páginas. Además, la frecuencia de retractación será comparativamente menor.

Por otro lado, si un sitio web tiene una alta puntuación DR y sólo unas pocas páginas, nuestro bot volverá a raspar todos ellos tan a menudo como sea posible.

La otra cosa importante que hay que señalar es el número de nuevos backlinks. Una vez que AhrefsBot descubra cada nuevo backlink apuntando a una página determinada, aumentará su prioridad de rastreo.

En consecuencia, si no ve ningún nuevo backlinks que llegue a una determinada página por mucho tiempo, no lo volverá a rasgar con frecuencia.

Nota: Nuestro algoritmo es más complejo que el mencionado anteriormente y toma en consideración otras reglas para determinar el nivel de prioridad para cada página en particular.