En raison de l'immense quantité de données que le bot Ahrefs doit constamment explorer / re-crawl, son algorithme inclut certaines règles de priorité.

Pour cette raison, il y a une liste spécifique de pages que nous avons dans notre index.
​
Si vous ouvrez un site dans Explorateur de site, vous pouvez voir le nombre de pages Crawled lorsque la métrique "Pages Crawled " est sélectionnée pour le graphique Performance.

Ceci est le nombre exact de pages actuellement dans notre index pour le mode que vous avez choisi (domaine avec sous-domaines, domaines sans sous-domaines, URL exacte ou préfixe).

Maintenant, si vous voulez voir ce que sont ces pages, vous pouvez aller au rapport Meilleurs par liens dans Site Explorer. Vous pouvez le trier en fonction des meilleurs liens internes ou externes :

On s'attend à ce que le total des pages du rapport Best-by-links ne corresponde pas au numéro de pages crabées de la vue d'ensemble. Ceci est dû au fait qu'il contient également des liens vers des pages que nous avons trouvées dans le site web cible, mais pas encore indexées.