참조 페이지 그래프에 왜 울퉁불퉁한 선이 있을까요?

참조 페이지의 그래프에 여기에 표시된 것처럼 때때로 울퉁불퉁한 선이 나타납니다.

예를 들어, 한 주 동안 도메인의 페이지를 크롤링할 때, 기존 페이지의 중복 페이지가 있는지 확인합니다.

이 중복 페이지를 찾으면(예: 검색 페이지 및 포럼 페이지) 다음 주에 이를 삭제합니다.

그리고 나서, 다시 새로운 페이지 집합을 크롤링합니다.

이렇게 하면 그래프에서 관찰될 수 있는 울퉁불퉁한 선이 발생합니다.