メインコンテンツにスキップ
すべてのコレクションサイト監査よくある質問とトラブルシューティング
サイト監査でウェブサイトを素早くクロールするにはどうすればよいですか?
サイト監査でウェブサイトを素早くクロールするにはどうすればよいですか?

クロール速度を上げる方法と、クロールを完了するのに時間がかかりすぎる場合の最適化方法

Rebekah avatar
対応者:Rebekah
今週アップデートされました

1. クロール速度の増加

所有権の確認 はスピードを上げるために必要なステップですが、それ自体はスピードを上げません。 代わりに、この は、高度な設定を有効にし、好きなだけ速くクロールできます。 (つまり、これは所有者である場合にのみ適用されます。

  1. プロジェクト設定から「オーナーシップの確認」をクリックします。

以下の確認方法を使用できます。

  • Google Search Console: Google アカウントを接続し、Search Console データにアクセスできるようにします。 Google Search Consoleでウェブサイトが認証されている場合、Ahrefsで自動的に認証されます。

  • HTMLファイルアップロード: 認証ファイルをダウンロードし、ドメインのルートフォルダにアップロードします。 ファイルを改ざんしたり名前を変更したりする必要はありません。

  • TXTレコード: ドメインのDNS設定にテキストレコードを追加します。

  • HTMLタグ: ウェブサイトのホームページコードにメタタグを追加します。

注意: Wordpressのサイトについては、HTMLタグ を使用して確認するために、ここで具体的な指示を参照してください。


2. "サイト監査"の"クロール設定"に進んで、確認済みドメインのクロール速度設定を調整します。 送信するリクエストが多いほどクロール速度が速くなります。

例: リクエスト間の遅延を 0 に減らすことができます。

2. クロールされたページの最適化/減少

あなたのサイトに500kのURLがある場合、クロール速度を上げるために所有権を確認しても、これらのページのすべてをクロールするには長い時間がかかります。

多くの場合、もう1つのオプションはクローリングされるページ数を最適化(減少)して、クロールから重要なデータをより早く受け取ることです。

クロールからページを除外する方法については、 このリンクをご覧ください。

例えば、数千の製品ページを持つ巨大なeコマースストアを運営している場合、その日までに作成および削除されます。 "Remove URL parameters" のようなオプションを使用すると、これらのページをクロールし、重要なデータに集中することができます。

こちらの回答で解決しましたか?