ページの読み込み速度はクロール速度に影響します
サイトで1日あたりにクロールされるページの合計数が大幅に減少していることに気付きました。Googleウェブマスターツールのクロール速度を制御できないため、Googleによって変更された可能性があります。しかし、それはかなり大きなサイトであり、クロール速度が低下するとは思わなかったでしょう。
私たちが気づいたのは、ページの読み込み時間が大幅に増加することです。私の考えでは、これが原因です。クロール速度がページの読み込み時間と直接相関しているかどうかを確認できる人はいますか？論理的で、ページのロード時間が長く、クロールされるページが少ないようです。
これに関するきちんとしたドキュメントをいただければ幸いです。通常、SEOに関する情報はありませんので、これは私にとって新しいことです。
Googleは、サイトが高速の場合はクロールが多く、サイトが低速の場合はクロールが少ないことを確認できます。
Googleウェブマスターツールでは、「クロールレート」グラフがこれを完全に示しています。 「ページのダウンロードに費やされた時間」は、ほとんどの場合、「1日あたりのクロールされたページ」グラフと「1日あたりのダウンロードされたキロバイト数」グラフに反比例します。 Googlebotのクロール割り当ては、Googlebotがサイトからのダウンロードに費やすことをいとわない合計時間の観点から見たようです。
サイトのパフォーマンスを改善したウェブマスターからの直接のレポート これにより、Googlebotのクロールが大幅に増加しました。この記事には、Google Webmaster Toolsのクロール速度グラフのスクリーンショットが含まれており、逆の関係をうまく示しています。
