Googleにクロールさせたいすべてのリンクを含むサイトマップページを送信するとしますが、サイトマップを送信する代わりに、ページとリンクされたページを取得し、Googleにインデックスを作成させます。これらのボットは何レベルのサブページをクロールしますか?チェーンリンクされたページをクロールしますか、または取得した親サイトマップページ上のリンクのみをクロールしますか?
「古い」GSCの状態:
このURLとその直接リンクをクロールする
したがって、それはちょうど1レベルの深さです。
「新しい」GSCの「URLインスペクションツール」は、同様のオプションを提供するようには見えず、私が知る限り、1つのURLのみをクロールします。
私のサイトには、XMLサイトマップがありますが、その中に「実際のコンテンツ」のみを含めます(したがって、WordPressでは、posts
とpages
は含みますが、tags
とcategories
は含みません)。その上にあるリンクを完全に制御し、それらのリンクのテキストを固定します。
コンテンツ内のナビゲーションと内部リンクを組み合わせたこれらのサイトマップは、サイトの「実際のコンテンツ」をインデックスに登録するのに十分でしたが、サイトマップに送信したすべてのURLがインデックス登録されていません。
私が言っているのは、Googleが望むものは何でもクロールし、サイトマップはクローラーへの単なるヒントだと思います。 Search Consoleを使用してページを取得しても、Googleがそれらをサイトのインデックスに含める保証はありません。
Googleに気付かせたい良いコンテンツがある場合、そのための最善の方法は、おそらくそのコンテンツへの外部リンクがあることを確認することです。これは、TwitterでURLを共有するかFeedburnerを使用するのと同じくらい簡単です。