Googleウェブマスターツールが15,000件のリンクを404エラーとして報告するウェブサイトを持っています。ただし、すべてのリンクは、アクセスすると200を返します。問題は、これらのページにアクセスして200を返すことはできますが、15,000ページすべてがGoogleでインデックスに登録されないことです。検索結果には表示されません。
これらは、Googleウェブマスターツールが報告し続けるエラーであり、問題が何なのかわかりません。 DNSの問題を考えましたが、DNSの問題ではないはずです。もしそうなら、ページはインデックス化されません(10,000が完全にインデックス化されています)。
URLパラメーターに関して、私のページはURLパラメーターの類似性を共有していないため、エラーの原因を明らかにすることができます。
Googleでは Googlebotとして取得 オプションを Googleウェブマスターツール の一部として提供しています。
このツールを使用して、Googleのサーバーからページを取得します。定期的に誰もアクセスできないウェブサイトのダウンタイムではなく、Googleからの接続に問題があるか、Googlebotユーザーエージェントに問題があるかがわかります。
これらの404にnoindexを一時的に配置することをお勧めします。2/ 3がインデックスに登録されていないサイトには非常に有害です。
次に、実際の問題を徐々に特定します。リンクを公開できないため、実際の問題を特定することはできません。
しかし、「Googleがページをインデックスに登録しなかった理由」で多くのソースを見つけることができると確信しています。