ウェブサイトに自分のコンテンツを削除するように依頼しましたが、ページ全体を削除しました(404)。サイトマップで、彼らはボットにページが毎週変わることを伝えます。
1週間前に彼らはページを削除しましたが、結果はまだGoogle SERPに表示されます。どうして可能ですか?
Googleのインデックス作成動作は、新しいページをすばやく見つけるために最適化されており、古いページの消失に気付くためではありません。一般に、これは理にかなっています-Googleを検索するとき、何かを見つけたいので、not表示されたばかりの新しいページを見つけることは通常、時々送信されるよりもはるかに大きな失敗です以前は存在していたが、もう存在しないページ。その上、最も人気のあるWebページは通常は表示されません。表示された場合、それは多くの場合、サーバーの中断による一時的な問題です。
特に、Googleは通常、削除されたページをインデックスに保持します:
ページを再クロールし、404
応答を返すことに気づきます。
これは連続して何度も発生するため、Googleのアルゴリズムはページがおそらく戻ってこないと判断します。
したがって、削除されたページがGoogleのインデックスに数週間または数か月も残ることは珍しくありません。特に、それらが表示されたサイトのランクが比較的低いため、Googleによって頻繁に再クロールされない場合です。
Googleのインデックスからページをすばやく削除したいdoというまれなケースでは、次の2つのことができます。
Googleのウェブマスターツールを使用して、ページの 削除リクエストを送信する をサイトの所有者に依頼できます。
ページが既にサイトから削除されている場合は、 GoogleパブリックURL削除ツール を使用して、Googleにページを再クロールし、インデックスから削除します。
上記のどちらの方法でも、1日程度でGoogleのインデックスからページが削除されるはずです。ページにインデックスが付けられている場合 複数のURLの下で の場合、それらすべての削除リクエストを提出する必要があることに注意してください。
完全を期すために、John Condeが答えで示唆しているように、ページが存在するサイトのウェブマスターに、通常の410 Gone
ではなく404
応答を返すようにWebサーバーを設定するよう依頼できます。これはnotGoogleによるページの再クロールを高速化しますが、410
reponseは、ページがおそらく戻ってこないことをGoogleに通知します。
また、Googleが唯一の検索エンジンではないことを忘れないでください。コンテンツを完全にWebから取得するには、削除リクエストを Bing 、 Yandex 、およびインデックスを作成した他の検索エンジンでファイルする必要もあります。 (場合によっては、運が悪い場合があります。たとえば、 Baid で見つけることができる唯一のURL削除手順は、ヘルプデスクアドレスへの電子メールの送信に関するものです。) Wayback Machine 、またはそのようなアーカイブは検索できませんが、ページが以前どこにあったかを知っている人は、アーカイブされたコピーを見つけることができるかもしれません。それを問題とみなすかどうかはあなた次第です。
Googleのインデックスが追いつくのに時間がかかります。彼らはページを再クロールする必要があり(まだ発生していない可能性があります)、404応答を取得します。しかし、それは一時的なエラーである可能性があるため、すぐには対応しません。ページが永久になくなったのを見て初めて、インデックスからページを削除します。
ページの削除は意図的かつ永続的であるという410 GONE
応答を送信すると、結果が速くなる可能性があります。
サイトマップで、彼らはボットにページが毎週変わることを伝えます。
また、サイトマップの変更頻度は、検索エンジンにとって単なるヒントです。彼らはそれを尊重する必要はありません-彼らはまだ毎日一緒に来ることができます、または彼らは週をスキップすることができます。