Googleクローラーとキャッシュされた結果の問題
3つのドメイン名を持つクライアントがあります。この議論のために、私はそれらをwww.website1.com、www.website2.com、およびwww.website3.comと呼びます。
彼は以前、VistaPrintを備えたWebサイトパッケージを所有しており、www.website1.comは彼の主要なビジネスWebサイトであり、メインWebサイトにリダイレクトするために使用されるwebsite2およびwebsite3でした。
しかし最近、彼のために新しいWordPressウェブサイトを作成しました。現在、彼のメインドメイン名はwww.website3.comで、website1とwebsite2は単にメインWebサイトにリダイレクトしています。
しかし、Googleにアクセスしてドメイン名（3つのうちいずれか）を検索すると、Webサイトの説明が表示されず、次のように表示されます：このサイトのロボットのため、この結果の説明は利用できません。 txt –詳細はこちら。
以前はrobots.txtファイルを使用していましたが、クライアントのホストに移行してから削除しましたが、その間にGoogleがインデックスを作成したようです。私はホスティング会社と連絡を取ったが、彼らはそれが仮想ファイルであり、物理的に存在しないと言った-そして、Googleの説明に関する問題はウェブサイトをインデックスしているために発生しているロボット.txtがありました。
Website1およびwebsite2へのすべての参照をGoogleから削除し、メインのビジネスWebサイトであるwww.website3.comをインデックスに登録するだけで、サイトの正しい説明が必要です。
私のオプションは何ですか？ Googleウェブマスターツールにログインしましたが、ファイルがまだあると表示されます。
私が何を達成したいのか理解していただければ幸いです。
クライアントのオンラインプレゼンスと評判を損なう前にこの問題をできるだけ早く解決したいので、アドバイスは大歓迎です
Robots.txtファイルを削除するのではなく、すべてのクロールを明示的に許可するファイルをアップロードする必要があります。
User-agent: *
Disallow:
Robots.txtファイルを削除する際、Googleは一定期間（場合によっては数週間）古いファイルを使用して、誤って削除していないことを確認します。