次のURLの下にページを作成しました:example.org/dev
開発が終了したので、ページをexample.org/
のルートに移動しました
何らかの理由で、Googleは開発中にページのインデックスを作成しました。したがって、Googleは(Wordpress)404を生成した場合でも、example.org/dev
につながる結果を表示します。
これらのページを削除するようGoogleに指示するにはどうすればよいですか?今のところ、次の内容のrobots.txtを作成しました。
# robots.txt
User-agent: *
Disallow: /dev/
他にできることはありますか?
最善の方法は、dev
ディレクトリ全体をメインドメインにリダイレクトすることです。 Googlebotが次にクロールするときに、移動されたことがわかります。次に、インデックスからdevページを削除し、メインサイトのみを含めます。
リダイレクトは。htaccessのように実装できます:
Redirect permanent /dev/ http://example.org/