web-dev-qa-db-ja.com

Googleは、バックリンクなしでサブドメインを見つけてクロールできますか?

Googleはレジストラで確認することでドメインを見つけることができますが、バックリンクなしで新しいサブドメインを見つけることができますか?

私は彼らがDNSレコードをチェックすることでできると思いますが、誰でも確認/拒否できますか?

2
deadghost

ケーススタディを行わずに言うのは難しいですが、Googleが人気/重要ページと見なす場合、Googleはそれらのページを見つけると言います(これらのページの訪問がゼロの場合、Googleはどこからも情報を収集しません)ケーススタディを行うには、単純なランディングページを作成し、robots.txtを介してそのページをブロックして、Googlebotがクロールしないようにし、すべての訪問者をサブドメインにリダイレクトします(実際には、サブドメインを試してはいけません。 /xyz.htmlを使用し、サイトマップにもリンクしないでください))。

ただし、Googleは人気のあるコンテンツや重要なコンテンツのインデックスに製品情報(Chromeユーザー履歴、GoogleパブリックDNSなど)を既に使用している可能性があるため、Googleがコンテンツのインデックスを作成すると思います。

NofollowリンクがGoogleによって直接クロールされないことは誰もが知っています。そのため、ユーザーがソーシャルメディア(すべてのリンクでnofollowタグを使用)で情報を共有し、多くの訪問者がそれらのコンテンツを読んでいる場合、サイトマップ/リンクを最初にチェックせずに、Googleがそのページをより速くインデックス登録することを確認します。

Webは大きすぎます。彼らはすでに backlinksとPagerankに基づく 以外の多くのクローラーを実装しているかもしれません。

Googleは、クロール/ランキングに関する情報を2003〜2007年と比べてあまり共有していないため、何も確認できません。

1
Goyllo