Googleは、リンクのないドメインをどのように見つけますか？
最近、新しいドメインを登録し、既存のサーバーを指定して、「テスト」と言うだけの最小限のページを設定しました。
今夜、ページが既にGoogleでインデックス登録されていることを発見しました。このサイトへのリンクはありません（ドメインについてはまだ何もしていないので、ドメインについては誰にも話していません）。
GoogleはWHOISレコードなどをトロールしていますか？
それらはレジストラです 。インデックスに登録する新しいサイトを見つけるために彼らがそれを使用できなかった理由がわかりません。
少なくとも3つの方法があります。
- サイトへのリンク。
- Googleウェブマスターツール（現在はSearch Console）の使用
- レジストラのダンプ、トリガー、およびその他のオプション。
Googleは、いくつかのレジストラから多くの新しいサイトをすばやく見つけます。たとえば、GoogleはGoDaddyを使用して登録した1つのドメイン名を見つけてインデックスを付け、ドメイン名を登録してから20分以内に検索結果の送信を開始しました。ただし、これはすべてのレジストラで発生するわけではありません。
他の方法もありますが、これらが最も一般的です。
Googleにサイトについて迅速に知らせたい場合、最良のオプションは、Googleウェブマスターツール（現在はSearch Consoleと呼ばれる）を使用して送信することです。
@zigojackoは、コメント内で本当に重要なポイント（！）を持ち出しました。 Google+アカウントをお持ちの場合は、ウェブサイトにリンクするだけで、すぐにGoogleに反映されます。速くなければ、少なくともWMTアカウントを作成するのと同じくらい速いです！
[ヒント]
サイトマップとrobots.txtファイルは、ドメイン検出とは関係ありません。実際、サイトマップは、非常に大きなサイト、すべてのページがリンクされているわけではないため完全にクロールできないサイト、ペイウォールのあるサイト、またはログインのあるサイトを除いて、ほとんどのサイトでは役に立ちません。サイトマップは、上記の理由以外の検索パフォーマンスとは関係ありません。同様に、robots.txtファイルが空であっても作成することを常にお勧めします。