GoogleはFacebookページをクロールできますか？
GoogleがFacebookページをクロールできないとしばらく前に聞いたと思った。これは誰かのプライバシー設定の影響を受けると推測していますが、匿名ユーザーが私の壁を見ることができるページがある場合、Googleはこのページをクロールして関連する結果を返すことができますか？
Googleは、ログインしていないユーザーに表示されるもののみを表示できます。 Facebookは、Googleがプライベートプロファイルにアクセスすることを許可していません。これをテストするには、ユーザーエージェントをGooglebotに設定し、Facebookをクロールしてみてください（ログアウトしていることを確認してください）。
注意すべきことの1つは、 Googleは明らかにFacebookのコメントをクロールできる です。
Googleでfacebook obamaを検索し、最初の結果で>>をクリックすると、Obamasページのプレビューが表示されました。したがって、はい、グーグルはできますが、述べられているように-プライバシー設定はそれを防ぐことができます（そして防ぐべきです）。
- これがプレビューです。
sign inlog inボタンに注目してください。つまり、前述のように、すべてはログインしていないユーザーのように表示され、そのようにインデックスが作成されます。
Facebook.comのrobots.txtファイルも重要であり、Googleには次のエントリがあります。
User-agent: Googlebot
Disallow: /ac.php
Disallow: /ae.php
Disallow: /album.php
Disallow: /ap.php
Disallow: /autologin.php
Disallow: /checkpoint/
Disallow: /feeds/
Disallow: /l.php
Disallow: /o.php
Disallow: /p.php
Disallow: /photo.php
Disallow: /photo_comments.php
Disallow: /photo_search.php
Disallow: /photos.php
したがって、少なくともGoogleはこれらのファイルにアクセスしてクロールすることはできません。
さらに、Facebookは次のようにも言っています。
これらへのアクセスが許可され、拒否される場合は、sitemaps @ lists.facebook.comにメールを送信してください。
ユーザー設定が公開検索を許可するように設定されている場合、GoogleはFacebookのプロフィールページをクロールできます。ファンページは自動的にクロール可能です。