web-dev-qa-db-ja.com

GooglebotはアンカーにないURLを発見できますか?

Search Consoleで、404が突然増加しました。これらは、サイト内のファイルをテーブルにリストしたWebページからリンクされていましたが、これらのURLはいずれも<a>タグ内にネストされていませんでした。

これは、私が質問することになったページで見つけることができるURLの唯一のインスタンスでした。Googleは<a>タグにない場合でもURL文字列に従いますか?

5
GrapeSoda

はい、URLのように見えるものはすべてクロールします。テストを行いました(ドイツ語ですが、red = "not crawled"およびgreen = "crawled"): http://www.sirpauls.com/welchen-links-folgt-google-ein-experiment/

Googleは次のようなものをクロールしました

<script>var test="www.example.net/page.html";</script>

または単に

www.example.net/page.html

だから彼らはURLパターンだけを探すと思う。

9
Milo Tischler