Search Consoleで、404が突然増加しました。これらは、サイト内のファイルをテーブルにリストしたWebページからリンクされていましたが、これらのURLはいずれも<a>
タグ内にネストされていませんでした。
これは、私が質問することになったページで見つけることができるURLの唯一のインスタンスでした。Googleは<a>
タグにない場合でもURL文字列に従いますか?
はい、URLのように見えるものはすべてクロールします。テストを行いました(ドイツ語ですが、red = "not crawled"およびgreen = "crawled"): http://www.sirpauls.com/welchen-links-folgt-google-ein-experiment/
Googleは次のようなものをクロールしました
<script>var test="www.example.net/page.html";</script>
または単に
www.example.net/page.html
だから彼らはURLパターンだけを探すと思う。