マイクロソフトは、存在しないイメージをクロールするようなバグをBingbotに導入しましたか？

Question

私は、Bingbotから/scale/jackets/00000086/80x80_P2_G1715325W.JPGなどのパスのリクエストを1日に数回受信し始めました。これは数日前に始まりました。

誰がこれがなぜなのか知っていますか？

Answer 1

以前に、GooglebotとBingbotの両方からこのタイプの動作を見てきました。クローラー自体のバグによって引き起こされることはほとんどありません。通常、サイトへのリンクまたはページ内のテキストURLがそのように見えるWebサイトのクロールによってバグが発生します。

それが起こるとき、それはほとんど常にあなたのコンテンツをコピーして別のサイトのコンテンツと再混合したスクレーパーサイトです。検索エンジンをスパムするためにそのようなサイトを構築する人々は通常、リンクにあまり注意を払っていません。

残念ながら、Bing Webmaster Toolsはwhereそれがクロールしたリンクを見つけたことを知らせません。ページに見つかったリンクの数のみを示します。 Googlebotがこれらのリンクのクロールを開始すると、Googleウェブマスターツールでそれらのソースを見つけることができるはずです。