Verisignが私のWebサイトをスパイダーしているのはなぜですか？

Question

ログでは、Verisignである69.58.178.57が、フォームのページを除く、Webサイトのすべてのページをスパイダーしていることに気付き続けています。なぜ彼らがこれをしているのか知っていますか？

Answer 1

毎日のマルウェアスキャンに関連している可能性があります。[ CNet 、 PDF @Verisign ] SSL証明書の顧客へのサービスとして自動的に実行されます。そのIPからのクロールが停止するかどうかを確認するために、常に一時的にサービスをオプトアウトできます。