数か月間リクエストされた説明できない存在しないページ
WordPressおよびphpMyAdminに使用されるよく知られているページを要求するボットにアクセスできるサイトにはかなり慣れていますが、今では説明できないページを要求するボットに対処しています。
現在、数か月間、フランス、ドイツなどの国の複数のIPアドレスから、過去6か月間、/featured/like?id=XXX（XXXは3桁の整数）ページが1日10回以上要求されています。ウクライナ（サイトはオランダでホストされ、ターゲットにされています）。
このページは存在せず、どの検索エンジンでもインデックス付けされていません。
これは、フレームワークで使用されているページを見つけようとする別のボットに近いと確信していますが、数か月間続いているので、確認したいだけです。
このページがリクエストされ続ける理由を誰もが知っていますか？
うーん...
ロボットがサイトにアクセスするのを防ぐ簡単な方法は、次の2行をサーバーの/robots.txtファイルに追加することです。
User-agent: *
Disallow: /
これを1日置いて、何が起こるか見てみてください。これは、行儀の良いロボットでのみ役立ちます。
ただし、そのページを具体的に禁止する場合は、
Disallow: /featured/
それをして、何が起こるか見てください。