当サイトでは Cloudflare を利用しています。
Cloudflare が「AI クローラー」のブロッキングサービスを始めたとのことなので、ブロック設定のチューニングを実施しました。
今まで「既知のボット」っていう大まかな括りで許可/拒否だったのが、種類別に許可/拒否できるようになったようです。
(AIクローラーのブロックはこれを使って実現している模様)
bot のアクセス許可設定を見直し、「AI クローラー」以外にも「検索エンジン最適化 (SEO)」「フィード収集系」「アグリゲーター」の特性を持った bot をブロックするようにしました。
また、従来より存在している「Bot Fight Mode」も有効化しました。
これにより、bot と思わしきアクセスは自動的に bot チェックが入るようになります。
※尚、この措置は管理者が管理している Cloudflare 使用のすべてのWebサイトで適用となります。
以上、宜しくお願いいたします。