AIクローラー、サービスが落ちるレベルでクロール掛けてくるの、まじでなんなんだ。作ってる人達が若すぎて、検索クローラーの行儀がどうたら言ってた時代を知らないんだろうな。