京都大学のクローラー、ちゃんと名乗れよぉ。python-requests/2.24.0じゃないだろぅ。
クロール掛けるなら、せめてメアドかURLの連絡先は欲しいわね。特に1秒以内に2回以上リクエスト投げてくるようなやつは。
思考の /dev/null
クロール掛けるなら、せめてメアドかURLの連絡先は欲しいわね。特に1秒以内に2回以上リクエスト投げてくるようなやつは。