大規模クローラー、クローラーのワーカーが並列でキューから順に処理して行ってるのをみると、よしよしって気分になるね。