フォロワーから死んでるサーバの人をブロックして、ブロック解除（ブロック自体がTLの負荷になる）すると、改善するかも。