TwitterでもMastodonでもフォロワーを選べば、その辺は管理できると思う。TwitterでRTばかりの人とかはフォローしないようにしているし。