অধীরকে হটানোর ডাক মানস অনুগামীদের, পথে কংগ্রেস দ্বন্দ্ব