বোয়ালখালীতে কেন্দ্র দখল, এজেন্ট বের করে দেওয়ার অভিযোগ