加盟商存在欺骗性质收取加盟费

你好，唐律师，我的情况是这样。2017年与加盟商签了合同，但是后来才知道是被骗的，最开始和加盟商都说好了在成都加盟费用12万，后来又说成都不能开单店加盟必须拿代理，一个代理250万元，我就很犹豫，因为其他地方人流不大，这个加盟费用贵就一直在考虑和考察其他地方，5月中旬左右加盟商发微信告知6月1日前全国加盟费都会改成27万，在5月30日晚上我就转了12万加上保证金一共15万给他，现在我在绵阳租了一年的房子找商铺准备开店，昨天我突然想到叫朋友冒充加盟者去问他一下，看是不是跟我说的情况一样，加盟费涨价和不予许成都重庆开单店，结果朋友一问那边说的是可以开店，加盟费是27万，合同已经签了，但是我现在不想和加盟商合作，因为一开始就以这种方法让我加盟，后面我不知道还会以什么方法，对他们不信任了，我想知道我这种情况该怎么办，能退回加盟费追究他们的责任吗？