中介合同解除后不退中介费合理吗

我与前两日在烟台芝罘区幸福中路新世纪花园旁宝帝房地产登记租房信息，后一天中介打电话说有人看房并签订租房合同，合同上没有任何字样说明中介有任何权利在房屋没有完全成交前收取中介费用，租房的人由于不认可我的宽带租房人不租了，合同当时解除，租房人并找社会人恐吓我，扬言要打架，中介在这些强势作用下退还租房人中介费，说继续帮忙往外出租房屋，所以，中介费不退，而第二天打电话给我说在帮忙往外租房的话我还需要在交一次中介费，理由是上次房屋没有出租成功是因为我的原因，而我看租房合同上都是甲方和乙方，作为中介的丙方并没有任何责任和义务，但也没有任何权利和条文说明有权在房子为成交钱扣留全部或部分在中介费用，但中介就是赖着不给，现在我的房子自己出租出去了，请问我有什么方法能要回中介费用呢？