二手房交易法律咨询

您好！我在中介买了一套二手房，已与买家签了合同，交了2万定金，同时交了1万中介费。签合同前中介承诺可以贷70万的公积金和商业组合贷款，并且由他们代为办理，但现在送材料到银行审核发现，由于我在4年前买过房贷过款（已卖出，现名下无房产，且贷款已还请），按照现有国家贷款政策，只要有贷款记录，就需执行第二套房政策，首付上提至6成，且利率上浮。实际上按照当时签合同谈妥的，我只能凑齐4成的首付，因此导致交易无法完成。
另外，中介现在说通过特殊渠道可以以纯商业贷款的形式贷到70万贷款，但是考虑到纯商业贷款的利率较公积金利率高出太多，我难以承受。况且也不符合国家政策规定，与当时的承诺根本不一致，因为我买前就说要贷公积金贷款，况且也不知是否可信。
现在我该怎么办？我交出去的定金和中介费能否要回？当时合同上对贷款问题没有特别约定。请专家给予指导！非常感激！