关于买二手房的问题

尊敬律师，您好！我于4月底通过一家二手房中介公司购买了一套二手房，由于该房子的房东在四川成都上班，所以要回来签一次合同很不容易，但是在房产公司的要求下，他于本月初回来同我一起去办理了相关的手续，办理完后他又坐飞机返回了成都，但是很不幸，很快银行就查到我在银行信用系统里有不良信用记录，所以把我的按揭贷款申请驳了回来，（关于我有不良信用记录的事情我在此前也跟房产中介公司说过，但是由于我以前是在工商银行办理过助学贷款有不及时还款导致的不恶意超期，所以工商银行给我开了一张证明，证明我不是恶意超期的，房产公司说这个证明应该有用，所以我才会用我的名字去申请按揭的，不然我一开始就可以用我父亲的名义去申请的），现在的问题是，我的钱已经打到了那房东的卡里，购房合同我们也在房产中介公司签了。我现在打算以我父亲的名义去办贷款按揭，所以需要房东再回来一趟办理相关的手续，但是现在，房东以公司很难请假，路途太遥远为由，坚决不肯回来，我没办法，只好退款，但是那房东竟然提出说我要是想退款，就必须补偿他上次回来的一些损失，否则他坚决不退款！我想请问律师，我这种情况我该怎么要回我的全款？这个事情房产中介公司要负责吗？这个事情对我很重要，希望好心的律师能给予我解答！谢谢谢谢！