二手房买卖纠纷

我通过中介买了套二手房，看房·签合同都是卖方委托她弟弟办的，卖方签订的有委托书。卖方房产证还未解压，签合同时卖方答应一两天解压。中介收了5500元的中介费，给了卖方10000元的定金。合同上规定3月15日之前交首付14万。中介约定双方12日交首付并同时办理银行按揭贷款手续。但是11日晚卖方姐弟俩找到买房家中想让换中介，还说此房是房主离婚后购买，但现已结婚不想让现在的丈夫知道此财产，并说办理银行业务时她丈夫不能到场等等。我没答应她的要求。12号只有房主一人到场，导致银行业务无法办理不了了之。15日中介约定买卖双方在银行交易，但卖方的丈夫并不是真人而是前任房东。买方感觉事有蹊跷未交首付，并发现合同上受托人签的委托人的身份证号与其身份证不符。合同上交首付的日期中介打成了2012年3月15日之前。（应是2013年3月15日之前）买方决定退房并要求卖方退回定金，经中介3次协商未果。卖方不退定金。我该怎样维权？