律师您好，我于今年2月21日，通过一中介，与房主陈某签订购买二手房合同，3月4日办理缴税手续

律师您好，我于今年2月21日，通过一中介，与房主陈某签订购买二手房合同，3月4日办理缴税手续。按口头约定，3月22日到4月2日期间，我们赔房主去还他的剩余贷款，完后进行过户。但是近几天房主特别不配合我们说的还款的事，经过几次沟通，房主表示现在不愿意把房子卖给我们，因为房子价格涨了。我们前期付了5万元的定金，他愿意还给我们，并象征性的赔偿我们2万块钱。（合同要求是双倍偿还）。请问我们该如何维权。