签订一手楼盘购买合同后无法退款

购买一手楼盘，合同签订付全款的三分之二，尾款贷款支付，后因对于开发商交楼时间、户型情况有异议，未按合同支付尾款，并起诉到法院要求开发商退房，经审判后，被法院驳回诉讼。现在购买人不想继续履行购房合同了，涉及到的合同违约金自愿承担，可是开发商不同意，只要求购买人交尾款，如果不想交就鼓励购买人继续去法院起诉。请问这种情况应该如何处理？ 事情拖了几年，开发商就是不退房款，违约金承担都不行。