房产买卖纠纷

不久前，我卖自己住房给赵某，因两人是熟人，当时在中介所签订了一份买房预订合同，内容也很简单，内容只说明了买方交了一万元定金，如果买方不买，定金不退，如果卖方不卖将付买方2万元赔偿。过户费用由买方负责，买方是一次性付款，具体买卖事项待定，基本内容就是这样。因是5年之内的房子，当时口头约定满5年后过户，赵某说自己的钱在银行做理财，一个星期才到期，需要一个星期后付款，因为是熟人，当时我就答应了赵某，一个星期后，赵某将理财的钱全部用于购买了地皮，后又在网上出售我的房屋，赵某称没有钱付给我，赵某让我等几天，他想办法筹钱付我，赵某拖了好几次，最后一次我就给他明确的时间，让他在5月21日钱付我房款，中介所也知道的，本来我让赵某写下具体时间并要求赵某签字，赵某不同意，5月22日赵某打电话给中介所说他要分期付款，我不同意。
请问律师，我现在不卖给赵某行不行？如果我不卖给赵某一万元定金是否要退还给他？赵某以没有写具体时间为由，要求房子必须卖给他，而且不是一次性付款，是否合理？要是打官司是否会胜诉？
我很急，求好心律师给我帮助！！谢谢