定金

求助！！！我看上了一套房子，是在我们村里盖的，一共33万，卖方说是先付定金可以优惠2万，所以我在2014年交付了10万定金，相当于交12万，房子还正在建造当中，属于期房的那种，今年1月底本来是想签购房合同的，但是我有事去了外地，所以没签，当时卖方告诉我必须得尽快签合同，过年有可能涨价，所以我又交了10万预留房子，但现在我由于在其他方面需要用钱，所以不想买房子了，想把已付的20万要回，但卖方告诉我现在不能退，得等1年后才可以退。由于是在村里盖的，有村委会担保着卖，所以交付20万并未与卖方签订任何合同，商品房买卖合同也没签，我想咨询一下，没有签订任何的合同和协议，要回定金算违约么？卖方说现在没钱，得1年后才能退，但我又怕到时候卖方一推再推，钱不好要回来，这个钱应该怎么要回来呢？希望能够得到大家的帮助，谢谢！