关于购房定金

我是去年的4月2日在我县绿洲新城小区与开发商签订了房屋任购协议书。协议书规定房屋的面积·朝向及那一号楼，并要我交了5万元钱作为定金，（不是这个订金）。只是口头说今年的留六·七月份等房屋主体起来一半儿时，签订正式的商品房买卖合同。可现在房屋的地基还没起来，这样到明年年末也交不了房。我也等不起了，我要在别地方买房。现在我告开发商违约，要求退回定金并主张定金的20%双倍赔偿能不能行，谢谢。