回迁房买卖纠纷

律师你好、请问我在2012年全款买了一套回迁楼。当时合同上没写哪层哪冻哪好。2014年楼房下来了。在2014年八月份的时候房主给我打电话说。找关系了可以选到好楼层。当时我们同意了。现在2014年12月份。房子下来了。房主就让我们补每平方200的差价。我们要他拿出来票据给我。证明这个钱。他说是找关系的没有证明。那我们就不同意补这个钱。后来他答应给我退房款，按银行定期退。我也同意了。可是当我要他退钱办手续时候。他说没钱。得等他把房子卖了以后才能给我退钱。请问这事我应该怎么办？还有一点。当时我们合同上写着：本合同履行期间，发生特殊情况时，甲乙任何一方变更本合同的，要求变更房及时书面通知对方。征得对方同意后，双方签订书面变更协议，该协议将成为本合同不可分割的不服。未经双方签署书面文件。任何一方无权变更合同。否则，由此造成的对方的经济损失，责任方承担。那我想问问他当时给我打电话通知我的。这个事情有效么？我现在可以告他违约。赔偿我双倍房款么？