如何要回定金？还未签合同，目前就只签了定金协议

事情是这样的：我有一套复式的房子打算要卖掉，因为房子价格一直在升值而我却不
知情，房产中间与买方来看完我的房子后立刻要买下来，而我在房产中介的忽悠下，将房
子低于市值10%卖了，签了定金协议，对方支付了定金。由于那天交易匆忙，我的“三
证”未给中介买方支付的定金由中介保管，先以我的户口本做抵押。
    我的打算：想不在违约的情况下钻定金协议的漏洞，要回定金。
    情况：“定金协议”里面没有写第二笔款什么时候到位，目前是想在签合同的那天对买方提出苛刻的要求，要求三日内支付我的第二笔款。因为买房当初在签协议时说，他是按揭的。我们签合同之日，他给我房子30%的首付款，而余下的70%由银行放贷出来再给我，这样我拿到我的第二笔款要签合同之日的一个月以后了。能不能就“定金协议”里面
没有写第二笔款什么时候到位，我在签合同之日提这个要求，如果对方说他三日之内拿不
出余下70%，是不是这样就能使合同终止了？补充：还有没有其他“办法”使我能不违约？