卖家房产在银行抵押，要求我给首付赎证，我该怎么办

由于第一次买房 所以好多问题都没落实 就签了房产买卖居间合同 现在想想感觉有许多风险 
我在滁州看中一套二手房，和卖方的合同也通过中介签定完毕并交了一万元定金。但现在有几个问题
1、卖方的房子有抵押贷款,不是按揭,合同条款有：乙方（我）首付款二十万元先付给甲方将房产证拿出来，托管资金由甲方承担，需要我在6月15日左右打首付款来帮他结清抵押的贷款，从而来赎证
2、合同条款有：乙方与6月15日前支付二十万元房款给甲方，同时甲乙双方办理资金托管、过户等相关手续
  律师以上合同条款不知道是否矛盾，我是公积金按揭贷款，卖家意思是先给他首付，他赎证，然后帮我垫资20万交到房产交易中心，我认为有风险，但是当时合同签了，现在我害怕卖家拿钱走了，我可以要求卖家自己赎回吗，赎回后我付首付款算违约吗？如果卖家不同意我可以拿回定金吗，期待您的答复，感谢！