中介忽悠买房方，现在买房方不要房子该谁承担

买房的时候中介说合同更改手续办好就能拿到钥匙的，而且已经很明确的告诉中介房子结婚要用，一定要合同改完就拿到钥匙的。中介方表示可以的，交了订金之后，卖方因为一些手续原因耽误了10来天，还没办好合同更改，现在我在售房部那边得知合同改好了根本没法当天拿到钥匙，需要等贷款办下来至少一个月才行，所以现在不愿意买这个房子，因为要结婚用的，时间只剩下两个月，根本都不够装修时间，但是现在中介方要求我们给他们违约金 全部房款的百分之二，这个完全不合理，因为中介方是先告知我们能拿到钥匙我们才决定要买的，现在却拿不到钥匙，并且房产的合同也没有更改，卖方是已经和我们协商好了，请问我们该不该承担这份钱？