二手房交易过程中，买家不配合及时交首付款，后因银行还款政策有变而导致卖家不能提前还贷，算谁的责任？

我是卖方，因有贷款所以房子还在银行抵押的，房贷未还满半年，12月中旬才满半年，才可以提前还贷，然后进行房屋交易。买卖合同签的是在12底之前双方过户。而现在银行的提前还贷政策听说要发生变更，提前还贷的允许周期要从半年变成一年，否则要支付大笔金额的违约金给到银行。
所以我催促买家尽快给我首付，我这边想办法在政策未改变之前提前还掉，以防产生大笔的违约金。而买家迟迟不肯，拖着，中介每天的答复就是帮忙问，明天给答复，尽快之类，给不到确切的时间。请问如果是这种情况，买家不配合及时给到首付，导致我大量的违约金造成损失，算谁的责任？如何避免我的损失？