二手房营业税

我买了一套二手房，（没有通过中介）约定是由卖方缴纳营业税，所有手续都已经完清，房款已经付给卖方（只剩下最后1000元左右的没付了），在过了大概40天以后，我拿着收费单据去房交所准备领房产证，但这时，工作人员告诉我营业税他们少收了，他们说本来应该收40万*0.55=2.2万，而我的单据上收的是4万*0.55=0.22万，差不多少收了2万。叫我去把他们少收的这些税补齐才能拿房产证。我于是联系卖方，他不肯拿钱，卖方说，当时在交易的时候这笔费用已经收了，现在说没有收足，这完全是工作人员的失误，自己做为老百姓根本不知道该交多少，全部都是他们工作人员在算，自己去交钱即可，现在又要交钱，他不能接受于是不肯再出钱，而我又拿不到房产证，不知怎么办？