二手房交易我是买方，2016年11月2日中介联系到我们和卖方

二手房交易我是买方，2016年11月2日中介联系到我们和卖方，商讨签房子买卖居间协议，卖方是房屋产权人的丈夫当时他拿出了开发商的购房合同，他告诉我们房子的产权人是他妻子，我们和中介也看到了不动产产权登记人的确是只有他妻子一个人名字并没有他自己的名字，但是我们认为房子是夫妻共有财产，中途我们让他打电话同他妻子商量，但是通话内容我们不知道，一直没有谈妥，所以期间中途我们三方就散场了，准备各自回家，不知道后来中介怎么跟他说的然后又跑到我们面前说可以签合同了，我们就把协议签了，我们付了定金两万，卖方丈夫代替他妻子在甲方签字处签了妻子名字和他自己名字，今年五月份卖方丈夫把定金退还给了中介，中介说他妻子不同意卖房对签合同不知情，要求确认合同无效。请问我们这份居间协议是否有效？《最高人民法院关于审理买卖合同纠纷案件司法解释》是不是适用这个案子？合同无效吗？那么合同无效了怎么处理？