买家看了三次房，房子有几个部位有陈旧性渗水痕迹，和他说了是楼上漏水造成的，楼上也修过了

买家看了三次房，房子有几个部位有陈旧性渗水痕迹，和他说了是楼上漏水造成的，楼上也修过了。多年来痕迹一直是那个样子未有扩大，他也查堪了渗水部位是干燥的，他同意交房后墙壁翻新时自行做一个内部的防水处理以绝后患，决定购买了，通过中介签了居间协议和买卖协议，付了五万定金给我，隔天他去物业订了地下车位，听物业的人说楼上还在漏水没有彻底修复，说楼上的业主不好讲话难以沟通，经查堪楼上墙壁有潮点装修受损严重，反悔不买了，要我退定金，当时我和他短信沟通说合同不在手上让他看一下有没有我需要承担什么责任，他说没有，很着急催着我退，因U盾在家，他就跑去我家候着我下班，到家后我也没来得及细看合同就给他操作退款打发他走了，结果第二天款因账号输错被退回，而后我细看合同知道合同解除是要付居间方1%的费用，所以不给退了，要求其继续履行合同，买家竟污陷我以隐瞒欺骗的手段出售问题房屋，说我隐瞒了房子渗水无法修复，可事实是留证需要和出于对买家的负责所以没做美观上的恢复，渗水部位也从未有水滴下影响居住，且当前是干燥的，他以欺骗和房屋质量问题构成违约起诉法院要求解队合同，返还定金，要我承担诉讼费用，并提交了渗水部位照片、知信记录和一些谈话录音作为证据，收到通知本月十五号法庭调解，我该如何应对，请大师们指教，甚谢