二手房居间合同定金问题！急

与中介公司签订了居间买卖二手房合同，到现场看房时，发现该房屋有一间是私自搭建的房屋，中介人员说该搭建房已经城管部门处理。但在签订居间协议时，只是口头上要求出具处理的东西，没有在合同上体现。并且交给卖方定金。
请问：如果该自建屋属于违法建筑，中介只是口头上承诺过已经处理而实际上未处理，但在合同上没有文字体现，我可不可心请求终止居间合同，
要求对方返还定金，并不承担中介费？这样是否算我违约，因为合同规定违约方需要交中介费。
当时交的定金是5000元，中介费需要3000元。
如果有贵阳的律师愿意帮助代理这种小案件，麻烦回复我可以委托代理。