买房子一方违约不买了交给中介的定金中介不给我卖方

我卖房子与买方在21世纪房产中介那签订了房屋买卖合同，买方交给中介一万元定金，我将房证契证交给中介保管，三天后确定买方不买了，中介人给我打电话让我取回房证契证，但是，中介以买方老人称病不敢把定金给我，怕他们跟老人无法交代，后经协商，打算给我三千，我不同意，然后我也没拿回房证契证，中介说再跟买方研究一下，有结果再给我打电话。我觉得如果他们中介如果想从中得点好处我也能理解，我已经说了，可以只拿八千，中介也不同意。接下来两天我打电话问结果，中介总是说在处理，知道了。明显在拖延我，这种情况下，我该怎么办，有没有最直接有效的方法，因为我还在卖房子，也不想跟他们耗费太多精力。