诚意金被中介擅自转让给房东，房东拒绝返还，我该怎么办

9月份初找中介公司看了一套房子，但是当时该房没有安家具，没有签任何合同，也没有承诺交定金，但是中介公司催我交了2000元的诚意金，并且说好了等安好家具发了照片我满意之后才将房子定下来，还向我保证5号肯定交房包满意。当房东安好家具后，中介发了照片，我非常的不满意，家具很简陋，我马上向中介反应，但是中介给我说2000元已经交给房东了，可能退不回来了，于是我又打电话问房东，房东喊我把我的要求提出来，我就将我的要求发给对方，对方当时态度很不好，我就提出不租这个房子了，要求退钱，房东不肯。现在房东给我说这个钱属于定金，他只还一半，还要挟我说如果不同意就只有打官司。中介当时把钱交给房东的时候只打了一个“收到诚意金”的条子，我手头有中介给我的诚意金的收据，请问我能不能要求房东返还诚意金？如果房东不返还我该怎么办？