交了房子定金却没租到该套房，能退到定金么？

中介带我们看了个一套一的房子，1000元/月，由于看房当天的时间是下午六点多，而房东又有事情，看房当天就没有签下合同，当晚中介要求我们交了该套房的定金500元，叫我们第二天下午7点多去签合同。那天我比较忙，所以我男朋友先到中介那，他与房东、中介签合同时，看到合同上的承租方的责任很明确，而出租方只是显示的相应责任，于是我男朋友就问了下中介这“相应责任”是什么责任，结果出租房就说：“看这人都不好相处，……”到最后，原本是要签两年合同的，出租方又考虑到当时报价给中介委托其出租时，报价低了，于是便说签一年。在最后的最后，房东说了一句：“都考虑下嘛”便离开了。而我到达现场时，房东已离开，男朋友跟我说了下大概的情况，我也同意先签一年的合同。但中介打电话给房东，通知他过来签租赁合同时，却在电话中给中介说不租给我们了。现在中介就责怪是我男朋友的责任，才没租到此房。还说什么把这500元的定金给到房东了，硬是不退给我们。当晚，我男朋友打了110，来的人只是登记了下当事人姓名跟身份证号码。我们一直跟中介那说到晚上11点左右才走，结果仍是没拿到这500元。男朋友便抛下了句：到法院起诉这个中介。事隔如今已半个多月，男朋友忙于工作，也无瑕顾及此事。我就觉得中介那个女的，太欺人了，这虽然是定金，但该套房我们却没租到，是有理由退还我们定金的，况且不是我们不租，而是房东不租给我们了，中介没有任何理由不退还定金给我们。我现在手上唯一有的是一张定金收条，上面写的是：收到**人定于**房的定金，并于**日前签字租赁合同。落款的是中介里面经办人的姓名及盖的中介的章。请问律师大人，我要如何才能合理合法的收到这定金？