中介和房主违约我应该如何维权？

我在2013年11月30日在中介带领下看了一户房子打算整租已经定好房价1200元一个月并交了500元定金。中介给我打了个定金收条，约定第二天验房子签合同。结果在12月2日那天验房子，房主非得把其供奉佛祖的柜子和千本佛说还有其母亲的衣服供奉在我租的房间卧室内。我不同意，房主就不租给我房子。我去找中介协商，中介经理给我的答案是那是房主的权利他左右不了房主。把我交的定金500元还给我就算处理结果了。但是在这几天我已经为了所房子便买了我的家具家点，并和我原房主协议搬家。现在房子不能租给我，给我和朋友造成每天70的额外房租家电家具损失费2000多元。我要求中介双倍返还押金就是1000元，中介给我的结论是房主不租给你 我夜没有办法，我总不能倒搭前吧。但是我认为中介能带房主代收定金就应该承担这责任。中介以我们还没有签订合同只是定金收条为由不与赔付。我找他们总公司和房地产协会想解决问题。他们只是找到当事经理和我联系并道歉，赔偿无果。我该怎么办？我应不应该得到房主或者是中介那500元赔偿？难道我非得起诉吗？