中介不给退压金

我在中关村南大街租了个主卧，租金是2500元，里面打了个隔断，是我的上个租户打的，而且这个隔断钱上个房东也向我们收了，当时中介也没反对，三个月前，我们租了这个屋，因为那个隔断可以给我们分担些房租，就租了，现在我们要回老家，不打算租了，是提前半个月说的，合同上我们看了说的是如果不是提前一个月说要扣掉百分之十的费用，也就是250，因为急着走，所以想着扣就扣吧，因为是我们晚了，可是现在中介一分都不给我退，当时是压一付三，压了2500，现在都不给退，说什么当初不让加隔断，是上个房主违约了，上个月住房走的时候已经交了三个月的房租，我们来了之后就直接把钱交给上个租户了，交钱的时候中介的负责人是在场的，说是到时候退的时候把压金直接退给我们，现在中介不给退，说当时就不该把钱交给上个租户，可是当时他是在场的，他也没说什么，他看到房间里的隔断也什么都没说，现在说不关他们中介的事，可是上个租户不也把钱给他们了吗，天呢，怎么会有这样的人，无语了我就，我该怎么办呢，这个中介叫做“中前地产”在皂君庙。