群租房房东不退押金

我是今年四月份通过中介认识了现在的二房东，签了半年的合同，押一付三，合同上确实是说没到期就不退押金，并且房子写的是当时的房子，后来，可能被举报了，我被迫迁了2次，都是他别处的房子，搬迁费都是我自己出的，第一次搬完不久，路上碰见他，我说我可能拿不到押金了，我估计九月份就要走，他说，姑娘，我退给你。然后我默认他以后会退我。我现在我需要回学校，房子还有一个月到期，我叫他退押金，他翻脸不认人，说还没到期，他还说，如果第二次搬的时候说我不住他安排的，他就退我押金，我们吵了一架，我不知道该怎么办呢，现在住的是4人间，前两次是8人间，隔音效果很差。