老公借了高利贷，放高利的让我搬家

老公借了高利贷没钱还（借了1万，每月800的利息），因为他以前赌博欠了很多钱，还欠好几个信用卡的钱没还，家里人没办法再帮他还了，放高利的人打电话给我说，我老公不还钱就把房子租给他了，再不还过两天就要我搬出来给他们住了。我想问一下，他有权让我搬吗？房产证是我和老公两个人的，他借高利我也不知情，借的钱也没用于家庭，我应该怎样维护自己的权利，保护自己呢。