赔偿人联系不上的情况下能不能搬进对方的房子？这样会不会构成犯罪？会构成这些犯罪？

经政府协调，对方同意赔偿我一笔资金，曾经在双方协调的过程中，对方曾说过要拿他的房子来赔偿我，但后来经过政府协调，对方同意赔偿我资金，双方在最后协调时没有具体说赔偿的期限，现在对方已经离开了，还声称外出打工挣钱还我，但我想他就是为了逃避债务，这种情况下我能不能搬进对方的房子，他以前也说过要拿房子赔偿我的。以这种形式逼迫他交出赔偿金。这样做会不会构成犯罪？对方能不能起诉我私闯民宅、破坏他财产之类的罪？谢谢！