我的户口所在地房屋是属于军产的，没有房产证，但是大部分军产人都没有，多年以来以借房名义。我一直按时缴纳每年的房费，（虽协议已过期但仍然没有改变），我除了这个房子再没有其他房产，未住的原因是因为危旧老房，一直不给我修房不能住，今年邻居修房，借我家房子放物品，承诺修房后帮助我家恢复原样，两家因为公用一面墙，所以墙是要拆的，打通我家墙后居然私自占用我家平米数！私自往我家扩张，随地方不大但很明显，我应该怎么办？如果告他会不会就此收回我家的房屋？因为之前试图收回过但由于名下无房没有成功，这次会不会就此机会收回？有什么办法可以不收回么？还有怎么让邻居让出私自占用我家的地方？他还自加二层，这是违规的。
----------------------------------------问题补充：--------------------------------------------------
多年照料这个房子，本身应该办事处给我修，一直不修，不修又每年按时收房费，我应该怎么做能不让他们趁机收回房子？ 那我多年交的房费怎么办？收回之后我住那儿？