房产争议

你好，我想问一下，向我这种情况该怎么办
   我的房子是单位（税务局）分的，和劳动局紧挨着，当时我的房子是两间正房，一间西屋，正房西头有一间属于劳动局的，我的西屋正好把劳动局的那间房门当着，他们只好和我走一个大门。当时总认为是单位的房子，双方都没说什么。后来参加房改，属于我们个人的，他让我把西屋拆了，我说：我的房产证上有这间房子，我不拆。他也没说什么。
   上星期我通过有关部门批准旧房翻建，在建房时他不让我再原址建，他找房管所，负责我那片的同志到那里让我停工，说是有纠纷，我说我有证，他们都不看一下就说：是假的，还有一个说过期了。他们说你该这边行，我就盖正房两间，和正房前面（院子）两间，西屋不盖让他们走。
  现在他们非让我再签协议，说今后拆迁还是我的，因为我有证，他那一间没证，担心拆迁的时候再争议。我不想签，房管所的也让我签，他们工作人员不看我的证件，就说：“你们说有争议就有，你们说没争议就没有不行，你们双方签上字为准。”我说：“有争议也是他那一方说的，我有证。”他们根本不听，现在那家天天让我去签字，房管所的还不让建筑工给我盖，还要拆我已盖好的房子。现在我备好的料（水泥，沙子，砖等）在那里越放越少，还停工，给我造成了不小的损失，我该怎么办？