农村自建房纠纷

您好！我家有一幢30多年的老房子，经过一列手续得到批文，根据城管规划放样在合理范围内，但是事先邻居不让我们拆除，并让我们写协议“要墙脚和老墙脚一样深，墙和他家让开一公尺，并且帮他粉刷完（我们家和他们家共用一堵围墙）”，现在要开始造房了，邻居又以我们不按批文的结构图放样（事实上我们是明确按照城管当初放样再走，并且放样的尺寸也是在我们最先的原始结构内的）开始和我们吵，不让我们拆迁，还要我们补偿2W的费用，（事实他们家先前装修的时候把我们家的楼板都松动了，我们才被迫拆除重建的，那时我们也仅仅和他们说不要影响我们家，他答应了），现在我们家拆建了，他们三天两头还来吵架，妨碍我们正常施工，我们一再的退让，他们一直得寸进尺，他们家与上头有关系，我们没有，我们就一再忍让，现在工期都已经拖了快一个月了，他们还来阻挠，还说我们什么时候建，他们什么时候再来，一直奉陪下去，还扬言要打我父母，现在我们不知道要怎么办，协商也协商了，城管也找了，110也来了，请问假如要进行诉讼，要怎么做，法院协商好后，他们背着法院的人还是要这样乱来，要怎么办？