邻居强占我家土地违法建房，各部门百般容忍不作为

我是邯郸县南吕固乡皮条屯的一名农民，2014年5月，邻居王卯的，因建房以转让方式占用我南北长9.2米，东西宽8.9米，折地0.129亩，承包的位于该村东上坡地，经说和，给付我转补偿费19900元，几天后，王卯的反悔将转让费全部要回。第二天，未经村委会审批，在我父亲不知情的情况下，在该地上拉砖，垫土，压地基，施工建房。我父亲与其理论，王卯的一家置之不理，仍旧动工。后在村委会的责令下，才停止建设。我母亲在我家土地上种地，被他家差点打伤，有邻居录的视频为证，而后及时拨打110才没有发生危险。
至今快一个月了，我家所耕种的承包地，已全部是石料，沙土，不能耕作。王卯的行为已严重侵犯了公民的合法权益，且严重影响了我家的正常生活。
我父亲多次找村委会请求其处理，但是一直无果，说管不了，让我们找南吕固乡政府。我父亲多次去乡里寻求政府主持公道。乡政府每次都说与村委商量商量然后在处理，就让我父离去，但现在也没有任何处理措施。我父亲三番五次去邯郸县国土资源局信访反映情况，每次都没有明确的回复，说让我们去找乡政府。说他们没有权利去拆除，走程序的话要好几个月，才能申请法院强制拆除。
事情已经发生快一月了，我们不知道该去向谁说明冤情。我们请求政府依法责令王卯的立即停止非法占地建房，清理附属物，恢复我地貌，一切费用由王卯的承担。我们家世代农民，没什么本事，我们相信政府会给我们解决，还我们家一个公道的。但是但现在，各部门疑似不作为，百般容忍他家违法建房。