家中建房，在建房屋前后都是另外一家的地，之前协商我家给其留一出路，相互交换

家中建房，在建房屋前后都是另外一家的地，之前协商我家给其留一出路，相互交换。但现在那家人要求如果留出路就留一间房子到两间房子的空地不准建房，我们感觉条件太高，提出购买其门前的土地对方不说价钱标准，今天当地规划局让停建说是有土地纠纷，让协商好后再动工。但经多方调解没有结果，我感觉那家人是在讹人。所以想咨询一下像这种情况能不能通过法律手段解决。在建房土地使用上并不存在争议，我家没有占到他家的地，但土地为老一辈留下，并没有什么实际材料证明这块土地的使用面积。