农村包了一个水坑，但是隔壁没经过允许填上了

我们和大队（就是村委会）签了一个基本合同，承包了那个水坑，周围人未经过我们允许，填上了土，家里人老实本分，填就填了，就没管。后来他们自己家又加种了松树，最近有风声说是要拆迁，想着那也是一个房基的地方。我们有想法盖上。就想问问，能不能直接砍树扣掉人工费用把树钱给他们，他们自己挖的别处的土，那个土他们没花钱，土钱用给吗。
感谢您的回复。