个人土地转给别人（村里的），但是没成交的情况下，已近在动我们的土地了

当时对方打桩的时候，村里的干部也在场，  他们的这种行为算什么？
当时我们约定是量好长度，算价格，然后协商好，转让土地。 
过了很久村里也没来量，对方也没跟我们价格，过了一段时间，我们去看我们的土地时候，他们已近在我们的土地上盖起来了，   然后我们就催他们付钱， 对方好像一直在回避，付了一半左右，   说等村里的干部来量长度，但是迟迟不来， 我怀疑村里跟对方有点串通。     剩下的钱一直推脱， 如果要告上法律是否行，    我们该怎么办？（听说村里人自己转让土地是法律允许的，是否能说的出口）