农村土地纠纷

农村土地纠纷，我家有一块地是三十年前开荒所的，当时是家里新添增人口，村里面没有土地分给我家，村里面就叫我们去村里的山上自己开荒（当时没有书面说明，是口头说的，但村里面有很多人都是根我一样在那里开荒），现在我家要在当时开荒的地上建房子，建到一半的时候就村里面有一个人跑出来说地是他们家的（我建房子前他们知道的），现在不让我建，我有多方协商（如果他能把其它地都收回来，我就以当年的市价购买他的）刚开始同意了，现在又反悔。请位各律师朋友们帮帮我，谢谢！