关于口头协议是否在法律上生效……

您好，我是出生在江西一个普通家庭，家里就剩下我和我妈了，我爸在我六岁那年外出打工出车祸死了，是我妈一个人含辛茹苦的把我养大，我爸生前又一块他自己开垦的自留地当时可能是因为我爸还没有结婚所以，按我们农村旧社会的习惯是一般都有大人做主的，我爸和我爷爷关系都不怎么好，所以我爸结婚后我爷爷就逼着我爸和他分家，当时分家时我爷爷就说了谁开垦的自留地就归属谁，当时在那个年代农村根本就没有什么协议书，所以就用口头上说的，当时我们分家时有很多人都在场包括我爷爷的兄弟们都听到了我爷爷那么说，分家后我爸就在我们自己的自留地上盖了间一层的房子，房子盖好后我爸就去世了，当时我爷爷也没有说不分给我们，到后来爷爷就在我爸死后不久，拼命的在背后有事没事的找我们麻烦，可能他认为我爸死了我也就不会赡养他，所以每年都在背后找麻烦，这样我们在吵吵闹闹中的过了十几年，在期间我爷爷也没有说要收回分给我爸的自留地，打从我爸开垦时到什么也没有管理过我们那里的自留地，我今年也有二十多岁了，也就是说我们在自己的自留地上面生活了二十多年，，去年我妈回家加盖一层楼，把我们家的自留地用铲车铲平整了，当时我们铲的时候我爷爷也没有说什么，等了好几个月他们都没有说什么话，我妈就把我们铲开的地方搞了个围墙，我大伯他们还是什么都没有说，可是就在今年十月份我大伯他们突然打个电话来说要在我那里盖房子，等他们告诉我们时没有经过我们同意他们都已经去村里面申请土地盖房子，还好我们发现的及时，我妈跑去问我爷爷问他，没有经过我们同意你怎么有权利，他说那块地本身就是我的，我想怎么样就怎么样，我妈就说是你当年分家时分给我们的，他说你拿证据来我看看，说到这里我想问问当初我爷爷的口头协议在法律上有受法律保护吗！我爷爷那样做合理吗！同时如果我能拿到我爷爷兄弟的录音证词，在法律上有用吗！我都那么大了我爷爷还有权利去更改口头协议吗，