关于房产与遗产的问题

最近遇到了一个麻烦的问题,事情是这样的:还得从20多年前说起,在我爸爸和我伯伯都还没成家之前,我爷爷将家中的三间房屋进行房产分配,规定两个儿子,其中哪个顶替了他的工作岗位之后,就只能拿其中一间房屋,而留在家中的那个儿子得两间房屋,最后是我爸爸留在家中,我伯伯顶替了爷爷的工作，爷爷在97年去世。(补充:关于签订这份协议的时候,都请到了当时包括公亲和邻居在内共10人作为证人画押,一式2份,我爸爸伯伯各一份保留,至今这份协议仍在我家,伯伯那边的协议他找不到了),一直到95年的时候我家盖楼房,得土地审批,当时怕报的平方多，楼房的方就批不下来，就把其中的一间房屋写在了伯伯名头下，后来事实证明我家的方报批楼房的方是够的。过两年之后，村里突然送来两本《农村集体土地房屋所有证》（当时写在他名下的时候，农村并没有房屋所有证，如果有就不会写他名下了，后来办理的证的时候村委会没有通知），那证上已经把我爸原来过寄在我伯伯名下的那间房标注在我伯伯房屋证上，现在我伯伯的那本证仍在我爸手里。2008年我伯伯去世，我伯母突然站出来说那间过寄在他们家的那间房是他们的，因为证上有图纸标明，我们无语了，世界上竟有这样的人？请问，凭着20多年前的那份协议和当时的证人，其中证人大多已经不在世，还有3位证人，主观上那间房屋我们并不是想赠送给伯伯家的，那房屋产权还是我们的吗？或者有没有其他途径将那间房屋变更到我家的产权证上？盼望给予详细答复，不甚感激！