农村自建房买卖完成却忘了索要房契，房子居住四五十年后被对方后辈索要，该怎么办？

本人居住的房子属于农村居民自建房，该房子是四五十年前，我的长辈从他人手中购得，后来又经过我们自己的改建以及扩建才逐步形成现在的规模，但是，由于长辈从他人手中购买房屋时没有签订任何纸质协议，甚至没有向对方索取房契，造成现在对方后辈想凭借他们手中的房契无偿拿回该房子。不过，虽然没有纸质协议，但有多名见证人在场，见证人可以证明该房子是通过正当途径，双方同意，房子与现金两清的情况下买卖的。请问我可以维护自己的利益吗，该怎么办？