宅基地名与实际住宅主人不符怎么办？

情况是这样的，我们和公婆现在是住在一处老宅基地上，宅基地证上面登记的是老公他哥哥的名字，而他哥哥住的宅基地是登记的我公公的名字，这个证是1991年3月宅田合一时发的，那时是公婆和爷爷奶奶一起住，后来孩子都大了，公婆就又申请了一处宅基地，和爷爷奶奶分开住，在91年的时候要办证，公公就用大儿的名字登记了一处，以自己的名字登记了一处，（本想是给大儿结婚盖房子用的，可大儿结婚早，在1997年结婚，当时这边的房子是土房，而登记在公公名下的宅基地上是一处瓦房院，所以公婆就和小儿子也就是我老公一起搬到了土房子这边，把瓦房处留给了大儿子，到2006年，我们结婚，在这处宅基地上盖了平房，结婚后，我们夫妻俩又盖上了楼房）现在的情况是，哥哥想要我们现在住的这里，怎么办？他能要的回去吗？