在结婚之前父母有一处自家房，1985年结婚后父母给我并与女儿落户在此处。丈夫与公婆、大伯哥同住一房，房子是公公单位宿舍。后退休，丈夫顶替并每月代扣房租，后又各立户口。一年以后同在一地方拆迁，我同女儿分一处套一房，公婆分一处套一房，丈夫分一处套一房，大伯哥三口分一处套二房。后来房子又调换成，我同女儿分的套一房落户公婆，公婆套一与丈夫的套一房合并成套二房，我顶户主，后买下来了。1996年公公去世，丈夫的户口在1997年又迁回公婆的套一房，一直由丈夫每月交房租，2008年，婆婆去世，丈夫一人住套一房，并每月交房租至今，请问一下，现在大伯哥有权回来争回这两套房子吗？