丈夫家给我的房是否应归我

结婚时，丈夫家给我两间房，房是我公公的名共有四间，另外两间是我小叔的，建房时大哥、二哥在七八年前分家另过，并把祖产房三间和厢房分给他俩，现在我公公名下的四间房是由公公、我丈夫、和小叔共同建造户口也在一起，也没成家，说好每人两间结婚时住，和大哥二哥没有关系，他们也表示不争，事过二十多年，大哥二哥来要房，请问这新建的房和他们有关系吗。