房产问题

各位律师好。。简单说下家里概况。。。我们家是80年代老公房，三室户。当时是6个人的名字都在里面，但是里面是我父母，我2个姐姐，1个哥哥和我共6个人居住，之后2个姐姐相继出嫁，姐姐出嫁以后户口也相应的迁到夫家去了，房子里只有我们4个的户口。。。再后来我哥哥结婚了，又添了我侄女，家里我父母和兄嫂各住一个朝南的大房间，我就居住朝北的小房间。。。当中插一句，房子后来是我父母出资买下了产权，所以产权证上只有我父母2个人的名字。。。在96年，我通过朋友介绍，认识了一个江苏女的，然后就结婚了，之后有了女儿，我们就一家三口住在朝北的只有6个平方的小房间里。。。又过了几年，随着女儿越来越大，家里人口也是太多，所以我兄嫂就想另外买房子搬出去住，03年的时候房价没有这么贵，但是我兄嫂买房子的时候还差了5万块。。。于是家里人商量，我跟我老婆拿出了5万元借给我兄嫂买房子。。。。但是大家写好了协议，这个5万元是算我出资借给兄嫂买房子的钱，但是从此他们对这个房子没有了居住权。。。。虽然他们一家三口的户口还是在这套房子里，但是从今以后他们不能居住在这套房子里面。。。5万元也暂时不需要他们归还，等到这套老房子动迁的时候在协议归还或怎样。。。说穿了，就是我花了5万元，买了我兄嫂一家三口的居住权。。。。这份协议当时我父母，兄嫂，和2个姐姐都签字了，同意以后等拆迁的时候再决定各自的安置问题。。。。这样相安无事了几年，之后我父亲去世，再到14年我母亲去世。。。。但是在我母亲去世之前，我带我母亲去了虹口区公证处，办理了遗产公证，把我母亲名下房产的50%的份额全部公证给了我，但是我父亲是在我母亲之前去世的，去世前没有做过遗产公证，当我提出来要把我父亲50%的房产份额也公证给我的时候，公证处拒绝了我的要求。。。。。补充一句，我老婆因为跟我结婚15年以后就把户口也报入了我家，现在等于这套房子里，我们一家三口和我大哥一家三口总共6个户口在里面。。。。现在的问题是，我大哥想要我父亲名下的房产，他说父亲名下50%的房产，他和我两个姐姐都有继承权。。。我大姐早在十几年之前也去世了，留下我姐夫还有3个已经成年的女儿。。。。我2姐也要继承这套房子里属于她的权益。。。。当然家里就吵的不可开交。。。。我们明明写过协议了，我花了5万元买了我大哥的居住权，不到这套房子拆迁他们无权再住进来，当时我大哥包括我大姐2姐也都签字同意了，现在又凭什么反悔。。。我是坚决不让我大哥一家住进来的，但是我大哥说，他们一家三口的户口在这里，他们有居住权，有权利住在这里面。。。而且户口本和房产证也在我大哥手里。。。但是我们当时有过协议的，他自己也签字同意的，现在怎么可以反悔。。。我大哥说这份协议是我们几个的私下协议，并没有经过公证处的公证，所以没有法律效力，他现在可以很轻易的就反悔的。。。还有我2个姐姐，我大姐人都不在了，但是我姐夫现在也跳出来要我父亲的房产份额，我2姐也很早就嫁出去了，现在也要求回来分遗产，他们都有这个权利分吗？我最近在装修房子，我大哥已经来闹过了，他说等我装修好房子，他就跟我大嫂搬过来，还是住在他们原来住过的靠南的大房间里，我是肯定不同意的，逼不得已我肯定要帮他打的。。。。我问过我们居委会和街道还有110，他们都说我大哥是无理取闹，他没有资格分我父亲的遗产，也没有资格住进来，就应该按照当时的协议，等这套房子什么时候动迁，我们再另外协商。。。所以我想请问各位，我大哥是不是无理取闹，他再要强行住进来，我可不可以报警或者去法院起诉他侵犯我私人住宅？或者我大哥和我两个姐姐对我这套房子有什么权利没有？谢谢各位的解答