关于遗产继承、银行拒绝继承人领取被继承人的遗产

情况是这样的，爷爷过世、生前没有遗嘱、丧偶，育有二男二女、也没有告知其银行存款密码。过世以后，继承人（我父亲与伯父，两个女儿已放弃继承）到公证处公证要求继承我爷爷的遗产、但是我父亲是一级残疾、行动不便且意识不清、没有民事能力的人，遂我便代理我父亲去办理公证以及继承遗产事宜，现在公证书已经出具。但是我与伯父到银行领取被继承人遗产时，银行不予办理、给出的解释是：第一；我本人不是继承人。第二；我父亲是没有完全民事能力的人、不承认我父亲的授权代理书具有效力（即我无权代理该事宜）。
  现在我想咨询一下律师、公证处出具的公证书上已经明确的说明由我本人全权代理父亲继承爷爷的遗产事宜、并且公证书已经具有法律效力，为何银行不认可、也给不出一个明确的答复、也说不出需要我们办理什么样的手续才给予办理。且一直以继承人的授权代理书无效为由拒绝办理。但是这个授权书已经经过公证处公证了、银行凭什么不承认？我们该怎么办？