公租房居住权和承租人变更问题

爷爷有一套公租房，承租人是爷爷，户口本的户主是爷爷，户口中有本人的父亲，本人。大姑妈一家4口人，三姑妈一家3口人。爷爷，本人父亲（兄妹中的老大）和本人是常年居住在此的。大姑妈结婚后户口迁出，十几年后又把她自己和她儿子，儿媳妇等户口迁回来，但是都没有实际居住过。三姑妈家的情况与大姑妈一致。
我想咨询的问题是：
居住权除了爷爷，爸爸，本人以外。大姑妈和三姑妈（她们结婚前居住过，但户口回迁后没有实际居住过，而且都有房子居住。）有没有居住权，是不是共同居住人？

爷爷94岁了，现在想把承租人改成本人（唯一的孙子），房管所说要户口本上所有的人同意，大姑妈一家4口不同意。怎么办？