探视权问题

您好，我与孩子父亲6年前由于男方出轨离婚，房子归我后卖出，4岁男孩抚养权归男方，但也多半时间由我和姥姥监管教育，5年前男方因意外死亡，我成为孩子唯一监护人，户口以前在奶奶家，上个月转到我的本上，为了学校用时方便，奶奶给拿学习补课固定费用每月几百元，（今年开始已经没有给了）可从来对孩子学习不管不问不辅导，只是表面性的问孩子考试多少分第几名，其它生活费用都是我管，每月去奶奶家住几天，我为了他们增加亲情，但每次都有进行挑唆和不完成作业，并且在孩子面前说话从不避讳，近几次更严重，去她家回来就提转户口的事，还说监护权到18岁就可以不听妈妈的话，听爷爷奶奶，现在孩子10岁，我认为已经严重影响到孩子身心，对成长不利，可以取消探望和有权给孩子改姓吗？