变更抚养权

我们协议离婚，有个女儿现在一岁十一个月，一直跟随我生活，我独自抚养，男方没有出过抚养费，离婚协议的时候我们说好抚养权给他，我可以随时探望孩子，协议以后他说他忙，我也一直带着孩子，后来他让我送过去，我答应了，把孩子送过去的时候说的好好的我可以随时接送，看望，但是孩子给他以后他把孩子丢老家给年迈的父母照顾，我想探望他们不同意，第一次去他们把我锁在院子里，第二次去不开大门还告我私闯民宅，现在孩子生病，我着急给孩子看病他们也不同意，我想变更孩子的抚养权可以吗？