离婚后孩子探视权问题

离异2年多，近半年来，前夫频繁来看孩子，基本上是4-5天一次，我和他谈了几次，我告诉他一个月最多2次，可以带走，但是他没有答应，现在的情况就是他不打招呼想来就来，因为我上班，我妈妈退休了在家帮我带孩子，我们离异时双方家庭闹的不可开交，对方总已是孩子亲生父亲为由要求不定期不定时随时看孩子带走孩子，这件事情对我们困扰很大。请各位律师给我个好建议。这样的情况我该怎么办，能报警吗？我很担心因为这件事对方如果提起诉讼变更孩子抚养权。