我离婚了孩子抚养权在男方那里，但是孩子一直跟着我。现在孩子上五年级了

起诉变更抚养权

如果小孩目前和对方生活在一起，那么法院很有可能会考虑改变生活环境可能会给小孩健康成长带来不利影响，从而判决抚养权归对方
离婚诉讼需要在被告户籍所在地起诉，如果被告离开户籍地的，在被告经常居住地（居住一年以上）起诉，一般可以证明居住的证据有居住证，街道办或者社区工作站开具的居住证明，居住登记表等。
如果一方不同意离婚，那么只能通过法院诉讼途径解决，法院会根据双方感情破裂的情况判决离或者不离，如果有法定的离婚情形如赌博、吸毒、家暴、婚外情、分居满两年等，或者其它被法院认定为感情破裂的情形，法院很大可能会判决离婚，如果法院判决不离，双方继续分居6个月后再行起诉，此时判决离婚的可能性很大。我们建议即使第一次诉讼可能判不离也要认真应对，因为此时在法庭上的陈述、双方的举证都会记录在案，下次诉讼时有很强的证据效力。

可以协商，或者向法院起诉变更扶养权的