离婚协议抚养权归女方，男方要求女方交出抚养权和女儿户口

2006年5月3日办酒结婚，6月22日打的结婚证，女儿7月25日出生，从结婚到离婚期间男方没有抚养过女儿一天，一直都是跟着我在我爸妈家长大，男方常年不回家也不养家所以考虑女儿学习方便所以我选择住在爸妈家方便接送女儿上学放学，我和男方再婚期间没有任何共同财产，只有一套廉租房，去年12月由于天气变冷，所以我带着女儿回廉租房拿过冬的衣服，谁知道看到他跟别的女人睡在我床上，因为这个原因我们协议离婚，协议书上写明女儿抚养权归我每个月还有一千的抚养费，但是从来就没有给过。房子是我自己一手装修，房租水电也是我自己支付，他父母出了进房子拿钥匙的3000钱和油烟罩，热水器，煤气灶三样一起800元还有我卧室的一个大衣柜和电冰箱，其他所有物品都是我本人出的钱，从2011年进房子开始装修，他就没有去过，一直都是我打理，所以房子也归我，我们与2014年12月22日去民政局办理的离婚手续，离婚证拿到手没几天他就不经过强行把女儿接走了，为此我还在当地派出所报案，派出所说属于家庭纠纷他们管不了，叫我去法院上诉要求强制执行，我想到他是个地痞要求强制也没用，今天强制执行，明天他又带走孩子也是宛然，所以我没有上诉，后来他就一直要求找我谈谈孩子的未来，态度明确的要求复婚，我考虑到他一直都在吸毒，根本没有停止过所以我没有答应，今年5月开始他就一直打电话恐吓我说不跟他复合就杀死我，让我永无安宁之日。今年5月23日早上十点多快十一点我朋友在我家里帮我搞卫生，当时女儿也在场，他二话不说直接拿钉锤把我廉租房的门给砸了，闯进我家由于天热，我朋友是个男性所以当时他看到的是人家光着膀子躺在我床上休息，当时我穿着一套灰色的休闲装坐在电脑跟前上网查资料，女儿也躺在我床上玩手机，他冲进我房间直接用钉锤殴打我朋友，还差点打到我女儿，当时我当着他的面拨打了110，他听到报警后就跑了，女儿吓得全身发抖一直在哭，我怕吓坏女儿所以我带着女儿去了廉租房管辖内的派出所要求出警抓人，我也说出他有吸毒，他们在网上查了一下还说了一句，原来是吸毒的惯犯，叫我放心，他们会安排抓人的，不需要去我家里取证。结果一直没有去抓，当天还跑到我爸妈家跟我妈妈说我当着女儿的面不要脸光着身子坐在那个男人的身上。后来他每天都去我爸妈家和我家闹，吵得我和我爸爸妈妈女儿没有安宁的日子，最后我爸爸因为高血压上升提议让我把女儿给他带段时间让他吃点苦头，我想到爸爸的身体缘故，所以才答应把女儿暂时交给他抚养，接走女儿的当时还当着女儿的面和他爸妈的面要动手打我！他把孩子带走以后虽然是坚持每天接送女儿上学放学但是在此期间他也没有停止过吸毒，由于孩子跟着他住我不放心所以在此期间有一个礼拜我每天也跟着他一起去接女儿放学，然后陪女儿吃饭带女儿到处转转，结果他给我提出更过分的要求，为此我们大吵一架，不欢而散，从那以后他还是不断的去我两边家里跑闹，我受不了了所以就选择在外面住，结果他还是天天去我妈妈家问我妈我去哪里了，我妈说不知道，他就各种哄骗，女儿期末考试那天他带着女儿大清早跑到我妈妈家让女儿找我妈妈要钱买文具考试，为此还有发信息证明是学校规定的，我妈带着我女儿去买了文具，当天中午他又打电话找我妈借钱，我妈没有搭理他，今天凌晨他喊女儿上QQ加我，然后我跟女儿聊天，他把电话抢去，用QQ对我各种辱骂，还说我怎么怎么对女儿不伤心不负责任，要求我交出抚养权和女儿户口，我不答应，他就说要上诉，这样打官司我有胜算吗？