关于抚养费

尊敬的律师您好：
我得知未婚妻以前生过两个小孩，当初她生小孩时才17岁，所以也没办结婚证，后来因为她先生对不起她，她离开了，离开时也没有去法院办理什么，就双方私下签了协议，两个小孩归男方抚养。我现在想跟她结婚，可是担心以后那男方要求两个孩子的抚养费什么的，那份协议书有没有效的？男方又结婚了，要孩子的户口改到男方后来的老婆名下，那我未婚妻再生小孩算超生吗？
请问要办什么手续吗？比如去法院判决下孩子的抚养权抚养费什么的。如果不办的话我们婚后会不会有什么麻烦。万分感谢。