关于社会抚养费的问题，急

是这样的，有个事情想咨询下： 我是湖南临湘人，我老婆是湖南衡山人，于2013年超生一小孩，并在小孩两个月左右交了4000社会抚养费于衡山，有收据，当时不懂要结案书也没有办理。同时也上好户口在衡山，我老婆的户口也没有迁走。两年来两边也一直没有人员找我了。现在临湘计生办说这个月将社会抚养费的通知书放在我家里，说要罚我款且一个月要处理好。 请问这样的情况要怎样应对？临湘计生办说衡山那边交的费用他们不认可，我们结婚证是在临湘办理的，第一个小孩户口也上在临湘，这就是归他们管理。他们这样做是对的吗？衡山那边罚款的能不能有效？ 如果少了他们要不要收差额， 烦请帮忙详细解答下，我现在真不知道该怎么办了，谢谢了，急。