我的问题会比较麻烦，涉及到婚姻财产 14年结婚，15年年底分居，当年6月我来到杭州工作

我的问题会比较麻烦，涉及到婚姻财产
14年结婚，15年年底分居，当年6月我来到杭州工作。婚姻中男方行踪不定，分居后更是难联系，一直想要和平离婚，无奈对方就是不出面。
今年5月没办法了，回到宜春找了一位律师帮我提出诉讼，联系到了男方，但是开庭的时候并没有来，来的是男方母亲。
我的要求很简单，只要离婚，其他财产都不需要，但是男方母亲向我索要定亲时的7万彩礼，我并不懂法，询问了律师，他居然也用商量的态度和我说能不能还，过程很复杂，我不想多说。结果就是我通过了调解同意退还对方4万彩礼，法院把调解书邮寄到男方那，据说是上海，男方签字后，我一个月内退还礼金，离婚书才能拿到。事后我想了想不对劲，也查了一下相关的问题，发现结婚2年后彩礼就算要退还，也只需要退还30%就行，我感觉我被坑了，这笔钱我不可能出，但是我已经签了调解书，请问我该怎么办？我很无助