网络购物退货后卖家不退款

你好，我于2018.7在淘宝网花费1490元以销售名义(实际上是几个好朋友团购)购买了5件衣服，每件衣服折让80元，约定30天可退，到货后只收到4件，卖家微信退我1件衣服钱2984件折扣320元，但是几天后我发现3件衣服有瑕疵，尺码都不对，于是告知卖家说可以退货，因家中有事，一个月(大约32天)联系卖家，卖家说半价处理给我，因为衣服确有尺码问题，我不能同意，我按照卖家给我的电话地址浙江义乌退货后，快递员一直联系不到卖家，手机打不通，我再次联系卖家，卖家说在外旅游，信号不好，过几天再送，但是快递员一直打不通电话，于是货退回我处，我再次联系卖家，卖家又给我河南郑州的退货地址，这次卖家签收了，但是迟迟不肯退款，遂投诉至淘宝，但卖家不接受退款要求。在未和我协商的情况下，直接把问题衣服寄回我处，因为我实在不能穿所以拒收了。现在钱物都在卖家手中，一直不退我钱。
以上经过均有聊天记录为证，退货衣服尚在国家三包规定3个月期限内，请问我能要回我的钱吗?怎样要回？谢谢!