淘宝卖家被无理买家退货，钱货两空，该怎么办？

本人是在淘宝上卖手机的，11月29日一个东莞的买家在本店买了一款1780元的手机，12月1日收到货，说手机有问题，我同意他寄过来换，寄过去的第二台全新机他又说有问题，要退货，然后我也答应，就叫客户把手机退回来，12月7日收到买家寄回的手机，当着快递员的面拆包看到手机边框有磨损，就马上打电话跟买家沟通，买家就是不认账，非说手机没磨损，当时快递员在现场，还可以证明的，在与买家协商不了的情况下，我拒签了货物，然后找淘宝处理，买家对我发起了维权，最后淘宝在12月9号给出的结果是卖家以收到货，全额退款给买家，，我的天拉，货物我明明拒签了，现在手机已经退回给买家，买家已经签收，而且还全额退款给了买家，请问此事我应该如何维护自己的权益！