淘宝网买家下订单未走支付宝付款选择线下汇款，七天后要退货还让淘宝客服介入并且还让我承担所有运输费用

我是淘宝网刚开网店的卖家，网店刚开不久来了一个买家要买单类商品中号150件总共4800元，买家要派当地分公司员工上门提货，所以让我取消快递费，单件商品快递费是12元 所以我取消了1800元快递费，这样150件商品共3000元，我让买家用支付宝付款，买家以支付宝没有那么多钱为由，选择直接汇款，第二天我准备发货的时候发现仓库单类库存不够买家需求的150件了仓库只有120件没办法，我打电话咨询了买家并告诉买家仓库不够您要单类中号的150件商品如果急用只能用大一号凑成了150件并明确告诉买家中号和大一号的不是一个厂家出品商标也不一样，并询问了是否可以发货，买家同意发货。备好货后买家安排了员工上门提货并清点了货物的数量及种类确认无误后并写下收货单，我又电话联系了买家问她您的员工已经过来提货并清点盘缠清楚，是否把货物交给您的收货员，经买家同意后让他的收货员把货带走。而现在已经过了七天了买家却要退回全部货物并让我退回汇款，我告诉买家没有理由质量不能退货，而买家却说货物太小与网店上照片看着小不少为由要退货但是那时候买家的提货员是开箱挨个检查确认无误后收货的，现在却要退货我该怎么办啊？而且买家已经联系淘宝网客服来处理，买家是网上下订单但是买家没有用支付宝付款选择线下汇款方式发的货款淘宝网会支持买家的退货请求吗？还有买家要求我支付运输费用，并称货物现在在海南我是临沂的发货地点也是在临沂 ，买家收货员提走货物的时候我就不知货物的去向了，现在买家连运输费用也让我出该怎么办啊。

                         各位叔叔阿姨我不懂法请你们告诉我，我该怎么办不退货可以吗？如果不退货淘宝网会处罚我的网店吗？如果买家起诉我，我该怎么办？我的网店才刚刚两颗星，因为这个事我已经把所有的商品全部下架了不敢卖了怕买家找我事。