淘宝卖家卖假货还来单位投诉我

通过淘宝在浙江某卖家那里，买了2条裙子，要买的是商场专柜品牌代购，结果卖家只发了一件，并且还是假货，我申请了退货退款，卖家拿不出任何正品证据的情况下同意我退货退款，但是却记下了我公司全称，我是旅行社的，他就到长沙市旅游局虚假投诉，说来当面咨询我，但是我态度极其恶劣，看到了我的公派，记下了我的名字，所以来投诉我！对此旅游局的人打到我们公司领导，我们领导觉得我私人的事扯到公司影响了公司声誉，对我做的处罚。我非常气愤，想问这样的情况，我想告这个卖家虚假投诉，侵犯我名誉可以吧？怎么个流程。