被快递退回邮件，运费怎么办

发快递时，我问快递收货员，有电池的货能发到乌鲁木齐吗？他说可以。于是就叫他上来收货，收货时，我再次跟他确认是否真的能发，他说走航空被查出来的机会不大，一般都可以发出去，于是就这样支付了运费寄出了。第二天就被退回来，说是航空那边给查出来是违禁品不能寄，但是运费不能退给我。说他们来去还要车费甚至说他们遭到航空公司的罚款，很是气愤。不知道怎么处理好，特来咨询一下。