部门组织旅游，公司负责大概800 自己负责500元。 我一开始报名参加了

部门组织旅游，公司负责大概800 自己负责500元。 我一开始报名参加了，但是临去前三天突然临时有事不能去了。 部门报的旅行团，我们是坐火车去

我想请问的是，[我需不需要向单位赔偿他损失的部分？]比如门票公司为我花了100元，但是只退了80，公司有没有权利让我再赔偿这20元呢？ 
　　这个旅游算是部门用活动经费承担的，我不去，但是可能也有一小部分经费花在我身上了，我就不清楚我是不是反倒要给公司钱了。