这个事情上我有责任吗？  急求解答，谢谢。

我同一个餐馆老板签订一个门面转租合同，其中包括我接手后这餐馆在合同期内不能再转租和关门。 后来我亏啦很多钱后，就没要任何钱的情况下给别人做，只等他帮我把时间做满。 餐馆老板知道后就带人来闹事，这个时候我已经在很早前打包回老家做自己的事情，完全没与餐馆联系过，结果两方争执，导致双方各有人员住院。 如今餐馆老板说我违约，要我赔付当时合同上签订的违约金，并且说我要承担双方斗殴的责任。   能帮我分析下吗 ？  我认为在这个事情方面我是完全没有任何的责任，并且也不用支付违约金的。