如何处理这类事情

我于2010年经我堂哥介绍给一个承包商做钢架施工，没有签订劳动合同，工具由他们提供，施工单价我堂哥讲的，就这样做了七八栋厂房，还有很多是点工做的。在五月份我不小心受伤了，就不想再做了，我堂哥叫我留下来帮他负责，他另外叫了一伙人过来做，只是在我的计件工资中分出去。在7月份我的一个工人在那伙人的手下干活时不小心工亡了。那承包商出了22万。问题是现在那承包商不把以前的工资给我，还要求我对那次事故承担责任。那个工人不是在我手下做事的。我有责任吗？应该找那个包工头吧？怎么说我有责任呢？我是不带工具给他施工的。请律师们给我满意的答复。