不是雇佣关系，因同一件活，造成另一方意外死亡，我家因负什么责任？是否要赔偿？

2013年6月8日，在我家一起合作干修理安装空调的一个残疾人，（说明一点是这个残疾人是维修工，那个地方有活干在那个地方干活，和我家是五五分账，我家不给他发工资，有活干他干了赚多少钱，对半分），于6月8日下午在安装一个空调的时候，我在施工现场的里面维修东西，在我不知情的情况下，残疾人可能是在维修空调外机（具体在干什么我不知道），当时我不知道他在外面维修，一般我都不让他干外面的维修活，然后在下梯子的时候，不小心从梯子上面掉下来了，经过抢救无效死亡，请问我家要负什么责任？