造房致残赔偿--对方不同意协商

各位律师，你们好，请帮忙分析下:我是浙江衢州农村的，因造房需要请同村人帮忙造房子，结果在造房过程中发生意外，造成1死2伤。死掉的那个人只有1个儿子位成年，1个老母没有经济来源 我协商的结果是儿子给他抚养到18岁或者上大学毕业。老母给他养到老送终，对方同意了。1名受伤的比较严重，不能自理了，是家里唯一的劳力，我协商的结果是赔偿对方8万元，这个钱是跟亲戚借的。1名受伤的骨盘碎裂，已经治疗好，不能进行重体力劳动了，以后还要进行再治疗取出钢板什么的。目前发生的治疗费，误工费等算下来大概6万，我答应赔偿对方6万，可是对方不同意，说还要残疾赔偿金，按1年8000元算，按法律规定让我赔偿20年，后期治疗费用最少3万，要我赔偿总计25万。请问各位律师我该怎么办？我个人因造房子已经没有积蓄了，目前的年收入也不稳定，大概1-3万/年。我可以只给6万，其他不管吗？如果他起诉我，会有什么结果呢？