由打架造成的赔偿

小刚因为小勇的一句话，突然跑过来打我，扯住我的衣服，还拿铁棍威胁我 ，我根本就不知道发生了什么事，我把他的手掰开，不知是否在那时候弄伤了小刚的手。小刚是位驾驶员，他在事发4、5天之内仍然在开车，事后来找我说手伤了，之后我带他去拍片，手指骨折。他开始要求我赔款2万，我拒绝赔款。之后他晚上来到我家，说什么吃不起饭，要带着全家住到我家。我请他进家谈，表示愿意带他去治疗手伤，之后的误工费也可以在治疗之后结算，他也表示同意（有录音）。第二天，他又表示不愿去医院，只要3万元赔偿就可以了。现在我们拟好协议，但还没有签字，应该怎么办？
是他先动手的，可否将我把他的手拿开而造成的伤视为正当防卫？我是否必须赔偿这3万元？