错手打伤一流氓，致其轻伤二级。现反被讹诈

我们家属院有一个流氓（平时靠偷，骗为生）无故殴打我父亲（老年人刚出院），手段残忍踩着我父亲辱骂，还让叫爹。后110带回去处理，口头训诫一番，双方签了个和解协议就各回各家。我晚上回来后看到邻居拍的当时殴打我父亲的视频，非常气愤，去找那个流氓理论，刚好在外边碰到他，我质问他为什么打人时候，他口气嚣张并在言语上对我挑衅，并作出让我误认为他是要动手打人的动作，于是我下意识挥拳2次，错手将他下颌骨打骨折。现在他做了鉴定，轻伤二级。他现在住院16天做了手术，总共花费2.5万，3个月后去钢板大概3--4千。他现在是存心讹诈，拒绝调解，我们之前共给他医药费8000.后来发现他要讹诈后，就没有再给。现在我们正在由公安机关进行调解，他以让我坐牢为由拒不调解，只是一味要钱，这种情况下，只有走司法程序才能让赔偿在一个合理的范围内了。我没有工作，没有前科，没有存款。对方也是没有工作，靠吃低保的，有前科。我想请问我现在应该怎么样能不被讹诈