辱骂村干部犯法吗

我是一名村主任，现遇到一个难题想向您请教一下。情节如下，前几天我因为公事，遭到本村一位村民辱骂，话很难听，他当时还对我指手画脚，手指都指到我眼睛上来了，我因本能反应出手打了其一记耳光，然后旁人将我俩拉开，我本来打算就此罢手，但他更加用恶劣言语辱骂，并用手中拿的木棒和随手捡起的石头打我，我又打了其一记耳光，后经旁人劝说争执才结束。此人曾多次对村干部及乡政府领导进行恶劣的言语辱骂， 在此我想咨询一下您这种情况应该如何正确处理，望您指教，谢谢。