面对霸道不良市民，我们该什么做？

我的爷爷，最近因为要把牛放在他小儿子院子旁边的一个小间里面。他小儿子不同意，于是开始口头纠纷。我爷爷不知道说了什么，他小儿子一不爽就把我爷爷的胸口用力的踢了一下。后来我去劝说我爷爷，在劝说过程中，遭受辱骂。我爷爷对付不了他，然后我说我要报警，他就又开始了一番辱骂。还叫我报警来。后来。他出来，就开着他的载沙土的那种车撞倒了那间小房子、于是我报警。警察来了就去调解了一下，然后他付了200块的医药费给他的父亲、还有保证修好那间小房子。然后警察就走了。但是因为盖房子，事先我们和他有过纠纷。也报过警，然后他现在就因为是我报的警而把矛头指向我们家。以前把路堵了不让我们过（因为两家并排，我家要从他家过去。）现在又威胁我们。不让我们过。现在都不知道怎么办。想知道有没有什么办法。谢谢