打架斗殴

我邻居在他新房旁边盖了个厕所，当时我的房子还没有盖，所以也没放在心上，现在我的房子盖起来了，他家的厕所正好冲着我大门门口，我去年秋后去他家商量拆除这个厕所，他家里不拆，未果，今年年初我又去他家商议此事，我并说我愿意出钱买这个厕所 结果他家还是不同意，随后变争吵了起来，我弟弟听到争吵便从家里出来与其辩解，不料对方的女儿不知为什么打了我兄弟一耳光，我也是当时气坏了，随后我便遇他家厮打了起来，当时打架的有我（25岁）和我兄弟（20岁） 他们是户主(50多岁）后面改称Q吧 他媳妇（50多岁）他儿子（22岁）她女儿（25岁）后来他们报了警，我和我兄弟还有他老婆都去了派出所，后来我家里找了个村里人（这个人和我爸爸挺好但和Q家有亲）去派出所说事，希望私了（当时他老婆没住院）现在我和我弟弟没事在家了，Q的老婆因为眼睛被打的眼积血住进了医院，我家便送去了2000元住院费，过了2天了他说鼻梁骨折要做手术又送去了3000，我家庭不富裕，希望他能回家治疗（回家里的医院，他现在是在县城医院）他不肯，我说打架的时候是他家先动的手，再说现在弄到这个地步也不能全怪我一个人吧..他还说如果我不出钱他就起诉我，求好心律师帮我解答 请问我现在该怎么办？万分感谢！！！！！！！！！