辱骂他人，算不算人身损害？

因对方故意辱骂我，是否可以告他人身损害？或可以直接殴打他，也可以免除相应的法律责任？？？
依据：
受害人对同一损害的发生或者扩大有故意、过失的，依照民法通则第一百三十一条的规定，可以减轻或者免除赔偿义务人的赔偿责任。但侵权人因故意或者重大过失致人损害，受害人只有一般过失的，不减轻赔偿义务人的赔偿责任。
适用民法通则第一百零六条第三款规定确定赔偿义务人的赔偿责任时，受害人有重大过失的，可以减轻赔偿义务人的赔偿责任。