他人在公共场所辱骂我，该如何通过法律手段处理？

我和我的一位异性同学相处快二十年了，一直关系都不错，婚前他向我表白过，但是我拒绝了，之后一直相处的也很友好，但是三年前因为他感情出现危机，他表达了对我的感情，而且是当着他父母的面，但此事我事后才得知，他的父母还电话警告过不准再接他的电话，要拒绝和他联系，我当时很气愤，大概在近半年的时间里和他无任何来往，但是他一直不放弃的找我沟通，最后因为一些业务上的关系继续在来往，而且也是因为他从无怨言的对我关怀，我没有再计较那些过去，很自然的和他相处，相处的过程中他会经常打电话和我聊天，除了业务就是内心或是情感，沟通中对他的劝导也不少。但是近段时间他又因此类和我经常联系的事被他老婆知道而闹矛盾，他老婆要和他离婚，原因就是因为他的感情一直在我身上，虽然我已跟他明示过继续正常相处的原则就是不破坏双方的家庭，否则我不会再与他联络。但现状是此事虽然我不是直接的参与，但是他老婆家人方认定是我插足，而且他老婆家人中的三位中年妇女还到我的办公场所大吵大闹，并当众对我恶言相向，辱骂及威胁，完全不讲任何道理，我打了110报警才把三个中年女人轰走，而且她们还说会继续不停的来专门骂人，我想请问通过法律程序如何处理这件事？谢谢！