感情纠缠

我想请问下。我妈和我爸不合。也没离婚。三年前和一没结婚的男的同居。当初谁也没反对。他们也没办什么证。那男一直住我们家。如今矛盾出来了。那男的好吃懒做。我妈想赶他走。他却死赖着。还跟我摆谱。连我老婆都骂。能不能用法律的手段赶走他？我怕我会忍不了。到时动了手就成故意伤人了。