离婚十年，前夫不断骚扰威胁时常殴打我，还跑去单位威胁我，我想搬家却怕他到我单位闹事

离婚十年，前夫不断骚扰威胁时常殴打我，还跑去单位威胁我，我想搬家却怕他到我单位闹事，我该怎么办？

从和他结婚开始他就一直在外面搞女人，然后时常喝酒，平时一生气就打我，把我按在水槽里马桶里，拽我头发按倒在地上踢我，还撕烂我的衣服，因为我的家人都在外地，所以无依无靠除了家里也没地方可以去，女儿12岁的时候他欠了别人钱没法还要离婚卖房子还钱，又是拳打脚踢了几天后还是离了，女儿判给了他，但是女儿和他在一起了半年不到就因为受不了他和他妈妈的欺辱回来和我一起住，那时候我钱挣得不多，女儿还在读书，他当时为了要钱把房子给我，但是要我出一半的钱给他，那房子一直在贷款所以也一直在还款，那段时间生活困难，但是他还是一直上门来打我骂我，他就住我们隔壁，所以时常上门，不开门就砸门，我害怕他，但是每次一开门不是打我就是要搬我房子里的东西，什么电脑电扇他全自己拿走卖掉，我和我女儿就在这种天天担惊受怕的日子里度过了10年，现在女儿工作了，他因为一直没有工作收入不均，看到我和我女儿日子过得好了就更是要来打我，因为在一栋楼里每次见我都找没人的时候扇我耳光，这种日子实在过不下去了，他就是无赖人渣畜生！我想搬家，但是我和我女儿孤儿寡母怕心有余力不足，也怕搬家那天他会来闹事，更怕的是搬走以后他会去我单位闹事，我很纠结…
如果要通过法律途径能让我们过上安稳的日子么？他以前曾经把我打出脑震荡过但是没留下证据，也过了很多年了，现在还能搜集什么证据么？求你帮帮我…告诉我一个解决的办法把…