感情困扰怎么办？

你好！五年前我妈有病走了，我爸认识了一个丧偶的妇女A（50多岁了），他俩交往了一段时间后我爸觉得不合适提出分手，其间又认识了一个离婚的妇女B（40多岁）就跟她交往了，但A却一直在拢乱子，说她先认识我爸的，又上门甚至去单位乱，又去打B妇女，说不让她好过，她得不到的别人也不想得到。经常发疯的乱骂人，一直来都二三年了，她上门乱的时候我们也报警过，但没解决。她的子女，大哥，大姐都劝她。她就是谁的也不听，心情好就太平几天，心情不好就经常出花样。。严重影响都我爸和我们子女的生活。她还经常口出狂言说要杀我爸，淋硫酸呢？真的很苦恼，我爸同B阿姨又很想在一起，但B阿姨又很怕A。律师，请问我们该怎样对待这种无赖的人呢？
今年五月份她在我家吵过，当时我报警，警察过来劝走了，但没有多大的效果。昨晚她又上门吵。今天我去派出所，居委会投诉，但他们说意义不大，她无构成犯罪，不能捉她。只是言行问题，但她曾经多次出手打人，只是我们没还手而以，她现在简直得寸进尺无理取闹。我们还可以怎么办，我都不会做了。请你指点。谢谢！！