被电话恐吓

我20多年前一个邻居，无中生有说我买了他东西，现在升值了，要我赔偿损失。我去报案，公安局说他以前坐过10多年牢，出来后精神不大正常，不可以抓他。他连续几天打电话恐吓，敲诈，每次都是不同的号码？现在我一家人都提心吊胆，怕他做出过激行为。如果他精神有问题，给他电话的人，我可以报案追究他们吗？会不会他们是一伙的？谢谢 问题补充：
我父母都快80的人了，都有高血压，脑梗塞等各种疾病，怕他们上门恐吓敲诈闹事，引起疾病发作，造成伤害。我父母属于那种一有事情就吃不下，睡不着觉的人。现在心里非常恐慌，根本不敢告诉我的父母，怕他们还没上门闹事，就已经对他们造成伤害了。那个恐吓我的人还有一个吸毒10多年的弟弟，送戒毒所都不收的。他现在吸没吸毒，不清楚。他家庭父母离婚20多年，家里一无所有，靠敲诈和她妈妈退休金养活。现在我该怎么办，非常怕他们对我家人造成伤害。恐吓电话不定时，有时下午，有时晚上12点 谢谢。警方建议不接他们 电话或者更换手机号码。我下午更换了电话号码。今天晚上去散步，发现家属区来了陌生人，让朋友问他找谁，他又答不上来，会不会他找人来寻找我家里住址，准备晚上来敲诈？现在该怎么办谢谢