被陌生邻居经常半夜恐吓

经常半夜被楼上的邻居（估计是楼上的，我们并不认识这个拍门者）用力拍门，踹门，并且大声叫骂，恐吓要烧死我们全家，这样的事已经持续3年了，每次这个变态邻居都会趁家里只有一个女孩的时候就来拍门，似乎知道家里的情况。有时一个星期两次，有时一个月两次，不定时来拍，经常在晚上10点到凌晨1-2点左右，每次拍门伴随着浓郁的酒精味，我们从来没有开门，他可能知道我们害怕他，他就肆无忌惮的经常这样做，为此我们曾经试过报警，但是警察每次都半小时才到，他都已经走了，我很担心，因为家里没有男人，发生什么事不知道怎么办。我到底可以怎么解决？