我该怎么办

我和以前的男朋友是在2001年在大学认识的，大二的时候由于和以前的男朋友分手了，心里很难受，就答应了他的追求，大学毕业以后，我和他谈了四年，由于他家家庭条件不好，家里人不同意，可是我觉得他人只要能上进，对我好就可以了，就坚持和他在一起了，可是他家事很多，他嫂子留下两个孩子离家出走了，他妈妈骨折了，后来又瘫痪了，他爸爸也有高血压，还有照顾两个孙子和他的妈妈，我心里很是那受，我知道他压力很大。2008年两个人存了了钱，把婚接了，没领结婚证，因为他没户口，没法领。。。后来我一直劝他从点钱，把毕业证拿出来，然后把户口办了，可是直到2010年，不要说拿户口本，我们还有了债务，两个人都没有稳定的工作，想想将来我心里很是担心，我家人也为我担心，。。。他身体也一直不好，而且在工地上很少回来。。。2011年我离开他，我知道我对不起他，可我也不能这样跟着他一辈子，我和他都不小了，连个孩子都不敢要，可是当我离开他的时候，他天天发信息威胁我，说他要采取行动，对付我的家人，他说我最害怕的是我的家人受到伤害，当他这些信息的时候，我感觉我看错了这个男人，他不值得我去付出那么多，为了他放弃工作，可是我现在很里很是害怕，我不知道该怎么办？要是他对我家人做出什么，我也不想活了。。。