女方是我十年前的女朋友，在相处一个月后，那时因为年轻不懂得珍惜就分手了

女方是我十年前的女朋友，在相处一个月后，那时因为年轻不懂得珍惜就分手了。后来也一直没有联系了。现在男女双方都结婚了，有各自的家庭。在今年前怎知他们夫妻来到了我这公司上班，经过了几个月的相处在公司上下班。她认出了我就是他十年前的男朋友，后来我们都对对方有感情，就在一次逛街时，双方自愿的情况下去开房，双方出轨了。后来女方的老公知道了这事。他们夫妻就找我协商，经双方同意，我也有错做出了这种事。就作出了赔偿。本这事就算了结了。可是过后他们夫妻经常打架，感情不和，经常说要离婚，女方老公把这事又懒到我头上。一直找我麻烦，说一些威胁我，杀我的话。我应该怎么办，怎么样去处理。这种事报警我会受到法律的治财吗