我该怎么办？

我打牌问别人借了1万元，当时我问他要利息不他说不要都是一个村的，过了两个月我去还钱时候他说让我给他连本带利息还三万四千元。最后说利息一万二。当时我给还了我借的那一万，剩下的他说的那利息1万二我没给，我说我回家想想，他说让我9月1号在给他剩下的1万二。我没给，现在他打电话威胁我说他有问别人借了2万元每天800元的利息全算在我头上让我给还，打电话还威胁我让我别回村了。别让他找的人碰见我、我都把欠他的欠1万元都给他还了。现在还要问我要1万2，还有他问别人借的钱的利息每天800快钱也先我头上，电话里说吧他惹急了就不是1万2了就是2万4.，我现在不知道怎么办了。