离婚纠纷如何处理

你好，我因和我丈夫今年5月1日结婚，婚后双方性格不和，他心里不正常，生理上又有问题经常在家吵架，感情很难融合，家里人也劝阻无效一个月后就分居两个月了，之后因他哥哥带他来我家说他真心改过，所以给了一次机会，当时双方都已说好，这是最后一次，然后回家后一个月又出现上述情况，前段时间他约我去民政局办理手续却因户口簿 不在家迟迟未来（我们俩已签订离婚协议书），昨晚又说他无所谓但他亲戚心里不平衡让我去说，之后就出言伤人，辱骂我，我就去找了他姑姑，然后他们说现在离婚让我们赔偿他们给我们操办结婚的钱，请问这样的情况我该怎么办？这个婚能否离掉？