我和我老公结婚快十年了，育有两个孩子，女儿八岁，儿子两岁，在这十年里我们经常吵架打架

我和我老公结婚快十年了，育有两个孩子，女儿八岁，儿子两岁，在这十年里我们经常吵架打架，受他的家庭环境影响，我老公有暴力倾向，在这十年里，我老公经常不务正业，收入不能养家糊口，我在我婆婆的帮助下干点小生意，我一个人即要照顾孩子又要养活孩子，家里的生活各方面开销，几乎是我一个人在维持，而且有时候还补贴给他，我攒的一笔钱也被他拿去花光，大概一两万，他干生意向我弟弟借了一万五，三年了至今没还，总而言之他就是一个没有责任心没担当，粗暴没素质，蛮不讲理的混蛋，在这十年里他经常出口赶我走，还威胁我，要杀死我和我的家人，其实我过的什么日子我妈根本不知道，我从来不跟他说，我妈也从来没说过他的坏话，就是刚来始的时候，我家里人都不赞同我和他在一起，是我不听话非要和他好，所以这些年他一直怀恨在心，要报复我的家人，对我的家人从不关心，其实我一直很痛苦，特别是婚后他又这样对我，让我生不如死，既然他赶我走，我也想结束这段婚姻，房子是婚后的，家用点器也是我省吃俭用置办的，这些我都可以不要，唯独孩子我一个都不想放弃，而他又不让我带走孩子，我该怎么办？该怎么唯维护我的权益和孩子的抚养权？