父亲是赌徒，上周刚刚车祸去世，生前借了高利贷，现在应该怎么办？

事情是这样的，父亲赌了几十年，在十几年前因为赌债的问题与我母亲离婚，法院将我姐姐判给我妈，把我判给了我父亲，几年后，我妈和我姑妈联合把我从我父亲那儿判回给了我妈，这十几年来也一直是我妈在抚养我，我父亲一直因为赌的事经常来骚扰我们，为此我并没有少打110报警。而在上周，他被公交车撞了去世，本来以为就和公交公司谈赔偿的事后再处理后事就完了，谁知今天有人拿着借条去交通队查询，具体的情况我也并不清楚，只知道是我父亲生前因为赌博的问题借了高利贷，但他借的时候是分两种原因借的，一是他说了是赌博，二是他说家里要拆迁自己要住院开刀什么的借口借了高利贷。那现在我想问的是，基于我现在这个情况，如果高利贷的人真的找上门，对于这个我们完全不知情且最后他全部赌光的高利贷，我应该怎么办？要偿还还是报警处理？