连襟借钱不还，无借条，怎么办？

本人与此人乃连襟，起因其借钱建房用，因看在大家是亲戚份上，没让其写借条，前后借了四五次共计8万多人民币（包括约1~2万元用于偿还赌债），仅有一次有银行转帐记录，其余几次均为直接见面给的现金，无其他证人。后因其迷恋上赌博，将家财挥霍一空，多次劝其回头无果后。
现小姨子因对生活无望的情况下，决定与其离婚，但此人耍赖不肯承认这些债务，只有小姨子承认，其两人于2016年11月正式分居后，在互相沟通债务问题上有录音。
另外由于其两人尚未签字离婚，女方考虑通过上诉方式解决，但男方多次通过电话以伤害女方家人性命威胁女方不离婚，以部分均有电话录音。
请问如何追回债务？法院是否支持？