轻度追尾，交的保证金如何退还？

在江西新余驾驶小车，把前车轻度追尾了，我全责，第一时间报了保险和交警。本来保险公司可以快速理赔的，对方是个土豪开的保时捷，一定纠着怕我不赔钱为由，一定要交警扣车，最后我在交警处交了20000的保证金，因为新余当地没有4S店，当时没有定损，对方车主表示可能会在一两个月以后再去定损修车，并威胁我要赔偿油费、过路费、住宿费什么的？后期不知道该怎么处理了。