民事经济纠纷：由于被诬陷导致自己要赔偿对方财产 我该怎么做？

15年5月21日 我骑人力三轮车正常行走在非机动车道上 相对而来的有一个中年男子 当时我们走过有六米多时 他叫住了我 非说我把他手机挂落在地上了 但是我并没有刮到他 因为我们之间还有很长一段距离 而且在法庭中 他说是右手打电话 我们对向行驶 他靠左边 我靠右边 也不可能会让他右手的电话脱落 当时叫住我之后 他态度非常不讲理 几次三番用威胁恐吓甚至侮辱人格的话语攻击我 我一名在市场上买东西的弱女子 听了他的话后更加害怕 于是他上前把他手机让到我的车子上让我看 我拿起来 用手轻轻蹭了下看看有没有划痕 他就在法庭上说我用手使劲的蹭 而且事发之时 由于我家里有事 迫切的要回家 他死缠烂打一口咬定我碰掉了他的电话 并不让我走 而且我一再强调电话真不是我刮掉的 被逼无奈 我只好假装像他道歉 说对不起 但是在法庭上 他抓住了我这句“对不起”认为因为我说了对不起 所以就是我把他的手机碰掉了。 但是但是我也是出于被逼无奈 家里有事才说了一句昧心的假对不起 请各位律师帮帮我 他一口咬定这句对不起 法庭到底会不会算我有责任？我该怎么做？