高利贷还完以后还要索赔，法院不受理

我有些法律问题咨询一下。
     我2007年至2009年之间，由于自己的问题借了高利贷本金共8万元左右。月利息为8%以上。由于这些钱时陆陆续续借的。所有打了好多条子。但以前每打一次条子，上一次的条子都没有撕掉。在2009年1月8日，由于我实在还不了。放高利贷逼得我和他打了一个总借条29万5。但因为当时我住院着急，就没有把其他的小条子撕掉。
   在2009年12月18日，经过中间人协商，我以14万元现金和他了结。当时没有写下任何字据。我只把我的29万5的借条和我的房屋手续拿走。并且双双口头上认可双方债权债务全部了清。以为就完事了。没想到2010年年初，放高利贷的又拿出以前的小条子，找到我们单位。问我要这个钱。每天骚扰我。现在我有中间人的证明，他自己亲口说的29万5的条子是怎么来的和他亲口说的他是放高利贷的。月息是8%以上的录音证据。我想上法院起诉，起诉的原因有：1.侵犯我的权利，要求赔偿精神损失2万元。2，我与放高利贷之间的债权债务已经还清。没想到法院说不是不受理。我现在不知道该怎么办。现在我上班也不能上。他每天到单位骚扰我。人家也不干什么，就是下班后我去那，他就去那。扰乱了我的正常生活秩序。我想知道我该怎么办？