这算债务纠纷吗？勒索？我该怎么办

你好，我的情况如下：
  我们单位要在外地开展业务需要和外地一个机关签定相关合同，领导私下让我找找看有没有在外地认识的一些关系可以促成这...我同学找了一个人，四十来岁,然后我们就拿着两万（那人3千我同学6千我一万一）去了,,
  结果那人去了就找这找那，全是一些不相关的人，后来我才知道那是想通过这些人在当地的关系再找我们单位要找的人。我很反感但也没明确制止，只发过牢骚，问他弄这么乱以后咋整，那人说他有把控让我放心.
  每次去就是吃喝，结果正事没谈成他在当地为这事引了五六个当地各单位的无关这事的人进来，（我实在受不了就再没去过，他们后期和我领导联系的）最后是见上我们单位要找的人了（我领导说也谈成了但那人没起啥作用想给把花的一报销），问题也来了。
   那人说我们单位在当地正常开展业务了，当地和我们单位签约的单位里面领导也都见过他知道他，他要劳务费，也要他花过的钱，所有帮忙的人也要劳务费，“我只管把人介绍到位还管你生不生娃”这是那人事后常说的；他们看要不来钱，就不停找我，我给他说事情是通过我同学他想干的，我也是听领导的不是给我自己干的，何况我花的大部分，花的我不要了，他们要来他们自己拿，我不想在参与这事,,,他们不行，说要多少多少，还去我们外地公司坐在会议室不走,,,说是我把他们引进来的，现在公司不出就让我必须掏，不行就把我车开走，让我全家不得安宁等等，最后还带来一个专门要账的很凶的人,,,,我给实事求是的说，那人老胡说，带的全是社会上的，，我说要钱没有，要命一条，他们让我试试，还不停给我打电话，，，我很反感很烦，我该怎么办，现在他们弄到总部，我也被迫离职了，请问，我该怎么办？