工程没签合同钱怎么要？

承包人从单位包来的活包括给办房子手续。朋友介绍转给了我干。当时吃饭的时候说的让我先拿钱干着。等手续办完了单位给钱先给我5万。完后一起在算。垫付快4万元的时候我打听到他的手续没办下来，单位也没给他首付的钱。他还让我拿钱接着干，我说我这也没钱了让他先给我点。他不给，说等手续办下来的吧。让先停工。过了一个多月他手续没办下来又找别人把剩下的活干完了。手续没办下来他从单位只要回一部分钱。可是快2年了我从他要钱就托我。我去单位问早就给他算完怅了。我才知道他就是想不给我。我有当时干活的图纸，还有介绍人，还能找到当时干活的两个工人。还有从他要钱时的多次托我的电话录音（大多都是等有时间再和我算账，没说多少钱的事）我要怎么办？打官司的话我还要准备什么？谢谢指点！