我的两张欠条是一个人，我会不会被他钻空子

他--我的高中同学，之前关系一直不错。2010年跟我说让我入股他堂姐夫的一个饭店，他说让我把钱给他，和他的钱以他的名义入股。然后他赚了钱分给我。我感觉多年的哥们，就给了他五万。之后交给他我就没有过问过。11年我出国打工一直没有过问。12年10月我刚回国就邀请我去新疆南疆做生意，说他表哥在那边关系多广，能帮拉客户等等。由于一直是铁哥们，还有自己回国也想做点事业，就一拍即合。来新疆考察几天决定做装修，但是我们资金都不够，决定再拉一个合伙人参与。最后门店开业三人总计投资三十万，每人十万。（我回国后工资被公司拖着一只没给），我都是借的钱。
由于不懂装修行业，三个人矛盾越来越大。也就到2012年年底三个人合伙不下去了。我决定退出。我问饭店的情况，他一直说效益不好，没赚钱等等。
最终谈的结果是：我和另一个合伙人共同退出股份每个人给我们50%投资的钱，也就是五万块钱。认赔五万，我们俩都决定退出。算账后扣除了我们之前的相互为对方花的钱，之前饭店的钱我不要利息，不要分红，还剩4万不到。还有装修公司剩下的五万。
让他给现钱，他说当时没有，让我等几个月。看在多年同学的关系上。我再一次作出让步：这五万给我打个欠条并让他找他表哥做担保（他表哥当地有生意），半年期限2013年10月5号还清；四万的欠条一年还清2014年4月5号。

现在第一张欠条日期降至，我担心的是：五万块他给我打款分两次打，一次打四万，一次打一万，然后把五万欠条给我要过去销毁。然后到明年第二张欠条到期的时候，他说钱已经给我打过了，证据是打款记录上有四万的记录。假如他要是这样做，我该怎么办？
我人在内地，他人在南方打工，新疆的生意交给他弟弟打理了，我要去新疆才能给他打官司吗？欠条上没写欠款事由，就某某欠某某多少钱，多少号还清，欠条写在他的省份证复印件上了。
我最怕的 就是他拿第一次给我打的钱充当第二张欠条上的款，这样，我欲哭无泪啊！