遇无耻的人借钱不还，但不借条在手，请教借条中是否有漏洞

早前做生意，一个生意上的朋友在我手里拿货，说卖了就给我钱，结果一二再而三的拖欠，后面才发现此人很无耻很没有信用，欠钱两年多钱还没有还。当初写有一份借条，当时关系还不错，借条写得不太严谨。请教下各位相关问题。借条详情如下：
　　 借条
　　 今清点，**差货款****，写此借条作为凭证，近期内还清，如清点有误协商后更正。
　　
　　
　　
　　当初没说利息的事情，我只想他还清本金就是，关键在天最后那一句话，他陆陆续续在我那里拿的东西，他记有记帐我有记帐，借条有是按我记的写的，但是他说有出入，他说找我对帐，但一直没有来对。现在已经和他翻脸，借钱也有两年，请问他是否还有对帐的权利，如果他咬着这个不放，我怎么办？