个体工商户合同纠纷

我和一个很好的朋友合伙开了一间五金厂，以我的名字在广东佛山成立了个体工商户，协议写明我占80%，他占20%。实际工厂的运作只是我一人在处理，朋友之前并不参与。因为都是很好的朋友，所以经营三年以来账目都没有算得很清楚，他也从工厂的资金里借用了约10万元。今年6月的时候，他回来一起经营工厂，并管理账目，收取货款。6月中的时候一个偶然事件让大家产生了矛盾，然后他要退股。他手头上还留着约7万元现金货款。协商的时候他就要我把他没参与前的账目一笔一笔算清楚，才肯把货款和借款归还，但是前两年的账目都已经丢失，不可能全部复原。我想向律师咨询的是，碰到这种情况，我该如何处理，怎么协商，怎么保护自己的利益。