没有签订合同，国外客人要求索赔

我做SOHO的 ，在香港有一家离岸公司，去年接到英国客户一系列树脂工艺品的订单，但是，没有签订详细的购销合同，只有简单的数量和单价确认。订单在泉州生产。第一批出货没有问题，紧接着出货的两批货物，都是客人派验货公司验货合格后出口的，到港后，客人一个个检查，说很多不合格，拿去销毁了（有销毁证书），现在客户向我索赔这部分的货款和因此产生的运费、报关费、销毁费等；对于后续没有完成的订单，客户也说产品质量达不到要求，要求取消订单，退还定金。工厂因为大部分产品已经完工，说无法退还定金，反而要求我尽快出货。跟工厂也是只有简单的合同，只有邮件确认，没有盖章。另外，客户还要求工厂销毁所有相关产品，因为那个产品是他们的专利。
客人也知道对我索赔不如对工厂索赔，但是货款是客户汇给我，我再汇给工厂，这样的情况，客人能对工厂进行索赔吗？没有签订详细的合同，客户可以起诉我，我可以起诉工厂吗？

关于质量问题，生产的几家工厂都是树脂之乡泉州非常大的工厂，树脂手绘的确存在不够准确的问题，但是，客人也同意将手绘误差率控制在10%以内，但是实际操作中，他却要求100%准确。工厂当初做的样品是彩绘样品工人花好几天才完成的，因此非常精美，可是到大货生产，就无法那么漂亮了。