这样的官司怎么打

你们好，律师朋友，请帮帮我，我是一个浙江人，在2009年9月份，因在互联网上看到合肥益众有限公司在苗木网上发布竹木求购信息，并去合肥与其联系，可去之后才知道是合肥益众联润进出口有限公司，而并非合肥益众有限公司，（合肥益众联润进出口有限公司以下简称唐辞）也并非是他自己公司求购毛竹，而是替苏州一家外贸公司求购毛竹，并在法人唐辞的游说下在2009年10月5号签下由他居间的中介协议，并交3000元中介费，并许诺如对方无此项业务一并返还3000元中介费，并报销往返车旅费，和一切损失，具后来经他游说带去苏州亿富达贸易进出口有限公司又被唐辞拿去20000元保证金，大写贰万元整。并和苏州亿富达贸易进出口有限公司签了总额肆佰贰拾伍万元的合同，按合同约定首富总额的30%做为预付款，然后叫我在家等预付款通知，等了一个星期，唐辞说要叫我拿产品去检验，又一次和我来到苏州的那家公司，并在他的游说下交了1650元做为质量检测费，并又一次叫我回家等30%预付款通知，我又在家等了一个星期没有消息，我打电话问唐辞，唐辞辨说叫我准备30%预付款资产的抵押担保，我便去银行咨询，银行不给个人提供资产抵押担保，后来我又一次打电话给唐辞，银行不给个人办理资产抵押担保，你们当初就不应该找个人加工产品，并和个人签合同，唐辞推说第二天给我答复，第二天等到天黑也没等到他的电话，我又一次打他电话，唐辞说：不用怕，你个人办不出来没有关系，他已经和苏州那边谈好了，由苏州亿富达贸易进出口有限公司替我资产抵押担保，叫我和外商直接签合同，就是和后来的香港港鑫国际集团直接签合同，不过唐辞和苏州那边的公司有条件，要好处费，不可能来帮我白担保的，唐辞要三千元，那个外贸公司要捌仟，我其实不想交，但大钱已经去了，我也很无奈，只有跑到苏州交了，而且他们还索要了五只金华火腿和一大盒莲子说是要尝尝我们金华的特产，我没有办法只好送给他们了。并在当天2009年11月4号在唐辞的鉴定下在苏州和香港港鑫国际集团的领导签了合同，并又叫我回家等领款通知，过了一个多星期，他们还没有把预付款打到我的账上，我打电话过去，香港港鑫国际集团说：因港币换成人民币要外汇费，要叫我交0.05%预付款的外汇费，相当于人民币6000元左右，我实在不想汇钱，本来这个生意他们是需方我是供货方，应该是他们给我预付款，而不是一而在，在而三的给他们钱，他们从签合同起只和我说钱不和我说他们所要的货，这钱我不放心，我打电话给唐辞，唐辞说你不放心他们还不放心我吗，唐辞既然这么说我就相信了他，因为毕竟他的公司在合肥的，我又一次相信了他把钱送到了合肥。过了两天香港那边还没有消息，我打电话给唐辞，他就爱理不理，说叫我和香港港鑫国际集团直接联系，不要找他，我实在没有办法后来打电话给香港那边就没有人接了，后来电话也打不通了，再去找苏州亿富达贸易进出口有限公司，那家公司已经人去楼空了，连电话号码一个都打不通。我没有办法就在我的博客和互联网上发布了我的遭遇，而影响到合肥那家公司的声誉，现在他在合肥的瑶海区人民法院把我告了一个名誉权纠纷，还可笑要我赔偿他的经济损失和精神损伤，但可笑法院也接了这个案子，现在我很气人，钱被他骗了还敢告到法院，请问律师朋友我应该怎么办。
第一，我不想到安徽去让费时间，和车旅费，去陪他应诉，因为就算我打赢了也没有花头，他本来就是骗子，到时候公司注销掉跑人就行，他那公司也不大，就只有一间小房间，小得可怜，所以打赢没有意义，最好能把案件转移到浙江金华这边来，
第二，如果我不去的话，就会他赢了官司，我又不心甘，他打赢官司有没有意义，因为毕竟他想拿钱也得到金华这边来拿，安徽的法院能委托金华的法院来强制执行吗？我如果不付钱会坐牢吗？请律师朋友指点指点，不胜感激。