借给别人四万块钱，别人说是恋爱纠纷

我与张某（女）通过网络认识，不久见面，成为朋友，对方称要购买一辆车作为代步，因缺钱向我口头借了四万块钱，钱通过银行打在其帐户上，没有借据。过后女方主动追求我，我不同意，闹得不愉快，于是我拒绝与其来往，向其索要之前借给她的四万块钱，但对方开始说没有，后来干脆换了电话。之后我向人民法院起诉，但对方请了律师，说我跟她是恋爱期间产生的经济纠纷，没有举证是否借款，也没有举证是否赠予，也没有任何证明佐证我跟她是恋爱关系。我手上有短信截图证明，还有录音证明（证明内容为我发短信和打电话要求其归还借款，对方称没有，还有银行汇款单）。但是银行迟迟不下判决，还要求我撤诉，说我会败诉。借款事实不成立。法官和对方律师是不是有什么不可告人的秘密？