被骗子以网购退款诈骗55440元

2013年9月25日中午1点钟左右在QQ拍拍网上修改的送货地址，拍下2套睡衣， 下午6点多左右收到一男子电话， 声称是我买睡衣家的网店店主，说出了我新改的送货地址、及姓名、 电话号码和货物的价钱，告知我购买货物的钱被支付宝冻结了， 需要我配合申请退款， 后面他发给我了连接，还有他的支付宝账号和密码， 叫我去付申请退款的服务费用2元钱， 才可以把钱退到我的帐上， 我就按其要求点了，结果扣费的不是2元， 而是55440元。 我对那名男子说我要报警， 该男子说：你现在报警，我已经申请退回银行卡了， 支付宝的账号密码你都有了， 后面他的号再上就是禁止登陆， 网上查了一下， 说是账号被冻结了才会那么显示。 刚才打通支付宝客服电话，问那一笔钱还是他的账号上么， 支付宝人员说对方以申请退回银行卡，如果2、3个工作日没有回到银行卡，就介入警方来调查。 请问这笔钱可以追回嘛？