请问我遇到的是不是诈骗？

各位律师好！请问我遇到的是不是诈骗？
经过是这样的：
我们一家从报纸上看到某中介公司发布的出售二手房的广告，对其重点推介的一处住房发生兴趣，电话联系后，在中介公司经纪人夏X陪同下到看房，对该房比较满意，当日来到中介公司签约。
中介公司经理杨XX向我们介绍在场的一位男子（唐A）为卖方唐XX的代理人，他查验了我方的证件，在我们要求查看卖方相关手续时，杨XX给我们看了卖方唐XX的购房合同，并说这家刚刚委托其卖了另一套房屋，手续上没问题。出于对中介公司的信任，我们与出卖人唐XX的代理人（唐A）及中介公司签订了房屋经纪合同，合同约定：买受人将全部购房款交付房屋经纪组织暂存，办理完房屋过户手续时，由房屋经纪组织交付给房屋出卖人，同时约定付款的同时办理更名过户手续。当日我们按约定交纳了定金壹万元。
几日后，我们与经理杨XX联系，表示我方已准备好购房款，请他约卖方办理过户手续。杨经理说当日办理不了，让我们等几天。两日后卖方唐XX的儿子（唐B）打来电话，称为了省下房屋交易中的各项税费他要花钱托人办理卖房的有关手续，只有确认我们把购房款全部交到中介后他才能去找人办事，否则我们毁约他会受到损失等等，还说该中介公司信誉好、“把钱放在中介你有什么不放心的？”，他还将我方的姓名和身份证号码要去，说第二天只要我们把钱交到中介就马上去办理更名过户手续。
第二天上午，我们将购房款交给中介公司后，要求中介公司马上联系卖方去办理更名过户手续，而中介公司表示当日没有安排人员办理此事，让我们回去等。在此后的两个多月，虽经我们多次到公司或电话催促，卖方和中介一直未能履行合同，并以各种理由推拖。
后来我们向中介提出，在卖方暂不能办理手续的情况下先返还购房款，待卖方能办理手续时再交付，中介则说只有解除合同才能返还购房款，但又说找不到卖方无法解除合同。后来总算卖方唐XX的另一代理人（儿媳周XX）出面，表示房子不卖了、解除合同，此时中介公司杨经理又说必须先交回合同原件才能返还购房款，在我们交回合同原件后，经理杨XX又推说放款需等总经理签字，最终还是没给我们退回购房款。
接下来的几日，我们多次来到中介公司索要购房款，杨XX总是以总经理不在推托。在一次等待总经理时，我们从其他客户处得到了该中介公司总经理的电话，号码与卖方代理人唐XX儿子（唐B）的电话竟然完全相同，这让我们大吃一惊。接下来，我们又在中介公司财务室看到了正在对账的唐XX的另一代理人儿媳周XX，她一会儿说是来卖房的，一会儿又说是来给朋友帮忙，最后就走掉了。
后来我们了解到中介公司总经理唐B就是卖方唐XX的儿子，签订合同时唐XX的代理人唐A为虚构的，签合同的是真名叫崔XX的该中介公司员工。
请问我遇到的是不是诈骗？我们应该怎样做？