买房贷款必须在开发商指定的银行吗?

本人在西青区贷款买的的房子，开发商合作银行中国行和中信银行。之前我觉得中国银行毕竟是大银行准备在那做贷款，可是售楼员说中国利率上浮中信是基准利率，我便咨询了中国银行信贷员，他说征信记录没问题也是基准。之后售楼员又说我买的房子的楼号指定必须在中信做 。
    现在这两个银行首套利率都上浮了，我想拿出来自己做贷款，因为这边有银行首套利率还有优惠，毕竟老百姓都想能省点钱就省点钱。可是售楼员说只能在中信做，我说那你给我电话我和你们经理说说，他说经理管不了，说是开发商在上海，这事只能上海那的财务管，不给电话。
    我要怎么办？拿出来自己做的话可以做到八五折，毕竟我也想能省点就省点，开发商有权利指定必须在哪个银行做贷款吗？怎么我和谁借钱他也管啊？
    实在不行我退房，有什么损失吗？（贷款合同还没签）
    非常着急，请您帮忙详细解答，谢谢！