关于安家费

我2010年8月毕业跟单位签署了为期3年的劳动合同，2010年底因为买房子单位给我了5万块的安家费，条件是转正之后在单位工作10年，否则需要将安家费全部退回。我于2011年8月转正，2013年8月合同到期后单位并未与我续签合同，2014年开始单位一直拖欠工资，而且劳动待遇也变化很大，工资跟之前相差了也很多。
    我想请问律师，如果单位违约我是否还需要返还给单位安家费？我是否能以单位合同到期不续签合同，拖欠工资以及劳动待遇跟之前不符为由向法院起诉，判定单位违约，除了违约赔偿外，并要求赔偿2013年8月至2014年8月之间的双倍工资。