房号转让后没能力购买房子可以将转让费和预付房款订金要回吗？

本人与赵某2014年6月10日协议约定以赵某的名义购买庐山路以东油田一中新校区以北胜利街道与新金基房地产开发有限公司开发的小区房屋一套，该房子为胜利街道办事处员工有权购买的，赵某为其员工，我已按赵某的单位要求以赵某名义于2014年6月10日向东营新金基房地产开发有限公司在建行的账号存房款订金叁万元整，同时约定房号转让款为人民币伍万元整。
2014年6月22日，本人将伍万元转给赵某。一周后赵某通知我缴付叁拾万元，完全超出首付十几万的预期额度，因为我是首套房，当初想要购买是由于价格合适才考虑的，经过我这边多次努力还是未能将叁拾万元凑齐。至今房子的事情没有着落，我这边已经付出总共捌万元人民币，我可不可以向赵某要回这些钱？觉得我捌万元丢了太亏，我该怎么办才好？谢谢。