买的拆迁房现在不想买了

今年2015年5月份通过亲戚给我介绍个拆迁房，第一次见面，卖房子说房子可以卖。我就准备好了钱，第二次见面房主说他侄子现在还在里面住，等他侄子10月份搬到他侄子自己已有的拆迁房住才能给我。我当时就给了他五万，快到10月份我给卖房子的打电话问他侄子可搬走了，他说没有可以让我先去住，他侄子在租别的房子住，我感觉不靠谱就想买了，就问房主要我给他的五万元，房主说现在没钱等他把房子卖掉在给我这五万。律师同志我该怎么要回这五万呀。