二手房纠纷麻烦问题

我通过中间人买了一套二手房，钱给了中间人，我先付了80%的房款，中间人给帮忙办理的房产证过户，土地证没有办理，在办理房产证期间我和原房主没有见过面，中间人是我们双方之间的亲戚，都比较相信。签字什么的该对方签字的他都签了，我签的也签了。我一直没拿到钥匙，过了几个月我找到原房主，他和中间人产生了经济纠纷说没收到我的房款钱为由不给我钥匙，我又找到到了中间人，中间人说给处理或者退给我钱，拖了几个月始终没有解决，现在房子都没人住。房产证我是到房产局办理的并且是真的，这种情况房子法律上讲是不是我的现在。请问我应该怎么办。