二手房交易我是买家，在房产证没拿到时和买家签订了居间合同，约定好房产证办下来之后双方在一星期内去房产

二手房交易我是买家，在房产证没拿到时和买家签订了居间合同，约定好房产证办下来之后双方在一星期内去房产局办理过户手续，现在已经过了当初约定好的时间并且现在得知买家不买这个房子，买家找了一个第三人说按照我和买家当初签订的价格付款方式等现在和这个第三人办理过户手续，我该怎么办？当初签订居间合同时买家付了五万定金，其中三万压在了房产中介作为保证金，房屋钥匙也交由买家使用，现在买家不履行合同，我可以把房屋钥匙追要回来吗？