房产证纠纷

1989年母亲和父亲先后去世。
　　1996年5月兄弟姐妹五人对父母遗留房产家具进行了协商处理。姐妹三人放弃了对房产家具的要求，而由我和弟弟平分。弟弟将自己一份作价转让给我，价款多少由张志泉提出，并当场签好协议，我当场付清价款。后来，村里没有征求我意见，将父母房产分成两户，以弟弟和我的姓名发放房产证。我也没有把弟弟转让给我的房产过户。以弟弟姓名登记的房产证一直由我保管。
　　　2012年6月18日晚，弟弟听说乡下要拆迁，说他有人认识，可以从中获得“空方”，并声明不会损害我的利益。提出，将其一家户口迁到乡下要有房产证，要求借用他已经转让给我的房产的房产证。我出于兄弟之情和对法律的无知，同意借用。他当晚来到我住处拿该房产证。我当时说，你迁好户口就把房产证还给我。他当时满口答应。我就把该房产证借给了他，并把“用完就还我”的话又说了一遍。在送他到路口的时候，我又说“我在小石桥那里上班，你就把房产证送到我那里。”他当时答应送到小石桥我那里。
　　　6月21日我就催促他还房产证，可是他编造各种理由，不肯还房产证。6月22日我到他家去索要该房产证。他也不肯归还。一直到今天，他也没有把该房产证还给我。
　　　我该如何要回该房产证？