他人拿了我的房产证贷款，我没签过任何字，我能拿回房产证吗？

在2000年的时候，房产证被他人借去到银行贷款，但是没有签过任何字，只是单纯的借出了房产证。贷款金额是4万元，由于经常拖欠利息，导致现在为止利息高达5万元左右，房产证目前还抵押在农业银行。现在本人想拿回这个房产证，但又由于那人换不上贷款的本金和利息，那么对于这种情况，本人是否需要承担责任？承担多少呢？在这件事情上，该怎么去维护本人的利益，麻烦各位律师解答了，谢谢。