别人用我的身份贷款到期不还怎么办?

2011年别人用我的身份证贷款5万元（用款人是信用社的），当时说是让我担保的，因为是亲戚，我就去签个字，签完了才说是以我的名义贷的款（农户担保那种贷款），后来，2012年的时候用款人说款已经还了，让我放心，我也就没当回事。2016年5月当时放贷款的信用社工作人员突然来找我，让我签字并归还这笔贷款，我没有签字，因为信用社工作人员也承认钱不是我用的（贷款时5万元钱没有给我），我让他去找用款的人要钱，随后，我去找了用款人要求他归还此笔贷款，他承认钱是他用了，但又说现在没钱还，这笔贷款已经过诉讼期了，你只要不签字，信用社就会做为呆账处理了，但我知道他家有最少200万的房产，请法律专家能不能帮帮我，怎样来维护我的合法权益，万分感谢！