冒认他人身份到银行开户但不使用会如何

一个同事用别人的身份证到银行开户，他说长的像我，让我帮个忙，平时上班也要靠他照顾，一时犯傻竟然答应他了，想着不用记录我自己的信息就算了，况且银行工作人员一看不像也不会办给我，谁知竟然办下来了，可是拍了我自己的照片和指纹，出来后我越想越不对劲，怕他拿银行卡不知做什么违法的事，强烈要求他回去销卡，但是银行的人说要本人去销，办卡给我们的那个服务人员也说了我们是冒认办卡，可是银行人员还是坚持不符合规定，不予销卡，同事也根本找不到身份证本人来销卡，出去后我不放心把卡放在同事那里，防止他做违法的事牵连到我，所以没有把卡给他，真是后悔死答应他了，现在怎么办呢？如果我一直留着那卡但是不用，行吗？时间长了会自动销户吗？