车被扣，病人家属不愿跟我到交警队做事故认定

您好，我是出租车司机，4月l日上午8点多我在公交车站下客，乘客开门碰到骑电瓶车的人，当时到医院查出是颅脑出血、颅骨骨裂。住院当日家属交3千元医药费。下午我到交警那里做笔录。交警说三方都有责任的。2日我交3千元医药费，3日我有交5千元医药费，4日我到保险公司去办一万元垫付手续。我问医生病人情况，颅脑血已不出，病情已稳定。5日我打电话给病人家属，他说他不懂要我找他哥，我打电话给他哥，他哥也不愿意跟我去交警那里做事故认定。交警打电话给他们他们也不去。我的车和驾驶证被交警暂扣有7天，我跟交警说先放车他不肯，说要事故认定书出了才能放，我敢怎么办？