爸爸向爷爷借过五万块钱，现在爷爷过世了，钱应该还给谁？

先介绍一下家里情况，稍微有点复杂，爷爷生前有两个老婆，一个生了3个子女（包括我爸，姑姑和叔叔），另一个生了4个子女（其中一个叔叔已经过世了），两个老婆和两边子女极少往来。两个奶奶几年前都先后过世了，爷爷生前最后这几年，钱一直由姑姑（爸爸同父同母的姐姐）保管，爷爷去年也过世了。爸爸前年帮我向爷爷借了5万元钱，当时爷爷也没打算让我和爸爸还，更没说什么时候还。因为钱都在姑姑那里保管，怕爷爷以后忘记这回事，所以爸爸写了张借条留在姑姑那里。爷爷过世的时候没有留下任何遗嘱。现在我打算还这笔钱，毕竟当时也说是借的，虽然爷爷已经不在了，但是我不知道应该还给谁？怎么还？是分给爸爸这边3个姐弟（同父同母）？还是分给6个在世的（同父异母）？还是分给7个（包括过世的那个叔叔的家属）？期待帮助，万分感谢！