10月份时候一个W朋友说给我补过生日约我出去吃饭喝酒，因为高兴大家都喝得不少

10月份时候一个W朋友说给我补过生日约我出去吃饭喝酒，因为高兴大家都喝得不少，从酒吧出来时候W的男生朋友L和我开玩笑比力气大，然后我说我背得起他，他也没怎么拒绝，结果我们两个都摔倒了（L倒在我背上的），当晚手很痛就去医院检查，第二天结果出来医生说是骨折要住院并交4万元动手术。我没那么多钱，就试着和L说了手术的事，他也说他也有部分责任，并爽快的转给我两万元，并说最后扣除医保下来，一人承担一半医药费，鉴于朋友那关系和他让我意外的爽快态度，我也没往后续多想想就答应了。后来手术是我右手手肘安装了钢板和钢钉进行复位固定，并且一年内要定时回医院复查复健，一年后二次手术把钢板钢钉取出来（这个情况L是知道的）。出院后一个星期去医院结款，除开我自己的医保部分，医院退的也就两三千块钱，并且都已经用于那一个月的复查和拆线什么的。现在L突然给我说他遇到点事，让我退他当时给的两万所剩余的钱。我说也没剩多少钱了并且都用于后面的医院开销，但他还是坚持说我应该退他他的那部分，请问我该退还他吗？如果细细算下来，他还该承担什么责任？我以后的复查和二次手术的费用等他还有责任吗？（我是女生，做文秘工作的，现在手术缝了十针，并且会留下很长的疤痕）