合伙人退股，我该怎么办

2011年5月1日我和我的一位朋友一起合伙开了家饭店，暂定5年，中途不得撤资，因为不是普通朋友，关系特好，所以无任何协议，此饭店通过转让接手的一个饭店，当初我和我朋友各拿出21万做为前期投资款，含转让费和一年房租，未够买其它资产。当初双方决定一起经营此店，但他没有履行自己的承诺，我只好独自一人经营，中途他只有偶尔到店里几次，3个月后，我请求追加投资，这位朋友再也不投一分钱，我只好一人挣着此店，在缺乏经验和管理方面的因素下，至2012年5月整整一年，帐面亏损13万。在亲朋好友的帮助下，我一人将第二年的房租12万付了，希望能将此店盘活，来弥补之前的损失，但我这位朋友又提出退股，要求退其21万的现金，我没有答应，他就来店里闹事，弄得我店里损失不小，（有派出所为证）请问律师，按此理我是否应该退其股份，是否按此价格退给他？退还多少？