求助！无良房东耍赖不退房屋押金

我08年11月30号租的房子，跟房东签了一年的合同，09年续签一年。10年续签合同时由于房东比较忙一直没有续签，我们通过短信确认并将半年房租给了房东（有房东收到款短信），11年4月份的时候我们由于要离京所以就不能再租这个房子了，提前一个月的时候（5月31日交下半年房租，4月28日通知房东不租了）我短信和电话通知房东房租到期我们就不租了。
5.1的时候我们跟房东当面沟通退租事宜的时候房东说的很好，说什么让我们配合一下看房子，好合好散，到时候给我们押金之类的。由于房东要价高结果到了14号好几拨人看房子都没租出去，今天跟房东沟通，房东变卦说不给我们退押金了，说来说去就说因为我们提前退房给他造成了损失。根据08年和09年的租房合同，明确写着“由于双方特殊原因要提前终止合同的，需提前一个月通知对方”，虽然10年没签合同但我们电话沟通还是按09年的合同走，并且我们手里有房东写的房租押金条。无良房东现在就是在耍赖不给我们押金，多次沟通无果，想问问这种情况我们该怎么处理。由于我们都不在北京了，打官司会不会很麻烦，请各位律师帮我出出主意，谢谢了。