这种情况能拿回社保费吗？

我在一家公司工作，当时说前三个月不买社保，第四个月才开始买。当时是签了合同的，但公司没有把我那份合同给回我。第四个月的时候，公司的负责人找我谈话以我的能力不符合所给的工资标准为由，要对我进行降薪50%,还拿了份降薪通知要我签名，说要么就签名接收，要么就自动离职。我没有签名接收，选择了离职。当时，我和他谈到了关于第四个月买社保的问题，（前三个月由于公司不买社保所以我一直自费在以前的公司购买）说第四个月的社保还是我自己在外面购买，到时候公司把公司应该要交的那部分费用给回我，当时他说没问题，这个是当然的。（这段对话我有录音）现在公司的老板说因为我第四个月只工作了十五天，不愿意把公司要交的社保费给我，只愿意给一半。请问我能要求把第四个月的社保费全部拿回来吗？我是在十七号离职的。如果有需要，我能叫他们把前三个月的社保费都给回我吗？他们还说降薪通知根本不需要我签名就能执行，不属于合同方面，是公司的内部事务，请问是这样的吗？