哺乳期被单位辞退两个月后，单位一直不给出具正式文件，单位怕承担法律责任又让我回去上班，我不可能再回去

今年5月初单位副经理口头通知我被辞退，理由是单位效益不好。我还在哺乳期，到今年11月份才到一年。被辞退后我一直要求单位出具书面的辞退文件，但公司一直不给盖章，到了6月底，公司又叫我7月份回去上班，说是领导研究了劳动法，如果这时候辞退我公司算是违法了，他们怕承担责任不给我出辞退文件。退一万步，如果我不在哺乳期，辞退员工至少要提前一个月，他们也没做到。
    另外，我的保险因为一些原因是想7月份转出来的，现在我手头没有任何的书面证据来证明公司的违法行为，我想去仲裁申请经济补偿也没有书面证据，我只有和副经理的QQ信息和与董事长打电话的录音（有他承认如果辞退我算是违法，所以让我再回去上班的对话内容）。公司确实是辞退了我，现在我的个人利益严重受到了侵害，我想维权，现在我不知道该怎么来维权，5-6月份的保险都是我个人交的，单位也没有给我发一分钱的工资。我是想咨询一下：1）我想要求单位的经济补偿，该怎么来维权，2）我们的劳动合同没有在劳动局做备案，交了三年的失业保险到现在可能无法领取，我该怎么维权？3）对于公司这种不负责的行为，我该怎么维权？