我是一名会计，2015年6月开始在一家单位上班，10月份发现单位不给交保险

我是一名会计，2015年6月开始在一家单位上班，10月份发现单位不给交保险，于是我提出辞职，老板当时答应了，但要求我在找到接替我的人后再走，我答应他做到年底，但是年底仍旧沒有找到人，也没有人和我做交接，于是今年2月份我单方面离职，但是出于道德，我一直还在为公司处理财务事宜（沒有收取任何费用，纯人情帮忙），4月份我找到了新工作，沒有时间再过去，单位在5月份也找到会计，要我回去做交接，但是新工作也比较忙，抽不出时间过去，于是就在qq上把单位的财务事情和新会计交代了一下，但是新会计一直说以前的账务有问题，说我多申报了税款，讓我回去说清楚（我保证账务绝对没问题），请问如果我拒绝过去的话违反法律吗？