公司让我暂时兼管另一部门，我可以不去吗？

我本是专管消防的部门经理职务，现在公司让我兼管保安部但不加薪，保安部原有一副经理负责（没有经理），这月调去上晚班管理晚班保安，白班保安没有负责的，总经理说让我暂时兼管一下，没有下文件就是叫去口头安排的。我可以不去吗？2007年来公司一直没给我们签合同，2013年因为劳动局强制买社保，就叫我们签了一份一年期的合同，当时叫我们签完名也没给我们一份合同。直到现在也没再签过合同了。如果公司以我不服从安排扣违约金，公司是否违法。