关于工资的发放

律师你好;我有一个难题诚心请你解答：是这样的。我现在一间民企从事仓库主管工作，与老板口头谈好年薪5万，每月分两部分发，一部份系正常公司财务帐发，另一部份约1600元由老板自已转入（目的是部份人工资高，怕公司其它员工有意见）。但现在老板第二部份钱都不是每月准时转入，经常拖欠几个月，还经常以各种现由拖欠（他一直都是习惯以这种方式管理公司，高薪骗新员工入公司，做一段时间以各种理由拖欠或增加工作量，减薪等，迫员工自行离职）。请问若公司与我解除劳动关系，或降我职，我有没有办法追回不正常过财务帐的钱，赔偿金是否纳入计算。（注：公司从不与任何一员工签劳动合同，只是口头协议，我入公司已两年).诚心等待你的回复，多谢！