对方先挑事，先动手，对方脸部有一两处的挠伤，报警后派出所已经调整完毕，现在对方要求赔偿2万，我该怎么

公司提供给员工一个两室一厅的房子，我和同事各住一间，因工作及作息时间，对方女经常在公共区域大声说话，七点多钟就开始洗衣服等，终于我挺不住了，就跟女方的爱人（我同事）沟通了一下，结果回复好的后，第二天女的变本加厉的，越来越严重，我就说能不能少点声，因为我下班晚（凌晨12点半左右到家，洗漱完1点），女的说不能呀，我为什么要小声，谁规定公共区域不能大声说话，我看跟这样的人理论也影响我的情绪，我就不再说话了，可是没过多久，我妈妈从外地回来，第二天早上我妈还是先跟女的打招呼，结果女的开口第一句话，就是冰箱里面不能放面包，只能放必要的，非必要的都不能放。冰箱保鲜层四个，上面两个我们用了，下面两个他们用，结果就是让我们给倒地方，我们第一天没理她，结果第二天又出现同样的问题，必要给他们家倒冰箱，不倒就各种骂人，冰箱是房东的并不是她自己买的，后来就是在争吵的过程中，女打了我，我们就打了起来，但是她和她老公一直把我压在地上，说我抓伤了她的脸，这种情况到底是谁弄的，谁又能说清楚呢？当我们在打架的过程中，我妈妈抱住了对方的孩子，合计大家看到孩子的面子上能不打了，结果她把我们屋的门给踹坏了，说我们打孩子了，并且让孩子描述一下我们怎么打的？结果我报警了，因为生命受到了威胁，到派出所后，警官说如果我们打孩子了，孩子根本不是那样的状态（从开始我们吵到打到派出所，不哭不闹跟没事人一样）警察给我们调解了，让我第二天拿东西去看看，结果本想第二天去看看的时候，女的就各种辱骂（骂人的词汇量真的特别大）并且也把冰箱给断电了，说不给老子倒冰箱，那就谁也不用？事情发生了10多天，因为和她老公是同事，公司出面给协调解决，我给道歉了，并赔偿500元，但对方不同意，说要2万元的治疗费及精神损失费？我想问一下，起因都是对方而起，我只是不想让公司再替我们增加不必要的工作，我想息事宁人，我错了吗？这怎么口张的这么大呢？