违章建筑扰民

您好！我是吉林市高新区居民。2004年高新区招商引进家世界超市，在我高新区B区23号楼及北奇楼中间搭建四层楼所谓的外挂扶梯间，面积大约1300平方米，由于侵占了我23号楼居民活动空间，2005年6月由高新区管委会出面调节给与赔偿（当时有13户每户一万元）。前提是后建的扶梯间面向23号楼墙体全部封闭，但是这个条件没有写进协议书里，后来超市没有开业就撤走了。一直空置至2014年，2014年高新区招商引进了瑞达综合批发市场，打破了和谐。面向我23号楼开商场大门，开了7个面向23号楼商业门市。垃圾脏水随处扔，运货、卸货不分时间，顾客和商户车辆堵在居民单元楼门前，我们去高新管委会反映情况，瑞达经理带领员工堵在楼下恐吓谩骂居民代表，高新区管委会把我们留在他们那的联系方式告诉给瑞达工作人员，瑞达工作人员给我们打电话恐吓，已严重扰乱居民正常生活。现在高新区管委会不承认当初的承诺。我们怎么办？求助。