我的建房押金乡政府不按实数退换

律师你们好。0我的问题是  我与今年7月份建设了自己的新房，是老宅翻新的，当时乡里边说是让交2000元建房押金，建设好后 把建筑垃圾清理完了然后还有就是不能超过三层，含三层。不超过标准就退换给我们，并且村里面还出具了证明同意建设。。于是建房前就去乡里面吧押金交了，现在房子也盖好这么长时间了，标准达到了 盖得三层没有超标准，建筑垃圾也清理完了，村里面有出了个证明说是验收合格 准予退换。可以到了乡里边却一直往后推   跑了好几趟了都不给，说是等等再说等等再说，现在两三个月了，昨天有去乡里他们却说只退1500元，剩余500不退了，说是违法建筑了。又说当时都不让盖，又说从2009年以后的都是违法建筑，我都迷茫了，什么手续都有  他们收的押金，出的收据，到了退换押金是 却成了违法建筑了。村里也同意盖了 乡里领导当时也签字同意了。到退换是成违章了。我们村都十几家遇到了同样问题。想问问这样做  他们对吗？我们该怎么办？