租房后发现周围环境太吵想退房时房东不给退怎么办

十一租了个房子，当时租的时候感觉房子挺好的，正南向阳光很充沛，通风也不错，整个房子布局也好。当时外面楼的左侧正在施工，我们还特意问了下房东会不会太吵，房东说关上窗户就行，我还问了晚上施工不施工，房东说晚上不会的，就决定租了，每月房租1900元。可是等我们搬进来，下面的施工队，每天晚上从2点开始一直到6点，两台挖土机，好几辆运土车不停的响，我们租的这栋楼正好离施工现场最近，听起来就像在跟前一样，根本睡不着觉！
        我现在联系房东，房东一直让我们自己解决，我们晚上打环境保护局电话，他们说要只是拉土他们不管，市长热线也说拉土车只能规定晚上运行，意思就是不管！
        当时合同上写的租2年，违约金1900，我想着就当倒霉，给他赔个违约金，可是这话给他说了，他还是不退，请问这种情况我们该怎么办，现在每天睡不好，小孩也快出生了，怕吵声对小孩也有影响。
        我们联系房东想退房，房东可能被我们搞烦了，电话也不接，一看是我打过去的就挂断。已经联系不上了，请问这种情况是否必须起诉?我该如何起诉？