楼上装修渗水到楼下，楼下如何维权

我的楼上装修，为了省钱，没有叫正规装修公司装修，自己叫了一些马路民工就开工，拿大锤乱敲乱砸，在砸完地板砖后，又在上面（也就是我家的天花板上面）拌水泥，导致我客厅和一主卧室天花板渗水发霉，我找楼上协商多次，才给了我一点钱当是赔偿。我以为事情已结束，但过了一段时间，楼上又把我家厨房天花板敲裂和另外一个房间天花板搞渗水发霉，我就又找他来协商，可这回他就耍赖，说不是他搞的，不肯赔了，明明是他胡乱装修造成的，可他就是赖着不赔，我找他谈过多次，他就是不肯赔。他住我楼上，我在楼下，渗水发霉受罪的是我家，他本着能赖就赖，能拖就拖的赖皮本色，就是不赔，我又不能打他，打了他我就变犯法了，如今一拖就拖了几个月，我想走法律途径告他，但我不知能判他赔多少？如太少，我的时间精力都浪费在这上面有点不值，还有不知能告他精神赔偿吗？