关于证据问题

2013年12月23日晚8时左右，因楼下嫌我家孩子吵上来3个人，上来就又骂又砸门的，我开始没有理会她们，因为就我一人在家带着孩子，我想忍忍算了，但是她们没完没了的砸门，把孩子都给吓哭了，我就开门和她们理论，没说两句她们就一起上来就把我给打了，因为她们是3个人，而且我也只是想让她们别砸门了，还告诉她们把孩子都吓着了，根本没想到她们会动手，也没防备，所以我根本就没有还手之力，直接就被她们给打蒙了，她们打了我半天才住手走了，而且她们是在我家当着孩子的面打的我。之后报警，让做伤残鉴定，我第二天就去做了伤残鉴定，鉴定结果为轻微伤。昨天民警说传唤了对方，今天去派出所询问处理结果，民警告诉我说证据不足没法处理，说没有人证物证，因为当时就我和对方四个人在我家，并无旁人，还说对方3人口供一致，都说均未动手，我身上的伤不是她们打的，还说一直是我在打她们3个，她们还说都受伤了，要求做伤残鉴定，打我当晚她们看我说要做伤残鉴定，她们也说要做伤残鉴定，可一直拖着没做，昨天民警传唤她们，她们说还要去做伤残鉴定，可她们根本就没有伤，我根本都没碰到她们，我开始一直护着自己的身体，后来就被打蒙了，可民警说她来派出所时手有些红肿，可那根本不是我弄的，民警说那没办法，说对方要求做他们只能同意，现在只能再次等待对方的伤残鉴定结果。而且民警告诉我这个事情不好办，因为我没办法提供人证物证来证明她们说谎，光靠我身上的伤也没法证明就是她们打的。说如果我愿意调解很肯可能就是赔我点钱了事，如果我坚持走法律程序的话，可能就会是一直处在证据收集中，无法结案，可能5年、10年或是更久，直到能收集到证据证明我们一方所述为事实为止。请问民警这种做法和说法正确吗？还有如果正确，难道我就真的没有办法让打人者受到法律制裁了吗？