房子首付合同纠纷问题

您好，我在银川市一家开发商买了一套房子，由于付首付时我手里现金不足，他们答应我先付50%的首付，再办理住房贷款，剩余50%的首付我可以延期一年多，到交房时再付清，暂由他们公司代付。然后让我签了一份《圆梦计划书》，这里面说明了这些情况，但里面又说我延长付首付时间的行为属于违约行为，要我每天交付剩余首付的7%作为违约金，这完全高于银行贷款利率。我是签过一段时间过后仔细阅读这份协议才发现这个问题的，我觉得他们这种行为有点高利贷的意思，我可以不交这些他们所称的违约金吗？谢谢您能解惑。