没有签合同，客户给我们支付部份钱，因客户的原因结束项目，不退还可以吗？

在五月中旬，客户通过同事的介绍找我们做网站。我们没有签订任何合同，在做之前要求客户先支付,客户同意先支付4000元(这个项目总共12000元)，但双方并没有明确表示这个是什么费用。由于客户总是不断要求修改，与当初项目要求已经有很大变化，所以拖到九月还没有完成，因此，客户嫌时间拖得久并表示不再继续项目，我们同意。之后 客户过了一天又要求我们提供部份项目资料给他，原因是之前支付了4000元。我们不同意，对此，我们是否应该退还4000元？我们能否要求对方赔偿四个月时间的损失费用？