从中介那里买了二手房定金已交对方又不卖了

年前在中介那里定了一套二手房子定金也交付了也签了房屋买卖定金协议，中介在办理房产证等一系列手续时业主以没时间为由拖了几个月后说不想卖了，只退还我交付的押金不退还违约金。（很想让对方退还违约金毕竟托的时间太久）
    我想咨询要是起诉对方是由中介起诉还是由我起诉，起诉到执行得多长时间，期间能产生多大的费用。