女儿房产要卖，户口迁不出，违约金二十多万，我有责任吗？

您好，历史原因我和女儿的户口和我姨在她所属的房子里，已经十五年了。今年她和我说房子要卖，让我把户口迁出去，我去了多个派出所，都是没有直系亲属或房产迁不出去。我在京没有直系亲属和房产，为了解决问题，我在北京边上最便宜的地方贷款买了一套期房，但迁户口需要等。并且明确告诉短时间内迁不出去。我姨后来突然告诉我，房子已经买了，合同上有违约条款，三个月不迁出总计违约金二十多万，我说我确实没办法迁出去，这期间一直在奔波这件事，但没结果。现在时限已经到了，她说让我赔他违约金。我想知道，我有这责任吗？他们定合同时间、地点，内容，我都不知道，我要求过和卖家沟通也遭拒。