户口押金

房屋买卖合同中并未规定户口延期迁出需要留押金,但是规定了违约金,延期迁出每天支付万分之五的房款作为违约金。我想问一下,我作为买方,如果留一部分钱作为户口未迁出押金,是否有法律支持,因为合同里并没有说明可以留下户口押金一说,还是之后直接根据违约事件,提请法院,要求卖方支付违约金?