关于卖房,买家违约退还交得2000定金吗?

我房子证件齐全,交中介卖房,已经签过合同交过定金,到约定交钱日期中介打电话说买方不想买了,后又说有事不来办,中介说先给联系别的买家,事一直托着,应该怎么办?合同上违约金是5000元,他交定金2000元还退吗?我能卖给别人吗?合同上没限定日期,合同什么时候算过期,我打电话并录音,给他十五天时间不交房款算违约,合同失效合理吗?