我在今年三月买的房,交了定金鉴了协议两天后,卖家决定又不卖了!并不愿付违约金!我有不卖房的电话录音,

我在今年三月买的房,交了定金鉴了协议两天后,卖家决定又不卖了!并不愿付违约金!我有不卖房的电话录音,想起诉卖家,后卖家一直要再卖房给我,我不卖算我违约吗?