夏天定的房子,交三万了定金,房子是买不起了,他说是我违约了,定金不退了,真的一点都不能退吗

夏天定的房子,交三万了定金,前一段时间出点事,房子是买不起了,找经理聊了,他说是我违约了,定金不退了,真的一点都不能退吗