房产买卖合同没公正就无效吗

我和买家签订了房屋买卖合同几个月了,对方已经支付了大部分房款,双方约定年底款清过户。现在他突然说贵了,想违约,还说合同没有公正,无效。是这样吗?我的房子是自己卖的,没有第3方。