签了二手房交易合同,卖方现在房子不想卖了

3月23日，通过中介与房主签订了二手房交易合同，由于房子没满5年，合同里写由我交营业税，但是就在双方准备资料的这段时间，3月31日起，满5年免税，变成了满2年免税，也就是说我签的房子没税了，房主现在要涨价（但是这些税都是我交，他净得的房款不变），他不愿意继续合同，并且一直拖着，这两天约他，他不表态，我该怎么办。