签了二手房交易合同,卖方现在房子不想卖了

3月23日,通过中介与房主签订了二手房交易合同,由于房子没满5年,合同里写由我交营业税,但是就在双方准备资料的这段时间,3月31日起,满5年免税,变成了满2年免税,也就是说我签的房子没税了,房主现在要涨价(但是这些税都是我交,他净得的房款不变),他不愿意继续合同,并且一直拖着,这两天约他,他不表态,我该怎么办。