我前段时间在中介签了份购房协议并交了两万定金和中介费,现在国家改变政策增加了很多个人税算违约吗?

我前段时间在中介签了份购房协议并交了两万定金和中介费,现在国家改变政策增加了很多个人税,我承担不起不想买了,请问我的钱能退回吗?算违约吗?