二手房房屋交易 违约

我是购买了二手房，交易时原业主要求做税后快放（公积金贷款），我也到了指定的按揭公司办理税后快放，但是由于按揭公司审批过程中不同意做快放（当时我已经交付了税后快放的费用），这样的话现在原业主反悔了，主要是因为楼价一直涨，他觉得卖便宜了，现在以我没有做到税后快放的理由要求取消交易。