二手房买卖合同签订,我已经付了首付款之后,房管局通知我对方有违建。我要求解约。对方不同意,在我未知情

手房买卖合同签订,我已经付了首付款之后,房管局通知我对方有违建,我就把贷款的申请撤了,我要求解约。对方不同意,在我未知情的情况下整改了。请问我可以诉讼吗?法律会支持我吗?