我在2011年4月在苏州太仓购买一套房,当时我跟卖方明确在上海市已经有二套房并且二套房贷。卖方:承若

我在2011年4月在苏州太仓购买一套房，当时我跟卖方明确在上海市已经有二套房并且二套房贷。卖方：承若可以已买，并承若有卖方代办贷款。现在说我违约并要我赔偿违约金吗？还不让我退房。