我租了一个房子、后来有事搬出去、给房东说了,房东不退押金、后来我不在还把房子租给别人、我跟他没有终

我租了一个房子、后来有事搬出去、给房东说了，房东不退押金、后来我不在还把房子租给别人、我跟他没有终止合同、他房子还是违法建筑（房中房）。我该怎么办。一共押金4600、他只同意退1000。我觉得太少。