关于租房子一些问题求帮忙

我是跟二房东租的房子，他与房东签的合同是到明年五月份。之前去租房子，这个二房东特别好说话，我说要签合同的时候，他说不用了，住到什么时候想搬走就可以搬走了。后来才发现这个人太假了，而且各种计较，实在不想因为租房子而弄的不开心，打算搬走，可是现在他说搬走不能退押金（押一付一），请问这个要怎么办呢？