房租可以退给我吗?

我找中介租了一间房子,前几天我因工作调动不在那里住,就让我朋友去住,中介说是我转租让我无条件搬出去并不退房租,如果不搬出他们要强制让我搬出,这合法吗,是否应该退我房租。合同上不让转租,违约扣一个月房租和房租押金。