有关租房的问题,请有法律知识的大大们予以指教???

房屋是我的，我把房屋租给一个公司用3年，再免费用2年，共5年，后2年不交租金，也是该公司经理走关系得到的2年，签名也是那个经理签的。合同只写了在租赁期间不得转租他人的违约条件，没写免费期。请问到了免费使用期时，该经理已经离开该公司或退休了，他个人使用了房屋用来转租他人。我能否用违约处理收回房屋？