我自己的房子出租,但是由于个人原因,我需要收回房子终止合同!我也承诺退

我自己的房子出租，但是由于个人原因，我需要收回房子终止合同！我也承诺退还房租、押金，违约金！但是承租人不同意，想继续承租直到合同到期！我应该怎么办？难道我就没有单方面终止合同的权利？