房屋合同上写的租房者人名只有一个,但是她经常带男人回来住,我可以让那个男人走吗?

当初就想租给女生，所以找了个女房客，结果她经常带男人回来住，我是女生，觉得很不方便，可以要求那个男人离开吗，但是合同上没有写只限一人居住，只是写了租给她一个人的名字。