哥哥强占了我的房子不退给我，怎么办？

三年前从我母亲过户给我一房子。以前我们没有住着，就让我哥哥出租。租金全给了他。最近我需要自己住了，但是我哥哥却百般阻扰，甚至要强行占着。我不知道怎么办，我哥哥一向很凶。请各位为我出个主意。