关于宅基地的问题,原来一起合伙做生意所以他家建房子的时候,他这是不是属于非法占有?

我想咨询一下关于宅基地的问题,原来一起合伙做生意所以他家建房子的时候,他就占了大约宽一米,长20米的地方,非法占有占有将近20年,现在我们家要盖房,想把我们原来的地方要回来,但是他却以自己住了好多年为由不给我们,我们应该怎么办?他这是不是属于非法占有???