我将将自己的宅基地调换给了邻居,在调换前取得一个宅基地的使用权,邻居在该宅基地上修建房屋后却不让我在他调换的地方盖

我将将自己的宅基地调换给了邻居,在调换前取得一个宅基地的使用权,邻居在该宅基地上修建房屋后却不让我在他调换的地方盖,指出农民乙没有该宅基地的使用权,因为这种问题经常引起纠纷