十几年前,用田换人家老住宅,当的答应给我无条件建房,现在反过来想要回宅基怎么办?

十几年前,用田换人家老住宅,当的答应给我无条件建房,现在反过来想要回宅基,村干部调解用新宅基互换,他想用经济补尝,怎么办。我有土地使用证