农村土地被村干部私自搭建。

两年半前村干部要租我家土地，过后一个月就知道他要搭建。我们也明确和他说我们不租，借他免费用两年，以后要归还我家，现在他不担不归还，还在扩建。我们有录音，现在应该怎么办？