我家在广西桂林市雁山区XX,现在因为村里有些人已经在自己家田里建房子,请问有什么办法吗他跟政府里人熟?

我家在广西桂林市雁山区XX,现在因为村里有些人已经在自己家田里建房子,还逼着我们把田跟他换换奶奶不同意,他就威胁我家说我起了也怎么样还说让我家一辈子都不给起在田里,请问有什么办法吗他跟政府里人熟