我在农村建房,我问他占了你多少土地,就不说占了他多少土地,请问我怎么办,我怎么办

我在农村建房,本村人来我家说我占了它的土地了,我问他占了你多少土地,他光说我占了他土地了,就不说占了他多少土地,实际上我没有占他土地,他就是想敲诈我的钱,让他六十多岁的母亲天天上我家闹事,请问我怎么办,我打110来处理,110让村委会处理,村委会说你想建房就给他钱,我怎么办