地税局这样做是乱收费么

我是一个农村人，农村人需要娶媳妇就得建新房子，家里面没有庄基地。就在原来自己家的地里面建上了房。而且村里好多人都是这样做的。房子都住了好多年了，现在地税局的人又跑来要收钱，而且还说我们要是快点交钱还能少交一半，院子就不算了。好想收多收少是他们说了算一样。我就是对法律不了解，现在想知道该怎么办？