土地所收费

家里2001年向村委会交钱被批给房基一处，当时已打好地基，但一直搁置没有盖房，现在想盖了，但土地所的人就来制止，说要从新交钱，否则就不让盖。问，土地所的行为有法律依据吗？农民该如何申请法律救济？