房子买了四五年了,前卖主不肯在签字转土地证

我房子买了四五年了,有房屋买卖合同。房产证早转了,现在我想转土地证,可是遇到麻烦了,卖给我家的前房主不肯签字,他签字要我们给他两万块钱,请问我们该怎么办,能不能不要他签字转土地证