单位指标房过户

2009年我购买某单位指标房，付给对方指标转让费3万元，并写有转让协议，现在我已经交清全部房款，房子准备交付我们使用，但对方爱人（女）提出当时指标转让时她完全不知道，想悔改当初的转让协议且要收回房子，但我坚持房子归我所有，因为全部房款由我交清，目前，房子要过户到我名下除非对方同意签字，那么我现在该怎么办？