一房产纠纷问题

我用从父亲与继母婚姻存续期间得来的钱款买了一处房子,当时口头承诺该钱款归我了,之后父亲与继母离异,若继母反悔向我追要,那我买的房子是不是要还回去?