老人能要回自己的房子吗?

老人有一处房屋，有三个儿子，十多年前，老人和三个儿子商量，将房子给当时无房的老二，老人跟其一起生活，并口头约定，房子过户后，这房子的实际房主仍然是老人，老人百年之后，房子归老二。母亲有退休金，身体也一直可以。现在，得房的老二对老人的态度很差，更不谈照顾老人了，并要将这房子给他儿子。老人很后悔，问能要回这房子吗？