我老公多次出轨不挣钱养家,我俩现在协议把一处房产过

我老公多次出轨不挣钱养家，我俩现在协议把一处房产过户到我名下。房产证是老人的名字，房子是我们婚后翻盖的，他再犯错净身出户。房子过户到我名下需要公正吗？如果离婚房子会有争议吗？