我买的别人按揭房子,私下签的协议,从2016年11月签的合同,已经给了他12万这种情况法律上承认不?

我买的别人按揭房子,私下签的协议,从2016年11月签的合同,已经给了他12万,银行每月还款的钱,我从2016年11月还到2017年6月,他说还完房贷才能过户,现在政策又变了满需要社保和纳税两年,我感觉风险太大了,所有的信息都是他的,我还在给他还钱,这种情况我现在想退,但他不愿意,这种情况法律上承认不?