我买的私人房子共六成…我要的六楼…买的时候谈好十二万,交了四万,过了半年我就不想要了,退那房主不退,

我买的私人房子共六成…我要的六楼…买的时候谈好十二万,交了四万,过了半年我就不想要了,退那房主不退,到现在已经两年了…他的房子没有房产证…只有他自己有…我们把钱交完了可以把我的名字加到房产证上…但我现在真是不想要了…钱他又不愿意退,我该怎么做呢?