我要起诉他以什么方式起诉，有多少把握？

我在别人手里面买了一套按揭住房,我们私下签了一份协议。但是现在他又想要回去,我不想给他,当初没有公证。自从签订协议起余下的房款一直是我还的。