本人在马鞍山通过中介看了二手房,但并未签订购房合同,我现在不想买了,请问定金协议上可以不用履行吗?

本人在马鞍山通过中介看了二手房,与中介及房东委托人签订了手写的定金协议,付款方中介写成了房东的姓名,但并未签订购房合同,定金五万在中介那里,我现在不想买了,请问定金协议上可以不用履行吗?