写了退房申请,开发商同意退房,但没签退房协议,能要求交房吗?

购房并网签后要求退房,开发商口头同意,我写了退房申请。购房合同已经交回,写了收据给我。后房管局禁止办理撤销备案,退房无法进行。现在已经到了交房日期,我要求交房他说我已经申请退房了不能交房了。在法律上我可以以没有退房协议为由要求他交房吗?