新房还没办产证更名需付全款,追要定金

我通过中介买了一个毛坯新房，产证还没办出来，中介在合同上约定先付部分房款然后再到银行贷款后全款给卖方，如无法更名需退还买卖双方付给中介的资金。现在告之我可以更名但是要全款付清不能到银行贷款。我现在不想买了，中介说我的5万已经花出去了，并且没有什么凭据，现在我能要回我给中介的5万定金吗。