定金问题

我准备购买一套二手房,总价120万,首付30%。付了定金5万。中介负责帮按揭贷款。去了2家银行都只给贷款6.5成。假如银行贷款批不下了7成,我想把定金5万要回来不买了。因为增加首付我没能力增加了。合同没有写明贷款批不下了是谁的责任。这种情况下我定金应该如何要回来。