我的定金谁负责?

买房前跟中介说了贷款(先息后本)若不能做下来就不交定金,后中介找了他们的贷款机构,对方咨询了一些问题(是否在四大优质公司供职,流水,信用卡是否逾期等问题)后说可以做,然后我们就交了定金,但最终却没有办下来贷款,原因是公积金取过,但贷款人员自始至终却并未询问过这个问题。请问我应该找谁追责?