我们前段时间看了一套房,什么事情,还有该发生的问题都和中介公司说明了这种情况该怎么办?

您好!我们前段时间看了一套房,什么事情,还有该发生的问题都和中介公司说明了,他们说可以办 ,我们在中介公司的安排下和房东签了合同办了各种手续,现在银行贷款不批,所以现在没办法往下进行交易了,想要终止合同,现在房东不乐意非说是我们的责任要求我们赔偿定金和违约金。是我们的责任吗?这种情况该怎么办?