我通过中介卖了一套二手房,走的是首付加房子抵押贷款,中介费贷款费用都交了我有什么责任吗?

我通过中介卖了一套二手房,走的是首付加房子抵押贷款,中介费贷款费用都交了,房子也过户到我的名下了,把房子抵押的手续都办完了,可是银行贷款下不来,可能是银行或者是国家政策的原因吧,现在原房主找我要钱,我该怎么办,他有没有权利把房子收回去,我有什么责任吗,我是农民工不懂法律,求解。