我在中介买套二手房,贷款,首付61000,贷款12万,交中介1800中介费如果起诉可以吗?

你好,我在中介买套二手房,贷款,首付61000,贷款12万,交中介1800中介费,5000垫支和评估费,可银行给驳回了,说贷不了12000,只能贷103000,我说那你们带不了,那我就不贷了,我全款,结果,中介要从5000里扣房屋评估费,我想问下,如果起诉可以吗。