我通过中介公司买了一套二手房,由于房主在外地暂时回不来办手续,我电汇交了2万元订金请问中介有理由告我吗?

您好,我通过中介公司买了一套二手房,由于房主在外地暂时回不来办手续,我电汇交了2万元订金,房主派他的家人和我签的订金收据,中介给我们准备了一份房屋买卖定金收条。中介让我们交中介费,我不同意交,我跟中介协商房主回来我们签正式合同再交中介费,中介不同意,还威胁我说我违约,请问中介有理由告我吗?