我在成都龙泉驿区准备买二手房,贷款15万10年期限,中介直接就把我带到担保公司了,要收取担保费600

我在成都龙泉驿区准备买二手房，贷款15万10年期限，中介直接就把我带到担保公司了，要收取担保费6000元和100元手续费，当时我没带这么多钱，所以担保公司就给中介打电话了，说让中介先代付，我后来在网上查询到担保公司收费不合理，所以我拒绝付款可以吗？