关于首付款打给中介事宜

由于不知道,在签订二手房合同是,同意首付款打给中介帮忙办理业务,但是后来看到一些中介卷钱跑路的事,想不给中介了,直接去监管,但是中介说我违约,请问这是违约么。