网签后房东违约如何拿回自己已托管的资金

房屋总价224万，支付定金22万，居间合同约定违约方承担房价20%违约金。已网签，首付资金已托管，但房东现在打算违约，主要是想要额外再加钱，并且各种流程非常不配合。现在托管的资金是否必须要走法律程序才能退回？如果走法律程序需要多久？是否有更快的解决方式？主要是想尽快撤回已经托管的首付来购买其他房屋，违约责任将另行起诉追究。