我现在在中介买了个二手房,付了一万元订金,但是中介让赔偿违约金,应该怎么办?

你好,麻烦请问一下,我现在在中介买了个二手房,付了一万元订金,现在首付付不起啦!需要赔偿中介付用吗?房主同意啦,但是中介让赔偿违约金,应该怎么办?