我卖房找的中介,他代签协议,签订时电话告知并录音,代收定金2万,如果买家反悔两万不退有没有法律责任呢?

我卖房找的中介,他代签协议,签订时电话告知并录音,代收定金2万,如果买家反悔两万不退,如果卖家反悔赔两倍,我目前没有收到定金,也没有签字,由于现在房产证办不到,买家给的首付款不理想,能不能取消协议,有没有法律责任呢?