拆迁房屋转让,我是卖方,两个月前开始交易,现在尚未公证,买方当天给了5万定金需要承担哪些责任?

拆迁房屋转让,我是卖方,两个月前开始交易,现在尚未公证,买方当天给了5万定金,后追加5万,协议上注明违约方赔付守约方五万其中一万是给中介,我方现在不想卖了,需要承担哪些责任