我有一套二手房有意向卖,我在外地,中介带买方看了谈了价格,中介打了电话与我交谈,我也有这个意向。因为

我有一套二手房有意向卖,我在外地,中介带买方看了谈了价格,中介打了电话与我交谈,我也有这个意向。因为不在家,中介与我爱人联系去了中介,买房付了定金5万元,我妻子单方签了购房合同,我自己考虑到还没买到新房决定不卖了,这份合同有效吗?如果坚持不卖算违约吗?需要赔付定金双倍和中介费吗?