集体土地上的房屋买卖问题

事情是这样的，该房屋是集体土地上的房屋，买卖双方签订了房屋买卖协议后买方给卖方付清了全部房款，其后买方和政府签订了拆迁协议把房屋拆除了并分的拆迁房，现在买方以当时签订合同时价格过高为由要卖方退还部分房款，不然就以集体土地上房屋买卖合同无效为由起诉卖方退换全部房款。卖方能胜诉吗？