2015年我想别人购买了一个集资房的指标,一次性给予对方指标...

2015年我想别人购买了一个集资房的指标,一次性给予对方指标转让费6万元,双方签订了收据和协议,协议明确提到“在建房单位把购房人员向区直房改办审核后,乙方万一没有被批准,甲方要一次性退还给乙方的转让费6万元”,现在建房单位通知说房子不能继续建了,我多次向对方要求退回转让费,对方以种种理由推脱,我该如何处理。