房屋买卖合同没有谈成时,定金可以退回吗?

已经签署了房屋认购协议,规定如果不买房就不退定金。如果那一天,我们我们没能谈成功------因为我的条件有几条例如:他们必须提供线路图,居住不影响安全等等,开发商不认可。这样,定金可以退定金吗,算我不买房,还是他不买房?