交付购房定金后,签了协议是不能退款,我现在不想买房子了,钱可以退给我吗?

交付购房定金后，签了协议是不能退款，我现在不想买房子了，钱可以退给我吗？我买的是职工代建房，要5年才开发得起来，我交了两万多的定金，后来让我们签了一个协议说是不退款的，但现在我要结婚了，房子想重新买，可不可以有办法退钱了。