我交了1万元的房屋认购书,现在不想买了,哪钱能退吗?求解

7月1日我在荆门紫荆豪庭选好了楼层1504号,付了1万元的房屋认购协议书,协议限我们3日内携带证件去交首付并签订商品房买卖合同,否则定金不予退还,第3天我们去找售楼部,不想买了,这定金能退吗?求解答。