我交了1万元的房屋认购书,现在不想买了,哪钱能退吗?求解

7月1日我在荆门紫荆豪庭选好了楼层1504号，付了1万元的房屋认购协议书，协议限我们3日内携带证件去交首付并签订商品房买卖合同，否则定金不予退还，第3天我们去找售楼部，不想买了，这定金能退吗？求解答。