有中介把我带到象山XX看了套房子,销售人员忽悠的让我交了定金,然后签了认购书我该怎么办?

有中介把我带到象山XX看了套房子,销售人员忽悠的让我交了定金,然后签了认购书,当时他也没说清楚是订金还是定金,让交了五万,说是到时候抵首付,还说多交点钱,万一到时候首付款凑不齐还能多申请几天时间,现在家里出现了点情况,老人病重,现在根本负担不了这套房子,所以想退掉不买了,但是卖房子的跟我说不能退钱,我该怎么办