并且签了定金合同,担心交房问题和房产证问题,我不想买了

在中介的介绍下 我交了5万定金购买单位的团购房,并且签了定金合同,而房子目前正在建设中,担心交房问题和房产证问题,我不想买了,现在卖方不肯退定金我可以通过法律手段要回定金吗?