购房时交了1万的定金打了4万的欠条,有效吗?

最近卖房,和一买家签订了房产交易合同,合同里写的定金5万,但买方只交了1万的现金,打了4万的借条约定一天后把那4万定金补齐,可是4天过去了,买家一直拖着不给那4万定金,也不给明确的说法,我该怎么办?如何保障自己的权益?