我卖房了,买房只交押金,我没收全款,可以不让房吗?

我房卖了  买房只交押金，没付全款，现在买方追着付全款让我们让房，合同上没写交房日期，我们可以不让房吗？