但过了一周再看合同发现没有时间约定,如16号前未出卖方有权收回房屋买卖合同自动作废,我该怎么办

你好,我于3月24号通过中介与买方签合同,收订金2万,但过了一周再看合同发现没有时间约定,我再通过中介方约买家在附件中补充约定6月16日出同贷书。如16号前未出卖方有权收回房屋买卖合同自动作废,买方的订金2万不予退回。到现在买方也没办理交易程序,我该怎么办