在我们当地买了一套楼房,一共是21万,当时说的是先交定金五万,交房子的时候给他们五万我应该怎么维护自己的权益?

在我们当地买了一套楼房,一共是21万,当时说的是先交定金五万,交房子的时候给他们五万,交钥匙的时候再给他五万。剩下的分期还款,当时是协商好的,然后已经交完了定金五万。房子现在刚刚有一个主体,还没交房就打电话让我再交五万块钱。我就给交了,现在他们又来打电话催我交钱,我应该怎么维护自己的权益!