我是房东,委托中介租房子。租房客付了定金,我们嫌麻烦没拿,中介拿了。后来房客又不租了,定金应该给谁

房客给了定金有急事就走了，说到时候打款给中介，中介再将我们的部分转账给我们。算好了数，中介问这个定金谁先拿着。我们嫌麻烦，就没拿。让中介最后打给我们算好的那个数就行了。谁想，拖了几天，租房客说不租了。定金他也不要了。可是中介就想把定金吞了不给我们。这样合理吗？这种情况，定金应该给谁？