在中介看了一套房子,给中介交了几千诚意金,只有一个收据,上面写的诚意金和地址和意向价格怎么办?

在中介看了一套房子,给中介交了几千诚意金,只有一个收据,上面写的诚意金和地址和意向价格。没有签什么协议,也没写诚意金可以转定金。晚上中介说谈到了哪个价格,钱给了房主,我没在现场。第二天因为一些原因不买房了。我就电话通知了中介。现在中介说给了房主,不退。请问我能要回这个钱,怎么办?