我通过房产中介看了一套房子,交了5000元诚意金,因后来发现房屋有瑕疵我该怎么办?

我通过房产中介看了一套房子,交了5000元诚意金,因后来发现房屋有瑕疵,不想买了,但中介不退还诚意金,我该怎么办?有中介开的收款收据为证。