购房诚意金是否可以退

本人在北京购买一套新房，开发商要求先交纳5万元诚意金（收据：诚意金），还签署了一份协议，开发商口头说只要不在购买，诚意金均可退还。因为第一次接触，如果不退款，按照法律或者找当地建委，是可以要求开发商退款？