我通过中介买一套顶楼的房子,签了意向书,还可以取消这个意向书要回押金吗?

你好,我通过中介买一套顶楼的房子,签了意向书,但是这套房子现在有渗水的问题。之前看房时看到有一处墙壁有起皮,我当时怀疑是渗水所致,但是中介说是空鼓维修所致,所以我们也没在意就签了意向书,后来去看房子发现那块墙壁起皮的面积变大了,而且还有另外一处墙壁也有这个问题。我们现在不想要这套房子了,请问还可以取消这个意向书要回