通过中介看好一个房子,交了订金也签合同了,我现在不想买了,中介让我教违约金,我该怎么办

通过中介看好一个房子,交了订金也签合同了,如果违约订金就没了,但是签完合同后发现我要买到六楼上面的七楼原来是阁楼形式的,也就是说我准备买的六楼就是顶楼,这一点中介在推荐的时候有隐瞒,还有我发现外部墙体有很大的裂痕担心漏雨,这两点之前中介都没有说,我现在不想买了,中介让我教违约金,我该怎么办,谢谢给点帮助