在中介签订了一份无效合同造成经济损失是否追究其责任

两年前在中介买了一个拆迁户小套房子,当时房子还没下来在建中现在房子下来了,卖主不按照合约给房子处处刁难,我问过有关单位说我们这份合同无效,对我不利,我想咨询一下我怎么才能让对方履行合约或者让对方承担违约责任