中介人拒不给我住房钥匙，我是否可以强行换锁？

三年前我在天津投资购买一套50万元的一手住房一套,因为和中介人签订了书面协议(中介人帮忙办理蓝印户口、红印户口和给孩子找就读中学事项,待红印户口办妥后,把住房按原价50万元过户给中介人),现在红印户口已经办妥,但我决定不把房屋过户给中介人,因为房子当前的市场价已经比3年半之前高出很多,我打算给中介人适当的补偿(补偿2000元辛苦费)。在这3年半期间,都是中介人掌握着房子的钥匙,也由中介人在使用房子。今天我和中介人所要房子钥匙,收回住房,但中介人以书面协议为由拒不交给我住房钥匙、电费卡和税费卡,请问我是否可以强行换掉房子的锁? 收起