本人前几天在杨柳乡想租门面做生意,合同起始时间是2

本人前几天在杨柳乡想租门面做生意，合同起始时间是2017年5月20号，房租押金1000元，租金13000元，4月5号我就先交了5000元定金，现在我不想租房子，房东一分钱都不退，租房合同写的是，在租房期间，任何一方不得终止合同，如有违约全由违约方负责，可合同上的起始时间是5月20号，我还没住进去，算违约吗？