当时单位解决不了住房,政府要绿化拆迁,把我们的房子说成是违章建筑,合法吗?

我家八四年在父亲单位废弃的空地上盖了几间房子,当时单位解决不了住房,没有给企业,和政府添麻烦所以自己动手盖的,没有任何手续,现在单位把厂区置换给政府,政府要绿化拆迁,把我们的房子说成是违章建筑,这种说法合理,合法吗?