养殖用地上的养殖及配套用房,现已禁养,期间停产,但没有通知拆迁,也没拆怎样合法使用这些房产?

养殖用地上的养殖及配套用房,现已禁养,期间停产,但没有通知拆迁,也没拆,也没赔偿,现在能改成服装厂吗?将来会不会因改变土地用途而遭强拆?怎样合法使用这些房产?