关于占农民用地赔偿问题

某工厂因修建新厂占农民用地，我的房屋属于“三产业”性质，土地使用证注明临时用地，但使用期限永久。拆迁办却坚持我的房屋以残房收购，或者自行拆除。这合理么？