下,我自己有块地,土地一直租给别人用了,租地者在我的土地上扣大棚了还是会赔付大棚的钱?

你好,我想咨询下,我自己有块地,土地一直租给别人用了,租地者在我的土地上扣大棚了,我们之间没有任何手续和合同同意他扣大棚,但是我的土地在前2年被占了,被国家给征用了,大棚也是在占地之前盖的,可是我的户口在20年前就迁出去了,不是农村户口,请问:我的土地大队有权力收回吗?假如可以收回,那大棚也收回吗?还是会赔付大棚的钱?