使用房屋人在房主不知情下翻建房屋

我家有平房两间在东城区,有亲戚无偿使用。因为我们不住那,所以如果对方在我们不知情的情况下翻建了我的房子,那么以后会发生什么纠纷?这两间房我们一直没有收回,但是早晚要自用的。