华侨房的历史遗留问题

该房是1949年的，当时爷爷的好朋友是该地块的使用者，他就叫我爷爷一家人搬去他那里住，房子是我们自己盖的，他就出地，叫我们帮他看管他的仓库和照顾他的妈妈。经过很多年后，业主一直没有居住在我们这里而且没有负责我们房子的维修工作，1987年我们这里就拆迁重建了。期间由于种种原因我们的屋子一直没有得到房产证而且房子也一直没有验收，直到2006年业主才拿到了房产证，但他们又一直没有通知我们和他们签定任何租衽合同。2009年一纸法律文书就寄到我们这里了，说业主要回收房屋并要求我们交纳2006年至今的房租（自他有房产证那天开始）。那么我想问下，他从1949年开始就没有在该地块行使任何使用权，而且我们的房子从报建到交纳地税都是我们一手一脚去做的，他们期间并没有做过任何东西。我想问下我们一定要搬走的吗？还有我们需要缴纳从2006年起的租金吗？ 收起