农村拆迁家里有门面房租给别人村里让交房子钥匙租客不

农村拆迁家里有门面房租给别人村里让交房子钥匙租客不肯搬走要我们赔偿5w按照评估公司的评估我们只需要赔他3W可是房子租期已经到了他不肯搬房租也不肯给大欠约钱1W多的房租不过我们双方当时是没有签租赁合同的只是口头的那种我们需要配他那么多钱吗？