贷款72万,卖家现在拒不交房,房产证已经过户给我们了,房钥匙没有过户,这种情况我需要直接起诉卖家吗?

你好,我是去年七月份购房给首付款26万,贷款72万,中介答应八月底银行放款,但是银行额度收紧一直到今年一月份才最终放款,卖家现在拒不交房,说半年时间才收到尾款,他亏了20万,要求我们补五万给他,房产证已经过户给我们了,目前就是水电煤气,房钥匙没有过户,这种情况我需要直接起诉卖家吗?