房屋买卖合同已签订。已公正给买方,买方已经支付全款房款、房子我也不想卖给他。能打官司要回房子

房屋买卖合同已签订。已公正给买方,买方已经支付全款房款、买方拖着迟迟不过户。对方索要我银行卡。我不想给他。天天吵我要银行卡。房子我也不想卖给他。需要负什么法律责任。能打官司要回房子