买房者钱已付,不肯过户

我的一套房产13年底出售给他人，买方已交付全部购房款给我并缴纳购房契税，现已入住半年。但我联系他完成过户，他一直找理由推脱。当初购房合同违约金按他要求只签了一万元。如他起诉承认违约，要求退款，我怎么办，会输吗？