房产证登记面积与事实测量不符

我于五一前购买一套二手房，房产证上登记面积137平方米，我们协议都签好，契税等税收都已缴，在办理过户再测量房子的面积只有125平方米，要求对方退还部分房款，对方不愿意，请问这个事情怎么办？