跟前男友一起贷款买房,分手后,想取消名字和贷款

跟前男友一起贷款买房,双方都有在购房合同和贷款合同上签字。我现在想取消名字和贷款,应该怎么做呢?我担心以后结婚买房会受二套房限制。