我婚前共同贷款买房离婚后协议房子贷款归男方我再婚后再次买房银行说我二次贷款利息要高怎么办?

婚前共同房产贷款也有我的名字离婚后我再婚想在买房子但是银行说我属于二次贷款利息要高出百分之二十，我之前已经协议离婚后所有房贷跟我没关系了，但是为什么银行还有我的名字我不能再正常房贷呢？