交了首付款后发现征信有问题怎么办?

2013.12月底看中一套小户型，果断交了首付后去银行办理贷款时被查出征信出了问题，原因是08年准贷记卡（公司办理工资卡）异地取款产生了手续费到今，现银行同意贷款但是利率要上浮15%且购5000多的保险，但是我不想贷了想退房，开发商有权利收取我的违约金吗？