退集资房问题

我买的集资房交了10000元订金，两个星期后接着交首批房款83000，一共分4次交完房款，总共房款312000，不能按揭。当时己签了个协议。协议书上写的如果乙方单方面违约，必须要交违约金5万元。由于开发商证件不齐或者不能提供原件，具有一定的风险，我现在想退房，可以退吗？如果可以退，是不是一定要交5万元的违约金？