房屋买卖纠纷,支付了违约金可以解除协议吗?

我将一套划拨土地性质的住房卖给了别人,已全额付款。当时没有两证,双方私下签订了协议,内容大致有不许更改双方商定的价格、配合过户这么几条,违约方付五万违约金。现在我若不想卖这套房子了,我可以要求付五万圆违约金后解除协议吗?