退房,如何扣除违约金

我在农一师十一团购买了一套门面房，未签订购房合同，也未签订购房协议，首次交款4万5千元，售房部只给开具了一张交款发票，现在想退房，售房说要扣除8000元的违约金，请问这个扣款合理么？当初并没有讲明如果违约该如何扣违约金，现在售房自行提出这个价格，我认为很不合理。我们什么协议都没有签，我能不能起诉该售房公司？