房屋购买押金问题

我一开始看中一个房子，是跟私人买的，当时交了4万押金，没有签合同，只开了张收据，，现在不想买了，押金能要回来么，如果卖方不退，能起诉要回么？