交付了房款。他不同意卖房。当时卖房协议的确没有房主的委托书。我可以告房主父亲诈骗吗?

九年前我父亲跟房主的父亲买了房票,交付了房款。开发商一直没有给办房照,现在统一开始办理。房主说他不知道这个事,他不同意卖房。要求退给我们当年买房的款项。当时卖房协议的确没有房主的委托书。十年了,房子的价值已经翻倍,我该怎么办?只能拿回当年购房款吗?我可以告房主父亲诈骗吗?协议上写明他全权代表。