我爸妈盖房子,当初邻居说好了靠他家房子边随便盖,现在我爸在房子旁边留了一米地方,他们又不让盖了,打地

我爸妈盖房子，当初邻居说好了靠他家房子边随便盖，现在我爸在房子旁边留了一米地方，他们又不让盖了，打地基什么没说，现在地基打好了邻居又不让盖，该怎么解决问题