建房子没路走

我家的地本是属于第一排的，而第一排没法进，我们现在建房想从第二排进，但第二排的人不让我们进，第二排的人有权拦我们吗？或者说这应该叫谁来帮忙？（主要问题村镇部门不愿管）