我家在房屋的侧面建造卫生间还挖化粪池,因为空间有限

我家在房屋的侧面建造卫生间还挖化粪池，因为空间有限所以紧挨着邻居的院墙，院墙已经倒了好多年了。造卫生间的位置离已倒塌的墙角宽的有六七十公分，窄的地方有四五十公分，后面的化粪池更窄一些，但是都不会用到邻居的地盘。可是对方就是不同意，说什么都不同意。而且还说要我们空出五十公分说以后他家造房子用滴水。我们该怎么办？