房屋拆建影响

隔壁邻居现要拆房重建7层,和我家紧挨,建7层对我家地基有很大影响,并且我爷爷奶奶在世时他们家借用我家三墙,老人不在了,七年前我家盖房隔壁却让我们该他们盖三墙,赔他们损失。在不得以的情况下家里和他们签订了一份协议,请问我们该怎么办?谢谢帮助。