我没有房产证,只有协议书,我买房是与墙为界,后来我在后面再建就比直了20公分屋檐,后来旁边人建房就随

我没有房产证,只有协议书,我买房是与墙为界,后来我在后面再建就比直了20公分屋檐,后来旁边人建房就随着我屋檐建墙,现在我屋檐下就有一条小巷,我只有两层,旁边人四层,现在他在四层上面直了三十公屋檐,直到了我这边屋檐上,我叫他不要直,他说不是我,请问一下,这样他违规没有