注意了别人的采光可我的房子不能建怎么办?

我以前的房子在别人六层楼的南面,只有两层现在想重新盖六层,可北楼的住户不让盖,楼间距有5米,可房子是我的有合法手续现在四周都建了,为什么我的不能建?注意了别人的采光可我的房子怎么办?