我家在建房窗户都弄好了,邻居非得不要我家的窗户照着他家,让我们拆了,如果不拆他就要动手拆除,他要是动

我家在建房窗户都弄好了，邻居非得不要我家的窗户照着他家，让我们拆了，如果不拆他就要动手拆除，他要是动手拆除，我可以去法院起诉他吗？我在我家的地方建房，窗户也是在我家的地方，没占他家一点地方。