本人在自家田地里建房,在申请建房书上相邻的田地的人签字同意我

本人在自家田地里建房,在申请建房书上相邻的田地的人签字同意我家建房,可在我家打好地基了,相邻的这家人来闹事,说挡住她家田一面的阳光了,与她家协商以田换田,她家不同意,那我家应该怎么办呢?