邻居家耕地建养猪场妨碍我家耕地采光,通风,初建时我家找长辈和对方协商签订了赔偿协议找政府哪个部门?

邻居家耕地建养猪场妨碍我家耕地采光,通风,初建时我家找长辈和对方协商签订了赔偿协议。现在到付款日期了对方提无理条件,不答应就拒赔。我应该如何维权,找政府哪个部门?