本人有一处宅基地,现在已经建造房屋3层封顶。因房屋周边有一处坟地,坟地主人因我房子影响他上坟为由我该怎么维护我的权益?

本人有一处宅基地,现在已经建造房屋3层封顶。因房屋周边有一处坟地,坟地主人因我房子影响他上坟为由,多次阻碍我施工,不让我继续建房。期间多次和他家协调,都没有解决问题。房屋在建设期间有点超建,他的坟地是政府征收过的,但是一直没有实行迁坟。现在没法施工,一开始施工他们就跑来闹,我该怎么维护我的权益