隔壁邻居因为要借道搭建新房而临时拆除我们家的房屋能否自己搭建复原。而且我们还签了合同协议要求他复原

隔壁邻居因为要借道搭建新房而临时拆除我们家的房屋能否自己搭建复原。而且我们还签了合同协议要求他复原。现在他不想复原还阻碍我们复原