叔叔兄弟四人,三叔无儿无女,去世我给送终,叔叔大爷当时承诺三叔的房子归

叔叔兄弟四人,三叔无儿无女,去世我给送终,叔叔大爷当时承诺三叔的房子归我。四叔去世后,弟弟拒不签字办理过户手续。现在属于危房,我想修建房子,四叔甲弟弟阻拦。我该怎么办