我家门前有别人的一块宅基地,有很多原因他家没盖房子,而是给了別人当耕地在种,而种地的那个人很坏,我想

我家门前有别人的一块宅基地，有很多原因他家没盖房子，而是给了別人当耕地在种，而种地的那个人很坏，我想过和`他们交换，可他们就是不肯在我家门前扔垃极菜叶，泥巴！请问我该怎么办？