我家的住宅基地上,有一个电线杆,碍事了。怎么办?

我家的住宅基地上,有一个电线杆,碍事了。怎么办?住宅基地以前立杆的时候是一片废地,现在想利用起来。电线杆就是那种架电线的水泥杆,不过这个杆上面架的不是动力电线,而是电话线,有两条。我想把它除了,但是牵扯到这是共用设施,感觉棘手,看看有没有妥善的方法。