储水式电热水器停水以后里面有没有空气?

家里是储水式热水器，每次停水以后，再打开热水器，里面的水都很脏。一直不明白是为什么和怎么解决。在这里想问问明白的人，这是为什么?如果停水以后再来水以后我先把冷水管旁边的泄压阀打开，把脏水放出去，再开热水器，这样热水器里面的水是不是就不能变脏了。求高手指点。