Boton derecho sobre barra de herramientas->Propiedades.
En la pestaña "Barra de Tareas" abajo hay una casilla que pone "ocultar iconos inactivos". Marcala si esta desmarcada y pincha el boton "Personalizar..." de al lado.
Ahi te saldra una lista de TODOS los iconos actualmente en uso y los que han estado alguna vez, para que puedas mostrarlos siempre, que se oculten cuando esten inactivos u ocultos siempre.
Saludosss...