Aunque es rarisimo, date una vueltecita por Synaptic y busca algun "theme" para OpenOffice.org.
Algo parecido me paso en Feisty y era porque no habia instalado dichos temas.
Otra cosa es mirar en las opciones / preferencias de los botones a ver si los tienes desactivados (mostrar solo texto).
