Pues depende mucho del tema que uses.
Yo estuve toqueteando un tema que iba todo bien, pero cuando se mostraba una entrada cortada con el botón de "Continúa leyendo..." no hacía caso al HTML. Lo único que tuve que hacer fue cambiar una opción del propio tema.
Depende mucho de lo que estés usando y de como esté programado. En el template no creo que esté. En el template solamente se define como se muestran las cosas.