Ya he instalado un plugin que me permita escribir directamente fórmulas en \(\LaTeX\) dentro de las anotaciones. El plugin se llama wp-latex y lo he encontrado a través de Gaussianos.
Voy a probarlo un tiempo, a ver qué tal va. De momento parece sencillo y espero que sea rápido renderizando las fórmulas. Creo que me servirá; no pretendo escribir fórmulas especialmente complicadas.
Si no sirve, otra posibilidad es LatexRender, pero esta es más compleja y requiere algunas aplicaciones en el servidor web y tocar algo ficheros de WordPress, lo que no me gusta demasiado.