Hola leo_garay91,
Te recomiendo usar W3 Total Cache y al activar las opciones, elegir la configuración manual para minificar tus archivos, al menos en pruebas que he hecho resulta mejor que WP Super Cache y tiene la ventaja de que te permite elegir el tipo de minificación y controlarla para no terminar rompiendo tu sitio.
Algunas buenas sugerencias para optimizar tu sitio las encuentras en:
https://gtmetrix.com/wordpress-optimization-guide.html
Saludos!