Para empezar te diría que corras los test de PageSpeed y YSlow (disponibles como plugin de Firebug).
Por ejemplo, el de PageSpeed arroja las siguientes recomendaciones (entre otras):
[Score: 62/100] Habilitar Keep-Alive
[Score: 9/100] Habilitar compresión
[Score: 55/100] Optimizar imágenes
[Score: 0/100] Minificar JavaScript
Para un total de 53/100.
Como ves, hay margen para trabajar en ese aspecto. Luego, siendo que decís que usas muchos plugins, te recomendaría no iniciar todo en el document ready, sino diferir todo lo posible. Por ejemplo, el carousel principal, podrias instanciarlo luego de 2 o 3 segundos, siendo que cambia poco y nada la experiencia del usuario.
Es importante no demorar demasiado con la inicialización de los scripts, ya que afecta mucho la performance percibida. En ese aspecto te recomiendo
este articulo.
Saludos.