Tienes razón, después de cargada la imagen ya esta en caché y por eso se muestra rápido, más la primera vez necesita cargarse toda y en realidad no estás redimensionando la imagen (editándola), solo cambiando el tamaño (dimensiones) con la que se muestras (y de mala manera

) el archivo seguirá pesando lo mismo, sigues cargando la misma imagen.
Saluton