¿Alguna idea para optimizar el código?

[Malenko]

Un consumo de un 4% no lo veo para nada preocupante ya que has de cargar las texturas. Si fuese mucho más elevado ese consumo entendería que quisieras bajarlo.

La única optimización que se me ocurre es pasar a un switch el contenido del case "sf::Event::KeyPressed:". En un switch el compilador construye, si es más óptimo (sino usa una estructura similar al if), una tabla de hash para realizar los saltos, en lugar de comprobar una a una las condiciones. Pero vamos, que aunque sea una pequeña optimización, no es algo que te vaya a bajar el consumo de CPU. Has probado con los switch del compilador? Los -O