Con PHP sería muy sencillo. Te creas el archivo "cabecera.php" con la cabecera, y luego en cada una de las paginas lo importas con este codigo:
Código PHP:
<? include("cabecera.php"); ?>
Lo único es que el archivo cabecera.php debe estar en la misma carpeta que el resto de paginas (si no es así se soluciona dando la ruta del archivo igual que se haría en HTML, con los tipicos ../cabecera.php o ./carpeta/cabecera.php), y que todos los archivos que lo usen deben tener la extensión PHP. Ah, y por supuesto que el host soporte PHP.
Suerte