Duda sobre diseño web, frames

[santiagber]

Hola soy nuevo en la programacion web,
bueno hasta ahora estaba practicando html y usaba
frames para separar el contenido
por ejemplo tenia una pagina para el menu , otra para el contenido
y una para cabecera
index.htm + Cabecera.htm + Menu.htm + Contenido.htm

pero he visto paginas,que no usan frames,
solo etiquetas div etc,

Mi duda es, si estas paginas no usan frames.
Esto significa en cada pagina que haga, voy a tener que escribir
el codigo del menu, la parte de la cabecera etc, y repetir a
cada rato el mismo codigo?
Y si es asi, como se hace para modificar "la seccion menu"
en todas las paginas?

Saludos