para hacer un menú, tengo que hacerlo en todas las páginas de mi web? y a la hora de

[Nugar]

Otra opción es usar archivos incluidos, de manera que haces una sola página que sea el menu.html y la incluyes por medio de SSI o de otro metodo. Asi al cambiar esa pagina, todas quedaran actualizadas automaticamente.