Hola:
Describes un sistema de frames. Solo tienes que poner como target de los enlaces la ventana donde quieres que se abran esos enlaces...
Si tu servidor dispones de lenguaje como php, asp, tal vez sea mejor simplemente poner el menú con una instrucción include.
Saludos