Todos los hipervínculos tendrían que ser funciones javascript que llamasen a algún método tipo "abrirUrl" que mediante ajax cambiase el marco principal.
Me explico de otra manera.
Lo normal es que la cabecera, menú y demás de la página siempre es igual, y solo cambia una el contenido de una capa. Lo que tendrías que hacer es que cuando pulse a un hipervínculo del menú, en vez de hacer
<a href="pagina2.php">Pagina 2 </a>
hiciese algo tal que así:
<a href="#" onclick="abrirUrl('pagina2.php')">Pagina 2</a>
Y así, mediante ajax, cagar las otras páginas y alterar el resto. Dejando el reproductor sin ninguna modificación.