Hola Muchachos
Por fin lo arregle.
Aca esta como me funciona sin necesidad de javascript.
Esto es para que cuando un usuario inicie sesion en mi pagina, una vez logueado, el link de login se oculte y el de cerrar sesion se muestre, y para que cuando el usuario desee salir de la sesion, salga dando click en cerrar sesion, y en la index.php aparezca de nuevo el link login y el de cerrar sesion se oculte.
Tengan en cuenta que el codigo php esta dentro de div que contiene la cabecera de la pagina.
<div id="container">
<div id="header"><a href="index.php"><img src="xxxxxxx.png" alt="HeImg" border="0" /></a>
<!-- end #header -->
<div id="header3"><a href="registro.php">Registrate</a></div>
<?php
if(isset($_SESSION['sesion']) == true)
{
echo '<div id="header2"><a href="login.php" id="login" style="display:none">Login</a></div>';
echo '<div id="header4"><a href="salir.php" id="salir" style="display:">Cerrar Sesion</a></div>';
}
else
echo '<div id="header2"><a href="login.php" id="login" style="display:">Login</a></div>';
echo '<div id="header4"><a href="salir.php" id="salir" style="display:none">Cerrar Sesion</a></div>';
?>
</div>