Saludos
Primero que todo esto no es tema de mysql
.... Para dar respuesta a tu pregunta puedes colocar un archivo sesiones.php como lo mencionaste para el manejo de la validacion de la sesion por pagina y luego en las paginas en las que vallas a ultilizarla hacer un require llamando al archivo y listo!!
Hasta Pronto!