Hola JoeLitO:
Con los atributos alt y title se consigue lo que pides... creo que es mejor usar title...
<a href="..." title="¿Quiere ver el libro de visitas?" >libro de visitas</a>
También hay una forma mucho más trabajosa que es teniendo una capa oculta y con el evento onmouseover mostrarla para volverla a ocultar con onmouseout, pero creo que te valdría la primera opción.
Saludos