Lo que debes de tener en cuenta es que si alguien tiene puestas las fuentes grandes en su navegador es porque si no no puede leer lo que dicen.
Si no las puede aumentar, no le interesa quedarse en esa página por muy bonita y configurada que esté.
No hay que cambiar la usabilidad por la estética. La estética es simplemente para hacer más atractiva u agradable la información que presente esa página, pero el objetivo principal es que se tenga acceso a la información y no a verlo tó muy bonito
De todas formas en las FAQ del foro de CSS tienes una que trata sobre el tema, date una vuelta por allí.
Se ha tocado mucho el tema en los foros, te sugiero también que uses el buscador de los foros para leer las respuestas que se han dejado al respecto.
Un saludo
