Bajate el driver de linux de la pagina de nvidia (
www.nvidia.com) y sigue las instrucciones. Es muy sencillo, ejecutas un archivo (creo que setup.sh) y cambias 2 lineas en la configuracion de tu archivo de XFree (que el README te dice).
El resto es configuracion independiente de la tarjeta de video
Sencillo