Tuve el mismo problema en Fedora Core 3. La única solución que encontré fue usar un driver parchado que encontré
aquí.
Se supone que la próxima versión del driver va a arreglar ese problema (creo que se debe a algunas de las nuevas funcionalidades del kernel 2.6, como udev).