Bon, j'ai trouvé une solution sur
ce site web.
En gros, ca consiste à tester lors du boot la présence de la chaîne de caractères nVidia dans la liste des périphériques PCI.
Et en fonction de ce qu'on trouve, on change le xorg.conf.
Je vais bosser là dessus et voir si ca fonctionne bien.