Eddig se akkor töltötték be az nVidia drivert amikor az X indult, mert a KMS/framebuffer már azt használja, ugyanis menet közben nem tudsz videodrivert cserélni userspace-ből.
Azt hiszem, hogy az volt, hogy a pivot_root/switch_root előtt natúr BIOS képernyővel mentünk (a sima 80x25-össel) és utána váltottunk át grafikus képernyőre a megfelelő videókártya driverrel.
Gondolom a gondot az jelenti, hogy van egy éles váltás a kettő között (jó hogy, hiszen videómódot váltunk) és ez nem annyira smooth.