Por partes...
como eu faço para saber qual driver está instalado no ubuntu?
Existem vários aplicativos pra descobrir qual driver está instalado, como o "lshw", o próprio "lspci", etc. Tudo depende de qual dispositivo vc quer saber o driver em uso.
como faço para desinstalar um driver?
Normalmente não faz. E na maior parte dos casos, não precisa, nem deve fazer. Até porque, ter o driver instalado não significa ter o driver em uso. E na maior parte das vezes, o driver mais apropriado pro dispositivo vem junto com o kernel, e é atualizado junto com ele.
eu preciso rodar o python pessoal.
Precisa? Ou deseja?... Adianto uma coisa pra você: nenhum driver vai te impedir de rodar seu python.