nnnnnaàààÃÃÃÃÃÃÃõooooooo! experiência própria, tu vai passar muita raiva, não vai poder visualizar páginas que contenha flas-player, codecs de multimedia, muitos arquivos de video também não etc etc e tal.
O Desempenho é similar, nada de extraordinário.
Agora se tu quiser pesquisar sobre o gentoo, eu não sei como são as coisa por lá, mas por aqui (Ubunu-kubuntu-Debian em geral) não aconselho não.