O problema de se utilizar o sudo apt-get install xubuntu-desktop é que, se você já tem o Gnome ou o LXDE, você fica com softwares duplicados, como duas calculadores, dois terminais, dois processadores de texto, dois reprodutores multimídia, enfim, vários, por que o Xubuntu contém softwares mais específicos. Eu fiz essa atualização, e perdi algum tempo desinstalando uma boa quantidade de softwares.
A solução que eu encontrei foi usar o sudo apt-get install xfce4, que instala somente a interface.
Muitos não o utilizam por que ele instala a interface de modo "cru", lisa, enquando instalando o xubuntu-desktop já o deixa inclusive com alguns temas instalados, mas vai do gosto de cada um.
Enquanto no primeiro você perde tempo desinstalando softwares desnecessários, no segundo você perde tempo deixando a interface mais utilizável/agradável.