Eu normalmente uso o Ubuntu Tweak para esses casos. Se não tem o Ubuntu Tweak, instale:
$ sudo add-apt-repository ppa:tualatrix/ppa
$ sudo apt-key adv --keyserver keyserver.ubuntu.com --recv-keys 0624A220
$ sudo apt-get update
$ sudo apt-get install -y ubuntu-tweak
Após instalar, execute o programa no menu Aplicativos > Sistema (ou Ferramentas de sistema) > Ubuntu Tweak.
Procure pela categoria Sistema e vá em Gerenciador dos Tipos de Arquivos.
Além do que você deseja, você pode mudar os aplicativos associados de todas as extensões. É só procurar pela extensão nas categorias "Aúdio / Texto / Imagem / Vídeo / Aplicativo / Tudo".
Espero ter ajudado!