Primeiro vá até o Nautilus e monte a partição do Windows!
Depois abra o Rhythmbox e vá até Editar > Preferências > Música.
Aí escolha onde os arquivos de músicas estão colocados!
Clique em Navegar > Sistema de Arquivos > Media > Partição do Windows > Caminho dentro do Windows onde estão as músicas!
Marque a opção Observar novos arquivos da minha biblioteca para ele "Scannear" sua pasta por novos arquivos todas as vezes que você chamar o Rhythmbox!
Nota importante: Grave a ordem de montagem da sua partição do Windows! Se você montar a partição numa ordem diferente, ou não montar a partição, o Rhythmbox não vai ler nada da sua coleção de músicas da próxima vez que reiniciar o sistema! Por exemplo, eu aqui tenho várias partições no meu sistema, eu monto a do Windows primeiro e depois monto as partições linux! Se montar primeiro minhas partições Linux, dá bronca no Rhythmbox!
Nota 2: Espero que tenha instalado os pacotes de multimídia para o Rhythmbox poder tocar os MP3!
Té+