Se vc estiver usando IP fixo é fácil, basta preencher os dados no campo apropriado.
Se estiver usando IP dinâmico por DHCP, normalmente o roteador aponta o servidor DNS pra si mesmo, e é comum que não funcione no Ubuntu. A solução é mudar para a opção "somente endereços automáticos (DHCP)", e assim o Gerenciador de Redes vai permitir que vc informe os servidores DNS que preferir.