Tentei atualizar para a ultima versao do kernel estavel no momento 3.18.7*, estava com a versao 3.13 que vem por default no Xubuntu, achei que poderia ter alguma atualização do driver dentre uma dessas versao da 3.13 ate a 3.18, mas não resultou em melhoras.
O que melhorou um pouco foi desabilitar uma opção
chamada "compositor" no gerenciador de janelas ("ajustes do gerenciador de janelas").
Ao abrir alguma aplicação o gráfico atualizou mais rápido, e ao redimensionar as janelas melhorou muito, antes travava bastante, mas ainda não ficou 100%, é perceptivel um atraso ao redimensionar a janela.
Mas o problema que ao desabilitar o compositor algumas animações somem, o sistema fica mais "sem graça".
Não vejo isso como uma solução e sim uma forma de fugir ou esconder do problema.