Para mim também acho que o correto é um sistema 64 bits nessa máquina. Note que seria interessante o uso da swap para o caso de faltar RAM, mas aqui eu também não uso ela e nunca tive problemas. Na verdade, eu tive problemas quando usava ela, mas isso é outra história...
Aqui uso um i5 2310 com 4GB de RAM. Nada de swap.