Infelizmente eu também tenho o mesmo problema. Vamos a minha saga:

Eu baixei a versão estável do Xubuntu (8.04, codename "Hardy Heron") neste final de semana que passou (19/07/2008).
A imagem que baixei foi: "xubuntu-8.04.1-desktop-i386.iso" (que é compatível com meu Hardware)
Gravei esta imagem em um CD, e, na execução direta do CD (boot do CD) escolho a verificação dos dados do CD. Tenho o retorno de uma mensagem de erro na verificação de alguns dados, como se estes estivessem corrompidos. Na hora da gravação da imagem (xubuntu-8.04.1-desktop-i386.iso) para o CD não há erros! O download da imagem (xubuntu-8.04.1-desktop-i386.iso) não teve erros! Fiquei intrigado com isso...

Então tentei fazer o boot direto da imagem baixada (xubuntu-8.04.1-desktop-i386.iso) através de um pen-drive. Sucesso!Fui então para a verificação dos dados:



Tudo certo, nada de erro nos dados da imagem (a mesma imagem que eu havia usado para gravar o CD.. o CD não estava arranhado)...

Então parti para a instalação:



Aqui começam os problemas. Nas etapas "Escolher e instalar software" e "Construir chroot LTSP" (uma é seguida da outra) há erro na instalação.

Ao pular estas duas etapas, consegui terminar a instalação. Reiniciei e, para a minha surpresa, ele não entra direto na interface gráfica. Aliás, ele não instala a interface gráfica! Tive que usar o comando:
sudo apt-get install xubuntu-desktop
Após uns 20 minutos, a instalação foi concluida. Mas lá estava eu de novo no terminal (eu não reiniciei), tendo que entrar com o comando:
startx
Sucesso novamente!

A interface gráfica foi iniciada. O problema, é que o mouse estava bugado! O botão esquerdo, se eu tentasse clicar em qualquer área da tela, abria a lixeira. E o botão direito, se eu tentasse clicar em qualquer área da tela, abria as opções da lixeira.

O meu mouse: PS/2 (óptico)

O teclado funciona na boa (é PS/2).