O Fluxbox não tem suporte nativo para ícones e nem para papel-de-parede. Para os ícones, ele precisa de um "add-on", que pode ser o idesk ou o rox-filler, sendo que o segundo também incorpora o suporte ao papel-de-parede e traz um gerenciador de arquivos razoável (suporta arrastar-e-soltar e execução por tipo, mas é muito feio).
Há bons tutorias sobre o Fluxbox na Internet e até
->aqui<- mesmo, bastando que vc o configure para ter um ambiente de boa aparência, mas pouco prático.
Veja
->aqui<- uma captura de tela (screenshot) do Fluxbox publicada por mim; e
->aqui<-, além de dicas de configuração, vc encontra outras (no link
screenshots), muito mais elaboradas (o cara é "craque").