Então ele demora para mostrar o conteúdo da pasta, certo?
Esta pasta está muito cheia? Tem muitos pequenos arquivos?
É porque achei muitos relatos de um Bug como este. O Nautilus vai ficando lento quando a pasta tem muitos arquivos dentro. Quanto maior o número de arquivos, maior a lentidão para mostrar os mesmos!
Até o Ubuntu 14.04 não achei nenhum relato de correção quanto a isso. O algumas pessoas fizeram foi trocar de gerenciador de arquivos, usando o Nemo, por exemplo.