Porque Voldemort se foi, mas de forma alguma esquecido.
Por muito tempo, Voldemort era o monstro debaixo de sua cama, a coisa que foi esbarrada na noite, e o monstro que deu pesadelos a seus pesadelos. É um pouco banal dizer, mas ele era a Alemanha nazista do mundo mágico - quando ativo, ele era o monstro iminente que todos que não estavam do seu lado temiam. Quando derrotado, ele era o espectro que apareceu na memória recente.
Mesmo após sua derrota, nenhum corpo foi encontrado. Ninguém poderia ter certeza de que ele não havia sido simplesmente empurrado para retornar eventualmente.
Toda bruxa e bruxo que não era um Comensal da Morte (e muitos que tinham) temiam seu retorno. Quando ele estava vivo e ativo, ele provavelmente poderia ter usado magia ligada ao seu nome (similar ao feitiço tabu no livro 7, embora obviamente não fosse o mesmo desde que ele não controlasse o Ministério). Provavelmente havia outros feitiços similares (em menor escala) e Voldemort poderia ter usado aqueles para atingir pessoas, especialmente nos primeiros dias. É a única razão pela qual eu posso inventar para as pessoas que não usam o nome, em vez de chamá-lo de 'Você-Sabe-Quem'.
Esse hábito teria sido difícil de quebrar depois de sua derrota, especialmente se você temesse que ele não fosse embora.
Além disso, lembre-se que os Comensais da Morte que ainda estavam fora da prisão traíram Voldemort - eles negaram estar com ele ("controle da mente, eu juro!") ou venderam seguidores leais para evitar a prisão - eles iriam querer ignorar sua atenção tanto quanto ou mais do que os bruxos normais.
Finalmente, seu ponto sobre Aurores: Dumbledore era o único mago que Voldemort temia. Ele era o único par de Voldemort. Moody, um dos melhores Aurores, não poderia ter ido de igual para igual com Voldemort. Talvez vários Aurores, montados em emboscada, pegassem Voldemort no chuveiro, teria uma chance ... mas duvido. Voldemort era inteligente, inteligente e poderoso. Ele também não tinha nada que se parecesse com a moralidade. Ninguém o atravessaria se pudesse evitá-lo, exceto Dumbledore.