O próprio Harry fez esta pergunta, e Dumbledore explicou que era o ego e o talento titânico de Voldemort pelo drama que o levou a escolher itens ou locais conhecidos.
O livro implica que uma pessoa que estava mentalmente em conjunto teria feito essa escolha, mas Voldemort, pelo próprio fato de que ele criaria Horcruxes em primeiro lugar, não era tudo lá, literal ou figurativamente.
Quero dizer, cavar um buraco de um quilômetro de profundidade em um lugar aleatório no chão, derrubar a Horcrux, e então preencher o buraco seria muito mais seguro. Não é tão dramático, porém, e certamente mais difícil de se regenerar.