Neste escrito por JKR em Pottermore :
Having chosen a feeble simulacrum of mortal life, ghosts are limited
in what they can experience. No physical pleasure remains to them, and
their knowledge and outlook remains at the level it had attained
during life, so that old resentments (for instance, at having an
incompletely severed neck) continue to rankle after several centuries.
Podemos supor que eles não podem ir aonde querem porque são apenas uma marca do que eram. Então eu acho que eles só podem assombrar o que eles sabiam ao vivo.
Nós temos Myrtle como um exemplo para deixar o lugar que ela morreu para assombrar Olive Hornby, mas talvez (não tenho certeza) é porque ela assombrava Olive e não os lugares que ela era. Ela conhecia Olive.