Não, você deve ver seu alvo.
O texto dos estados da Chama Sagrada (grifo nosso),
Flame-like radiance descends on a creature that you can see within range.
Da mesma forma, coisas como Hold Person, Magic Missile e Charm Person têm palavras semelhantes:
You attempt to charm a humanoid you can see within range.
A redação é clara de que uma criatura deve ser alvejada, portanto você não pode alvejar um ponto no espaço. Existem outros feitiços que permitem atingir um ponto no espaço, como Fireball.
E os casos em que o personagem acredita que vê algo que realmente não existe? Na falta de orientação das regras, eu determinaria que apenas uma crença sincera é necessária. Caso contrário, você se depara com situações estranhas. Por exemplo, um personagem em uma masmorra pode lançar uma chama sagrada sobre tudo o que vê, porque só teria efeito se uma criatura escondida fosse atacada.
Outros feitiços não têm esse requisito
Existem alguns feitiços que não contêm a cláusula "você pode ver", como Eldritch Blast ou Fire Bolt:
You hurl a mote of fire at a creature or object within range
É um pouco ambíguo como se deve lidar com essa expressão, mas como Mestre, eu permitiria que um personagem visasse uma criatura que eles acreditam, de boa fé, que existe e é invisível usando essas magias. Você terá que olhar para o texto específico de cada feitiço.
Vale a pena notar que todos os feitiços requerem linha de efeito; portanto, não se pode abusar dessa expressão para disparar nas esquinas (PHB 204):
To target something, you must have a clear path to it, so it can’t be behind total cover.