Não, o alarme não detecta criaturas etéreas.
Embora não seja explicitamente declarado, cada um dos planos é separado um do outro, incluindo os planos Etéreo e Material. Do 5e srd :
The Ethereal Plane [...] overlap[s] the Material Plane and the Inner Planes, so that every location on those planes has a corresponding location on the Ethereal Plane. Certain creatures can see into the Border Ethereal, and the see invisibility and true seeing spell grant that ability. Some magical effects also extend from the Material Plane into the Border Ethereal, particularly effects that use force energy such as forcecage and wall of force.
Portanto, temos dois planos que estão completamente desconectados um do outro, exceto que às vezes você pode ver de um para o outro, e certos efeitos alcançam do Material para o Etéreo.
Como apenas alguns efeitos mágicos alcançam os planos, devemos supor que cada feitiço não exceto aqueles que especificamente invocam o que eles fazem (como a gaiola de força) .
Como o alarme não indica que ele detecta criaturas no plano etéreo, isso não acontece.
Aparte: Em referência ao cenário original, pode-se transferir para o plano etéreo, colocar a magia Alarme e esperar lá se alguém quiser pegar uma Bruxa.