O inimigo atacante tem desvantagem no teste.
A citação relevante do PHB está aqui:
If circumstances cause a roll to have both advantage and disadvantage, you are considered to have neither of them, and you roll one d20... In such a situation, you have neither advantage nor disadvantage.
Está bem claro que, para que a vantagem e a desvantagem sejam eliminadas, o teste tem que ter vantagem e desvantagem. Para usar termos de computação, é um gate OR exclusivo. Um teste pode ter vantagem ou desvantagem, mas se tiver ambos, não recebe nenhum dos dois.
O elusivo recurso de classe poderia ter sido redigido de várias maneiras diferentes, mas a forma como está redigido deixa claro que um teste nunca pode ter vantagem contra um Ladino não-incapacitado 18. A única maneira que um teste pode ter a vantagem e a desvantagem são se ambas tiverem ao mesmo tempo. Como um teste nunca pode ter vantagem, ele não pode ter os dois e, em vez disso, mantém a desvantagem.