É claro que o pão de abobrinha de maçã terá um sabor diferente com noz-moscada e não sem. Como a noz-moscada é adicionada apenas para adicionar sabor de noz-moscada, o pão ficará bem.
Tudo se resume ao seu gosto pessoal para saber se você escolhe usá-lo ou não.