A DeltaLima tem razão, embora eu sempre ache isso contraintuitivo. Quer dizer, ar mais denso não significa que seu altímetro vai ler mais baixo?
Mas a coisa a lembrar é que não é o peso do ar acima de você, é o peso do ar abaixo de você. O altímetro é calibrado para a pressão informada pela estação terrestre. Portanto, é preciso no chão. Mas o ar mais denso e mais frio, como DeltaLima aponta, terá um gradiente de pressão mais acentuado - assim, à medida que você sobe acima do solo, o altímetro indica que a altitude está subindo mais rápido que a altura real.
O apelido é: "Alto para baixo, olhe abaixo": quando a temperatura cai, você está mais baixo do que você pensa!