Assumindo que a escala está realmente no aeroporto de Keflavik (o que é quase certo; a própria Reykjavik tem voos domésticos e algumas conexões com locais vizinhos no Atlântico Norte):
Sim, você pode deixar o aeroporto durante a sua parada. Como o seu destino é a Finlândia, e tanto a Islândia quanto a Finlândia estão no espaço Schengen, você estaria passando por controles de imigração em Keflavik de qualquer maneira e nada impedirá que você deixe o terminal até o seu Schengen. voo interno para Helsínquia sai.
Cuidado ao montar seu plano, que o Keflavik esteja a uma certa distância de Reykjavik. É cerca de uma hora de carro e as opções de transporte público são limitadas aos ônibus do aeroporto. Pesquise com antecedência para encontrar uma partida de ônibus que o levará ao aeroporto a tempo de passar pela segurança para seu voo de manhã cedo.
( Esta questão parece relevante).