É puro "timeime-wimey ball". Tentar aplicar qualquer lógica às histórias de vários médicos está fadado ao fracasso. Por exemplo, no final de "Os Cinco Doutores", todas as encarnações partem entrando na mesma TARDIS, que então se divide em múltiplas direções; isso faz algum sentido?
No entanto, se você quiser uma explicação no universo: dado que todos os eus do médico (exceto Quatro, obviamente) estão reunidos no final de "Os Cinco Doutores", e eles estão tentando decifrar o significado de O Jogo de Rassilon, eles presumivelmente teriam compartilhado informações sobre o que aconteceu com cada um deles no caminho para o túmulo de Rassilon. Estabelece-se que as diferentes regenerações podem se comunicar telepaticamente, de modo que o debriefing compartilhado nem precisaria ser mostrado. Então, cinco teriam aprendido o que aconteceu com três naquele momento.