Eles se libertaram
De "Hell Bent":
CLARA: I thought you said Gallifrey was frozen in another dimension?
DOCTOR: Well, they must have unfrozen it and come back.
CLARA: How?
DOCTOR: I didn't ask. It would make them feel clever.
Sabemos que os Time Lords, em algum momento, conseguiram remover Gallifrey de sua localização em uma dimensão alternativa e movê-lo para o fim do universo. Que Missy deu as coordenadas (falsas) do Doutor para a localização de Gallifrey no caminho de volta em "Death in Heaven" sugere que eles já haviam se mudado naquele ponto. Francamente, eu suspeito que eles esvaziaram o momento em que o Doutor foi embora, para que não houvesse nenhum ponto seguro a tempo para ele voltar e encontrá-los. O ponto é que Gallfirey não estava lá a qualquer hora que ele pudesse voltar.
O crack desapareceu
Depois que os Time Lords enviaram a energia de regeneração ao Doctor em "The Time of the Doctor", a fenda se fechou.
Como tal, mesmo que os Time Lords não tivessem saído, o Doctor não teria qualquer forma de entrar no universo alternativo.