TL; DR: Não sabemos, mas menos do que os 100.000 restantes.
Alguns selvagens foram mortos quando as Noites Vigias chegaram ao norte da muralha e alguns foram mortos quando os selvagens atacaram o Castelo Negro.
Nem todos os selvagens chegaram a Hardhome em primeiro lugar.
That's it, come on.
How many are with us?
I'm not good at counting.
We're leaving too many behind.
The free folk are stubborn.
You know how long it took Mance to band them together? And he knew them better than I ever will.
They're running out of food and there's nothing to hunt.
They'll come around.
Game of Thrones, S05 E08, "Hardhome"
É razoável supor que veio mais, mas não todos. Daqueles que vieram nem todos conseguiram, pois temos o icônico Night King levantando a cena morta.
Quando os selvagens são liberados pelos portões, eles atravessam os portões e se dirigem para o norte:
É seguro assumir que pelo menos alguns deles nunca voltaram para ajudar Jon em suas próximas batalhas. Como o próprio Jon afirma que os selvagens podem ocupar o Dom:
Look, well, there is good farmland in the Gift. Land that no one uses now. A dozen abandoned villages.
Game of Thrones, S05 E05, "Kill the Boy"
Na Batalha dos Bastardos, muitos selvagens são novamente mortos. Como você pode ver nesta foto da Vale salvando o dia.
Também na cena completa você vê as pilhas de corpos se formando, obviamente nem todos são selvagens, mas muitos deles são.
Sabemos também que nem todos os selvagens são mostrados na tela a qualquer momento, por isso é difícil adivinhar os que estão à esquerda. Tanto quanto eu sei, nós também nunca recebemos números.
Um punhado também morreu no episódio 6 da Temporada 7, "Beyond the Wall", quando os homens felizes partiram para capturar uma criatura.
Sabemos que ainda há alguns selvagens como eles estão estacionados em Eastwatch na 7 ª temporada. Embora no final alguns morreram aqui também.
Então, em conclusão, não sabemos, mas menos do que a quantidade total do exército de Mance.