Sim, eu sempre isolaria as paredes do banheiro. Casas de banho, muitas vezes têm calor separado para mantê-los a uma temperatura mais quente do que o resto da casa, por isso é bom ter o isolamento térmico.
Igualmente importante, também fornecerá algum isolamento acústico.