É discutível se eles seriam afetados
Existem numerosas magias que causam dano ou inconveniência a uma criatura quando essa criatura se move ou é movida para sua área de efeito. Já que você usou o Mural de Fogo como exemplo, vamos examinar o texto que a magia usa:
Wall of Fire
A creature takes the same damage when it enters the wall for the first time on a turn or ends its turn there. (PHB, p. 285)
Este movimento não precisa ser voluntário: se você for empurrado para dentro de uma Muralha de Fogo, ou entrar nela, você ainda "entra" na parede. No entanto, observe o texto semelhante (mas não idêntico) do Mural Prismático (PHB, p. 269, negrito adicionado):
When a creature attempts to reach into or pass through the wall, it does so one layer at a time through all the wall’s layers. As it passes or reaches through each layer, the creature must make a Dexterity saving throw or be affected by that layer’s properties as described below.
Essa "tentativa" é crucial. Se uma criatura é agarrada e movida contra sua vontade, ela não "tenta" se mover na direção em que está se movendo: ela não teve escolha no assunto. Para uma criatura "tentar" atravessar a parede, ela deve estar se movendo através dela (ou alcançando-a) voluntariamente.
Isso também é complicado pelo fato de que a segunda sentença da citação acima não requer intenção, mas simplesmente que uma criatura "atravessa" ou "atravessa" uma camada da parede. É uma prerrogativa do DM decidir qual dessas sentenças tem precedência nessa situação.
O que acontece se você for empurrado / agarrado na parede?
É muito difícil dizer. Estranhamente, nenhuma das camadas da parede impede que uma criatura passe fisicamente através dela enquanto elas estão ativas (as camadas impedem que coisas como ataques de alcance mágico e não mágico penetrem na parede). Também não há nenhum texto que afirme diretamente que a parede é sólida. É descrito como "opaco", mas isso significa simplesmente que você não pode ver através dele.
Seria um chamado do Mestre o que aconteceria se você empurrasse uma criatura em direção à parede, ou tentasse atravessar a parede com uma criatura agarrada. Um caso poderia ser feito para a idéia de que a parede é sólida quando você é jogado nela, por causa das "tentativas" mencionadas mencionadas anteriormente: desta vez, "tentativas" é significativo não porque indique movimento voluntário, mas porque sugere uma possibilidade de falha. Se você "tentar" se mover através de algo, isso implica, de certa forma, que a movimentação não é garantida, o que pode implicar algum nível de solidez. Novamente, porém, isso é muito mais uma chamada do Mestre.
Uma coisa parece clara para mim: não parece provável que a parede seja inofensiva e intangível para criaturas que são empurradas involuntariamente. Se fosse esse o caso, um grupo de inimigos poderia simplesmente empurrar um ao outro através dele e evitar completamente seus efeitos (exceto o infeliz que é o último).
E sobre a condição de cegueira?
(Crédito ao HellSaint por mencionar isso em um comentário). Passar para dentro ou através da parede não é a única maneira pela qual a parede poderia afetar uma criatura (PHB, p. 267-269 [sic]).
...If another creature that can see the wall moves to within 20 feet of it or starts its turn there, the creature must succeed on a Constitution saving throw or become blinded for 1 minute.
Este efeito é um lugar onde as regras parecem um pouco mais claras. O texto diz "movimentos" em vez de "é movido", mas o movimento forçado ainda é movimento. Da mesma forma, o texto de Muralha de Fogo que exige que um personagem "entre" na área é similar gramaticalmente ao texto que exige que a criatura "se mova". E, crucialmente, não há texto nesta seção restringindo esse efeito específico a acontecer apenas na primeira vez que uma criatura se move para sua área em um determinado turno.
Embora ainda não exista uma resposta do projetista para esta questão, as Regras Como Escritas (RAW) indicam que você pode arrastar uma criatura para perto da parede (dentro de 20 pés) e submetê-la ao teste de resistência para evitar a cegueira . E concebivelmente, se a criatura tiver sucesso, você poderá arrastá-las para longe da parede e novamente para a mesma direção, submetendo-as novamente ao mesmo teste de resistência.
É claro que você precisaria gastar um espaço de magia de 9º nível para fazer isso.