Tudo é possível. Carrinhos de bebê são permitidos no metrô.
Mas eu aconselho contra isso porque há muitas escadas no metrô de Paris que podem fazer com que seus passeios não sejam agradáveis.
Se você ler francês, aqui está um post no blog sobre as dificuldades de uma jovem mãe com um carrinho: RATP: Rame Avec Ta Poussette! O artigo é relativamente antigo, mas a situação não evoluiu desde então.