Sua carta PoE é uma carta oficial do Autoridade de imigração canadense dizendo que você foi aprovado para um determinado tipo de permissão ou visto para permanecer no Canadá em alguma outra
Como tal, é lógico que o seu visto anterior pode não ser aplicável à sua futura visita, especialmente se for um visto regular de visitante.
Mas, à parte a razão, você informa que sua carta PoE
mentioned I need to apply for visa again if have new passport.
Se isso for verdade, ninguém aqui pode contradizer esse requisito. Você pode perguntar a um funcionário do governo canadense se pode usar seu visto antigo, mas se a carta disser explicitamente que você não pode, é improvável que alguém lhe diga algo diferente.