Depende do papel de parede. Algumas "divisões" deixam um papel de forro para trás quando o rosto sai. Se isso é bom, você pode decorar sobre isso.
Se o restante for irregular, sim, tire-o.
Para preparar as paredes, certifique-se de que estejam lisas, sem reboco solto, etc. Às vezes, você verá paredes cobertas com sabão de açúcar para remover a cola ou outras sujeiras. Encha ou calafete quaisquer pedaços irregulares e, em seguida, passe o papel.