É comum em banheiros públicos, sim, especialmente aqueles localizados em locais desacompanhados, como parques públicos e pequenas estações de trem. Por outro lado, banheiros em lojas como lojas de conveniência ou shoppings, ou em grandes estações de trem, quase sempre têm papel (você pode até ter sorte e ter um "washlet").
Uma questão relacionada e um pouco mais comum é que a área do lavatório nem sempre tem sabonete.