O que cobre
Sua leitura está correta. Todos esses exemplos se enquadram na ação Usar um Objeto. O texto é muito claro:
Use an Object (PHB p. 193)
When an object requires your action for its use, you take the Use an Object action.
Como Eric apontou em um comentário, o arquétipo de ladrão para o Rogue chega a usar um objeto como uma ação de bônus. Eles seriam capazes de envenenar, beber poções ou espalhar tropas como uma ação bônus.
O que não cobre
Ativar um item mágico não usa a ação Usar um Objeto.
Activating an Item (DMG p. 141)
If an item requires an action to activate, that action isn't a function of the Use an Item action, so a feature such as the rogue's Fast Hands can't be used to activate the item.