Um objeto é qualquer coisa física que não seja uma criatura:
... targets creatures, objects, or a point of origin for an area of effect...
Chapter 10. Spellcasting, pg. 204 of PHB
A descrição acima lista criaturas, objetos e pontos no espaço como os três tipos distintos de alvos mutuamente exclusivos. Note que os efeitos de magia não são coisas físicas e, portanto, não são objetos, criaturas ou pontos no espaço, embora os efeitos de magia possam afetar, criar ou compartilhar espaço com um ou mais deles.
Uma criatura é qualquer coisa que possa levar (ou pelo menos a maioria) das ações gerais. Todas as criaturas se enquadram nas categorias de Personagem do Jogador ou Monstro:
A monster is defined as any creature that can be interacted with and potentially fought and killed... the term also applies to humans, elves, dwarves, and other civilized folk who might be friends or rivals to the player characters.
Introduction, pg. 4 of MM
Então, você também pode dizer que qualquer coisa além dos PCs que não é coberta pelo MM é um objeto.
Isso significa que flechas, armas, armaduras e escudos são, na verdade, objetos . OBSERVAÇÃO: o uso de alguns objetos tem ações mais específicas, portanto, a ação "Usar um objeto" que você citou não se aplica. Este é o caso de flechas (propriedade de munição de armas e ação de ataque), armas (a ação de ataque), e armaduras e escudos (colocação e retirada e classe de armadura). Se você fizer algo não convencional com um desses objetos, como usar uma espada como alavanca para girar uma roda, a ação "Usar um objeto" será aplicada.