Não, você não. No entanto:
If you wear armor that you lack proficiency with, you have disadvantage on any ability check, saving throw, or attack roll that involves Strength or Dexterity, and you can’t cast spells.
(Livro do Jogador, página 144)
As regras são projetadas de modo que não seja uma boa idéia usar regularmente uma armadura com a qual você não é proficiente, mas elas lhe dão a opção para quando você realmente precisa da CA mais do que você precisa de suas habilidades, ataques ou magias.