O DMG na página 287 "Alterar as Proficiências" explica especificamente como fazer isso. Troque sua perícia com armaduras e armas (exceto proficiência em quarterstaff) em troca de algo nos moldes do recurso Unarmored Defense do monge.
Há também uma outra pequena alteração que você deve fazer. Seu personagem quer ser um conjurador, mas muitos dos domínios clérigos assumem que você é um combatente corpo-a-corpo e dá ao jogador o recurso Divine Strike, que melhora o dano corpo-a-corpo. Se o jogador escolher um domínio clerical com o recurso Divine Strike, eu também os deixaria trocá-lo pelo recurso Potent Spellcasting do domínio Light ou Knowledge.
Vale a pena notar também que o recurso de defesa não armada do Monk é significativamente menos poderoso que a armadura média ou pesada + um escudo. O DMG apresenta esta alternativa como uma diretriz, não uma regra estrita, então você pode considerar dar a eles +1 ou +2 AC extras no topo da defesa não blindada, ou se você acha que isso é demais para um conjurador de backline, jogue em algum outro privilégio variado.