O segundo hit não beneficia * do acerto crítico.
Vamos dar uma olhada no texto do Ataque Varrendo:
When you hit a creature with a melee weapon attack, you can expend one superiority die to attempt to damage another creature with the same attack. Choose another creature within 5 feet of the original target and within your reach. If the original attack roll would hit the second creature, it takes damage equal to the number you roll on your superiority die. The damage is of the same type dealt by the original attack.
Minha ênfase em negrito. Você não está fazendo um ataque contra o segundo alvo, você está verificando se é capaz de causar uma quantidade de dano a ele. Como tal, não pode se beneficiar dos efeitos de um Acerto Crítico.
* Bem, isso não é inteiramente verdade. Se você acertar um acerto crítico contra seu primeiro alvo, então ele certamente atingiria o segundo alvo, independentemente de AC, então o "benefício" de garantir o ataque ainda está lá.