Não, a redução de força não é aumentada.
Os hits críticos dizem o seguinte:
When you score a critical hit, you get to roll extra dice for the attack’s damage against the target. Roll all of the attack’s damage dice twice and add them together. Then add any relevant modifiers as normal. To speed up play, you can roll all the damage dice at once.
For example, if you score a critical hit with a dagger, roll 2d4 for the damage, rather than 1d4, and then add your relevant ability modifier. If the attack involves other damage dice, such as from the rogue’s Sneak Attack feature, you roll those dice twice as well.
E a habilidade Drenagem da Força da Sombra diz o seguinte:
Strength Drain. Melee Weapon Attack: +4 to hit, reach 5ft., one creature. Hit: 9 (2d6 + 2) necrotic damage, and the target's Strength score is reduced by 1d4.
Observe a frase-chave aqui: "A pontuação de Força do alvo é reduzida em 1d4", não, por exemplo, "o alvo recebe 1d4 de dano de Força". Não há nenhum conceito de dano de habilidade em 5e. A redução de força não é nenhum tipo de dano, então não é multiplicada em um acerto crítico.