A falta de afiação em uma lâmina que já estava na realidade pode reduzir a nitidez, como você descobriu. Isso acontece se o seu ângulo estiver desligado e você bater a borda das rebarbas microscópicas ou dos dentes, apresentando uma superfície de corte mais opaca.
É provável que o afiamento correto corrija isso, embora talvez nunca seja tão perfeito quanto a lâmina fresca da pedra de amolar ou da fábrica.
Em qualquer caso, você não fará nenhum dano permanente à sua lâmina com um aço de brunimento (a menos que seja um cacete), porque no pior dos casos, você pode ter sua faca reafiada ou faça você mesmo. Isso pode ser um tanto inconveniente ou caro, mas é muito menos caro do que substituir uma lâmina.