Você deve aplicar o Teste A/B na Gestão de Mudanças?
4 min
Atualizado em: 29 de Abril de 2024
Publicado em: 12 de Abril de 2021
Uma das táticas favoritas para validar uma abordagem de Gestão de Mudanças é o Teste A/B. Sua validação vai depender muito do tamanho da organização e das especificações da mudança, mas quando o teste é de forma eficaz e no ambiente certo, pode resultar em economias significativas e uma melhor aplicação.
O Teste A/B é basicamente uma maneira de comparar duas opções e analisar os resultados para que você possa escolher a opção mais eficaz para suas necessidades. Como profissionais de marketing ou desenvolvedores de soluções testam diferentes variações de uma campanha publicitária ou solução de software antes de implementá-la, testar variações dos planos de Gestão de Mudanças pode ser uma maneira útil de identificar o caminho ideal para altos níveis de adoção.
Elementos de Teste A/B na Gestão de Mudanças
Para executar esta abordagem, alguns elementos críticos devem existir:
1. Métodos claros para medir a adoção, utilização e proficiência
Se vamos testar uma abordagem em relação à outra, precisamos de medidas quantitativas que possamos usar para comparar a abordagem A com a abordagem B. Esse método, baseado em dados, permite que a organização identifique a abordagem superior.
2. Desejo do patrocinador e da equipe do projeto para testar a estratégia de mudança e esperar pelos dados
As medidas de mudança acontecem ao longo do tempo e precisamos deixar cada abordagem funcionar ao longo de um determinado período para avaliar os resultados por completo. Embora os dados preliminares sejam úteis (por exemplo: uma melhoria imediata em Conscientização e Desejo na abordagem A), não queremos tirar conclusões precipitadas antes de os resultados finais estarem disponíveis.
3. Disposição daqueles que recebem as diferentes variações de feedback
Além dos dados concretos, valorizamos o feedback qualitativo e queremos estabelecer mecanismos para recebê-lo dos participantes do estudo. Embora estejamos testando duas soluções, podemos chegar à uma solução híbrida. O feedback informa a decisão sobre qual solução de Gestão de Mudanças queremos implementar.
4. Grupos homogêneos e afetados da mesma forma
O Teste A/B é mais fácil de aplicar em organizações maiores, onde as pessoas e grupos afetados são semelhantes e geograficamente dispersos. No entanto, a abordagem pode ser usada em organizações de todos os tamanhos. Frequentemente, testamos abordagens para grupos que são afetados por mudanças de maneira semelhante. Esses grupos tendem a consistir em colaboradores – como agentes de call center, representantes de vendas, equipes de suporte de TI, etc. – cujas funções de trabalho também são consistentes em todo o grupo.
Justificativa para o Teste A/B
Frequentemente, em organizações grandes e complexas, há forte resistência dos líderes em uma estratégia de mudança completa, mesmo para grandes mudanças transformacionais com grandes riscos. Por quê? Porque é muito caro executar esses planos. Tirar as pessoas para participar de treinamentos, ler comunicações e participar de reuniões reduz a produtividade: Se um colaborador não está cumprindo sua função principal, os clientes não estão sendo atendidos, os produtos não estão sendo desenvolvidos e as vendas não estão sendo feitas.
Mas você pode demonstrar aos líderes que o Teste A/B é um bom investimento. Ao realizar um experimento, testamos essencialmente dois caminhos diferentes para a adoção. Talvez seja útil comparar uma estratégia de baixo custo a uma estratégia de alto custo. Ou um teste para comparar o fornecimento de materiais de apoio aos colaboradores com o treinamento presencial. Podemos até medir a satisfação do colaborador por abordagem como um ponto de dados para consideração. O Teste A/B também pode ser frutífero com mensagens de patrocinadores diferentes. Uma campanha por e-mail funcionará ou precisamos que os líderes se comuniquem durante as reuniões semanais?
A chave é entender e medir a rapidez e eficácia com que um método atinge a adoção em relação ao outro. Por exemplo, a estratégia de baixo custo nos aproxima o suficiente das metas de adoção para que a economia supere os benefícios da estratégia de alto custo?
Trade-off do Teste A/B
Além do tempo do colaborador, o Teste A/B leva tempo para ser executado pelas equipes. Você precisa concluir a experiência com ambas as variações e, em seguida, comprometer-se a avaliar as taxas de adoção. Também requer que a solução esteja quase completa. E a equipe deve estar disposta a adiar a implantação enquanto você testa as estratégias. O Teste A/B também produz algumas duplicações de trabalho – algumas das quais você sabe que jogará fora no final. Isso significa que você deva avaliar cuidadosamente se o Teste A/B faz sentido antes de começar.
Aqui está uma lista de perguntas úteis para se fazer:
- Qual é o tamanho do esforço de transformação?
- Quantas pessoas/grupos são afetados?
- Os grupos e impactos são semelhantes ou diferentes?
- Quantos locais são afetados?
- Quais são os custos e riscos de uma mudança mal gerenciada?
- Qual é o nível de resistência à mudança?
- Quanto tempo você tem antes executar o plano?
- O patrocinador e a equipe do projeto apoiam os Testes A/B?
Uma tabela pode ser usada para avaliar as abordagens. Se estiver testando várias abordagens, você pode adicionar colunas e métricas. Dependendo do nível dos dados, essas tabelas podem ser exibidas usando pacotes de análise estatística ou ferramentas visuais.
Medir | Abordagem A (alto custo) | Abordagem B (baixo custo) |
Taxa de adoção | 77% | 68% |
Velocidade de adoção | 11 dias | 17 dias |
Porcentagem de utilização | 89% | 78% |
Porcentagem de proficiência | 95% | 91% |
Custo por adoção do usuário | $ 27 | $ 12 |
Tempo de treinamento por usuário | 1 hora | Sem treinamento formal (auxílio de trabalho fornecido) |
Embora este exemplo simplificado ilustre que a Abordagem A obtém taxas mais altas de adoção, proficiência e utilização, a Abordagem B é significativamente menos dispendiosa por usuário. As taxas na Abordagem B podem realisticamente oferecer adoção e uso adequados para seus objetivos. Trabalhar com o seu patrocinador e a equipe do projeto, avaliar essas compensações ajudará a informar qual abordagem você deseja seguir, Além disso, isso pode ajudar a identificar uma solução híbrida que pode funcionar melhor.
O Teste A/B oferece benefícios com a mudança
Por que alguém faria isso? Em organizações maiores, o tempo é um dos itens mais caros em seus custos e investimentos. Se pudermos economizar algumas horas do tempo de adoção, podemos economizar custos significativos para uma grande organização. Se seguirmos um caminho melhor para a adoção, também veremos um benefício para os colaboradores. E ajudar as pessoas durante a mudança é a melhor razão de todas.