Do trabalho realizado à experiência do utilizador
Uma equipa publicou três versões do portal de reconciliação. Isso confirma entrega, mas ainda não diz se os operadores conseguem fechar o trabalho com menos assistência. Distingue recursos investidos, atividades realizadas, outputs produzidos, resultados experimentados pelos utilizadores e impactos na organização. São observações diferentes que podem complementar-se. Define a tarefa, a população e o período antes de escolher uma medida. Neste exercício, a proporção de tarefas concluídas sem assistência observa uma capacidade do utilizador. A contagem de deployments informa entrega. Um resultado favorável numa destas medidas não determina automaticamente o resultado nas restantes.
Quatro perspetivas para orientar perguntas
Em Evidence-Based Management, Current Value ajuda a observar valor já experimentado; Unrealized Value orienta a investigação de necessidades ainda não satisfeitas. Time-to-Market olha para a rapidez com que se pode entregar e aprender; Ability-to-Innovate ajuda a investigar obstáculos à criação de novas capacidades. Num serviço interno, vinte dias de espera por feedback podem limitar aprendizagem, enquanto três variantes antigas consomem capacidade de manutenção. As duas observações podem ter relações entre si. Não são quatro notas obrigatórias para somar nem uma lista fixa de métricas. Escolhe medidas que respondam às hipóteses e mantém atenção ao resultado para os utilizadores.
Desenhar uma experiência que permita decidir
Escreve uma hipótese concreta: uma consulta assistida poderá permitir que operadores recém-chegados identifiquem exceções sem pedir ajuda. Antes de começar, identifica participantes, tarefa, período, medida e condições de qualidade. Define também quando interromper a experiência se surgirem efeitos adversos. Pode bastar uma experiência pequena para investigar uma incerteza; construir a funcionalidade inteira não é sempre necessário. Porém, um protótipo de aprendizagem não deve ser apresentado como incremento de produção Done sem cumprir a Definition of Done. Depois da observação, compara evidência e previsão, explica limitações e decide se ajustas a solução, investigas outra hipótese ou aumentas prudentemente o alcance.
Taxas, populações e limites da inferência
No piloto A, 18 de 20 tarefas foram concluídas sem assistência: 90%. No B, foram 32 de 40: 80%. A tem uma taxa observada superior em dez pontos percentuais, embora B tenha mais conclusões em valor absoluto. Isso não demonstra causalidade, permanência ou significância estatística. Compara definições e composição das populações. Um piloto só com operadores experientes não representa automaticamente recém-chegados. Se a composição entre grupos mudar, a taxa agregada pode melhorar mesmo quando cada grupo piora. Mostra numeradores, denominadores e resultados por grupo antes de defender uma expansão. A aritmética ajuda a descrever observações; não substitui um desenho experimental adequado.
Capacidade libertada e efeito financeiro
Uma automação evita vinte horas semanais de trabalho manual, mas requer seis horas de suporte e quatro de controlo adicional. Assumindo categorias sem sobreposição, liberta dez horas líquidas por semana. Isso não prova uma redução equivalente no orçamento: pessoas podem usar esse tempo noutras tarefas, custos podem ser fixos e podem existir despesas adicionais. Regista horizonte, unidades, pressupostos e efeitos de qualidade. Não somes horas poupadas com euros nem contes o mesmo benefício duas vezes. Para decidir o próximo investimento, compara o benefício observado com a necessidade ainda não satisfeita e com o esforço de manter a solução em operação.
Ligar a experiência à direção do produto
Uma direção estratégica pode procurar maior autonomia operacional. Um objetivo intermédio torna essa ambição mais próxima, e um objetivo tático orienta uma experiência imediata. Estes horizontes EBM ajudam a aprender; não substituem os compromissos de Scrum. Mantém a clareza sobre Product Goal e Sprint Goal. Num registo simples, escreve hipótese, previsão, observação, limitações e decisão seguinte. Se o resultado contradiz a previsão, investiga antes de mudar a métrica para declarar sucesso. Uma decisão de parar uma solução pode poupar investimento e permitir outra hipótese. O relatório deve mostrar o que mudou na compreensão do problema, além do trabalho entregue.
Piloto A: 18/20 = 90%; piloto B: 32/40 = 80%. A diferença observada é de 10 pontos percentuais. Identifica o que falta saber antes de atribuir a diferença à solução.
Armadilhas comuns
Comparar contagens sem denominadores; escolher só a métrica favorável; extrapolar operadores experientes para todos; converter automaticamente horas libertadas em redução de orçamento.
Tópicos relacionados: Valor e Product Goal · Stakeholders e aprendizagem
Uma medida útil ajuda a tomar uma decisão com pressupostos visíveis. Resultados observados orientam aprendizagem, mas não provam sozinhos causalidade ou poupança financeira.
Referência: Online Evidence-Based Management Guide | Scrum.org · PSPO I; Scrum Guide November 2020; no public numbered exam revision