Objetivos vs. resultados

Atingimos as metas do business case?

A meta era processar faturas em dois dias. Estamos em três, e antes do go-live eram seis.
O objetivo era desativar o CRM antigo até junho. O financeiro ainda usa.
A meta era 90% dos colaboradores usando o autoatendimento. Depois de oito semanas, o uso está em 72%.
Benefícios obtidos

Quais benefícios conseguimos medir desde o go-live?

O fechamento do mês leva quatro dias em vez de sete.
Cancelamos as licenças da ferramenta de relatórios antiga, o que economiza US$ 40 mil por ano.
Os erros de digitação manual nos pedidos caíram cerca de dois terços.
O que funcionou

O que da implantação devemos repetir da próxima vez?

Rodar o sistema antigo e o novo em paralelo por duas semanas pegou três erros de dados antes da virada.
Os superusuários de cada escritório responderam à maioria das dúvidas antes de elas chegarem ao help desk.
Ensaiamos a virada duas vezes, e o fim de semana do go-live terminou seis horas antes do previsto.
Problemas em aberto

O que ainda não funciona desde o go-live?

O financeiro ainda exporta para o Excel para montar o relatório mensal.
O app mobile desconecta as pessoas a cada 15 minutos.
Os cadastros de clientes foram migrados sem as anotações, e o suporte vive pedindo por elas.
Ações e responsáveis

Quem vai corrigir o quê, e até quando?

Montar o relatório financeiro mensal no novo sistema até o fim do mês que vem.
Pedir ao fornecedor, ainda esta semana, para aumentar o tempo limite da sessão.
Recuperar as anotações dos clientes no sistema antigo antes que os backups sejam apagados em março.

O que é uma revisão pós-implementação?

A revisão pós-implementação (PIR, do inglês post-implementation review) verifica se um sistema, projeto ou mudança cumpriu o que se esperava depois de entrar em produção. Ela compara os objetivos do business case com os resultados desde o go-live, mede os benefícios obtidos até agora e lista os problemas que continuam em aberto. A maioria das PIRs acontece de um a três meses após o go-live, quando já houve uso real suficiente para avaliar o resultado. O quadro tem cinco colunas. Objetivos vs. resultados coloca cada meta ao lado do que realmente aconteceu. Benefícios obtidos registra os ganhos mensuráveis, com os números. O que funcionou reúne as partes da implantação que vale a pena repetir, e Problemas em aberto lista o que ainda não funciona para usuários ou para o suporte. Ações e responsáveis transforma as lacunas em correções, cada uma com um responsável e um prazo. No TeamRetro, todos adicionam ideias de forma privada primeiro; depois o grupo organiza as ideias, vota nos problemas mais importantes e atribui as ações. A PIR analisa o resultado em produção. Uma sessão de Lições Aprendidas reúne recomendações para o próximo projeto, e uma After Action Review faz o balanço de um evento logo após o seu término. Convide o patrocinador, o time de entrega e as pessoas que usam ou dão suporte ao sistema, e leve o business case para que a revisão compare os resultados com o que foi prometido.

Formato de revisão pós-implementação

Objetivos vs. resultados

Atingimos as metas do business case?

Comece pelos objetivos para os quais a mudança foi aprovada, de preferência copiados do business case com as metas numéricas. Para cada um, adicione o que realmente aconteceu desde o go-live e como você sabe disso. Quando uma meta não foi atingida, anote a diferença e deixe os motivos para a discussão.

Benefícios obtidos

Quais benefícios conseguimos medir desde o go-live?

Liste os ganhos que você consegue demonstrar com números ou evidências claras, como tempo economizado, custos evitados, menos erros ou um risco eliminado. Pergunte de onde vem cada número. Benefícios que ainda não apareceram vão para Ações e responsáveis com uma data para nova verificação, para que ninguém os conte antes da hora.

O que funcionou

O que da implantação devemos repetir da próxima vez?

Analise a implementação em si: planejamento, testes, migração de dados, treinamento, comunicação e virada. Pergunte o que tornou cada sucesso possível, para que a prática possa ser reaproveitada na próxima implantação. Inclua o que os usuários e o suporte perceberam, e não só o time do projeto.

Problemas em aberto

O que ainda não funciona desde o go-live?

Reúna os problemas com que usuários e suporte ainda convivem: defeitos, soluções alternativas, funcionalidades faltando, processos lentos e lacunas de treinamento ou de dados. Pergunte quem é afetado e com que frequência. Agrupe os itens duplicados e depois faça a votação, para que o time corrija primeiro os problemas que mais custam.

Ações e responsáveis

Quem vai corrigir o quê, e até quando?

Transforme os problemas mais votados e os objetivos não atingidos em ações, cada uma com um único responsável e um prazo. Decida quais o time do projeto corrige e quais passam para o suporte do dia a dia. Adicione-as como ações no TeamRetro e defina uma data para medir de novo os benefícios que precisam de mais tempo.

Quando utilizar esta retrospectiva

  • De um a três meses depois que um novo sistema, ferramenta ou processo entra em produção, quando já houve uso real suficiente para comparar os resultados com o business case.
  • Após uma mudança de TI grande ou malsucedida, quando o seu processo de gestão de mudanças exige uma revisão pós-implementação.
  • Quando um patrocinador ou comitê diretor pergunta se o projeto entregou os benefícios prometidos.
  • Antes de encerrar o orçamento do projeto ou passar o sistema para o suporte do dia a dia, para que cada problema em aberto tenha um responsável.
  • Quando as pessoas estão criando soluções alternativas para contornar um sistema novo e você precisa entender o motivo antes que a adoção caia ainda mais.

Perguntas sugeridas para quebra-gelo

  • Qual foi a primeira coisa que você percebeu depois do go-live?
  • De qual parte do novo sistema você mais sentiria falta se ela sumisse amanhã?

Quer um exercício de aquecimento que sua equipe faça, e não apenas responda em voz alta? Veja quebra-gelos gratuitos →

Ideias e dicas para sua reunião de retrospectiva

  • Antes da sessão, reúna o business case, os indicadores de sucesso e a data do go-live, e adicione você mesmo os números principais em Objetivos vs. resultados. Sem eles, a revisão vira uma troca de opiniões.
  • Convide as pessoas que usam e dão suporte ao sistema, além do time de entrega. Elas enxergam os problemas que o time do projeto já deixou de notar.
  • Separe os benefícios que você consegue medir dos benefícios que você espera. "O processamento de faturas caiu de seis dias para dois" vai em Benefícios obtidos; "deve economizar tempo" ainda é só uma esperança.
  • Evite buscar culpados. Pergunte o que no plano, no processo ou nas ferramentas deixou um problema passar, e não quem o causou.
  • Defina um responsável para cada problema em aberto antes do fim da sessão, inclusive para os que vão passar para o suporte do dia a dia.
  • Agende um acompanhamento curto para os benefícios que precisam de mais tempo para aparecer e revise as ações nesse momento.

Perguntas frequentes

O que deve constar em uma revisão pós-implementação?
Uma revisão pós-implementação compara os objetivos originais com os resultados reais, mede os benefícios obtidos, registra o que funcionou e os problemas ainda em aberto e atribui ações com responsáveis. Muitas também comparam custo e cronograma com o orçamento. Este modelo dá a cada parte a sua própria coluna.
Qual é o objetivo de uma revisão pós-implementação?
Ela descobre se a mudança entregou o valor pelo qual foi aprovada e o que ainda precisa ser corrigido. Também dá ao patrocinador evidências para encerrar o projeto e mostra ao próximo projeto quais estimativas e benefícios eram realistas.
Como fazer uma PIR?
Reúna o business case e os dados desde o go-live e convide o patrocinador, o time de entrega e as pessoas que usam o sistema. Passe por objetivos, benefícios, o que funcionou e problemas em aberto, nessa ordem. Termine definindo um responsável e um prazo para cada problema e compartilhe os resultados com o patrocinador.
Quais perguntas uma revisão pós-implementação deve fazer?
Atingimos os objetivos do business case? Quais benefícios conseguimos medir desde o go-live? O que funcionou bem na implantação? O que ainda não funciona? Quem vai corrigir e até quando? As cinco colunas deste modelo fazem essas perguntas nessa ordem.
Quando fazer uma revisão pós-implementação?
Normalmente de um a três meses após o go-live, quando pessoas suficientes já usaram o sistema para avaliá-lo. Uma mudança de TI grande ou malsucedida costuma ser revisada antes, enquanto os detalhes ainda estão frescos. Benefícios que demoram mais para aparecer podem ter uma segunda verificação depois.
O que significa PIR?
Em negócios e gestão de projetos, PIR geralmente significa post-implementation review, ou revisão pós-implementação. Em operações de TI, a mesma sigla também pode significar post-incident review, que analisa uma indisponibilidade em vez de uma mudança planejada.
Pronto para conduzir essa retrospectiva?Experimente esta retrospectiva ao vivo