25 KPIs do Agile em um relance - 1 KPI simples é suficiente!

Há muitos KPIs ágeis e métodos de medição. Mas você sempre deve ter uma coisa em mente:

Sage mir, wie du mich misst, und ich sage dir, wie ich mich verhalten werde.

Dr. Eli Goldratt

Portanto, é preciso fazer uma pergunta: Todos esses KPIs ágeis são relevantes? E ainda há esta outra citação:

Einfachheit ist die Seele der Effizienz.

Austin Freeman

Portanto, a próxima pergunta é: se quisermos medir a agilidade da forma mais simples possível, como faríamos isso? Quais métricas e medições ágeis são mais importantes? Ou, se tivéssemos que medir apenas uma coisa, o que seria?

Übersicht: Typische agile Metriken & KPIs

Es gibt viel zu viele Möglichkeiten agile Metriken und KPIs zu Erheben. Hier eine Übersicht der Möglichkeiten (nicht abschließend):

Agile KPI	Erklärung	Basiert auf…	Korrelation zum Kundennutzen	Einfachheit, es zu messen	Zielt ab auf…
Sprint Burndown Chart	Zeigt den Fortschritt innerhalb des Sprints zur Erreichung des Sprintziels	Subjektiv geschätzter Aufwand	Niedrig 🔴	Teilweise manuell ⚠️	Produktivität 🏃
Velocity	Indikator dafür, wie viel Arbeit während eines Sprints geschafft wurde	Summe der subjektiv geschätzten Storypoints (vollständige User Stories)	Niedrig 🔴	Teilweise manuell ⚠️	Produktivität 🏃
Epic und Release Burndown	Überwachung des Fortschritts über viele Tasks hinweg in Richtung eines Epics	Subjektiv geschätzter Aufwand	Mittel ⚠️	Teilweise manuell ⚠️	Produktivität 🏃
Control Chart	Zeitliche Dauer vom Status „In Bearbeitung“ bis „Fertig“ von Tasks	Objektive Zeitmessung	Niedrig 🔴	Automatisiert ✅	Produktivität 🏃
Kumulatives Flow Diagram	Anzahl von Tasks im Backlog im Verhältnis zur noch vorhandenen Zeit	Objektive Anzahl der Tasks vs. Zeit	Mittel ⚠️	Automatisiert ✅	Produktivität 🏃
Lead Time	Zeitperiode zwischen Beauftragung eines Produkts bis zu dessen Lieferung	Objektive Zeitmessung	Mittel ⚠️	Automatisiert ✅	Produktivität 🏃
Value Delivered bzw. Gelieferter Kundennutzen	Kundennutzen eines Requirements in € oder Punkten	Subjektiv geschätzt und zugewiesen durch Product Owner	Mittel ⚠️	Teilweise manuell ⚠️	Kundennutzen 🔍
Net Promoter Score	Bereitschaft, das Produkt weiterzuempfehlen	Subjektiv durch den Kunden	High ✅	Teilweise manuell & Tools notwendig 🔴	Kundennutzen 🔍
Work Item Age	Indikation dafür, wie lange es vom Start bis zur Beendigung eines Tasks dauert	Objektiv durch ein Tool	Niedrig 🔴	Automatisiert ✅	Produktivität 🏃
Throughput	Durchschnittlich fertiggestellte Tasks innerhalb einer bestimmten Zeit	Objektiv durch ein Tool	Mittel ⚠️	Automatisiert ✅	Produktivität 🏃
Blocked Time	Anzahl und Dauer von Tasks, die aufgrund von internen Abhängigkeiten nicht weiter bearbeitet werden können	Objektiv durch ein Tool	Mittel ⚠️	Automatisiert ✅	Vorhersagbarkeit 🎲
Escaped Defects	Indikation für die Anzahl von Softwarefehlern, wenn ein Release veröffentlicht wird	Objektiv durch ein Tool	Mittel ⚠️	Automatisiert ✅	Qualität 🏆
Failed Deployments	Anzahl von Deployments	Objektiv durch ein Tool	Mittel ⚠️	Automatisiert ✅	Qualität 🏆
Code Coverage	Ausmaß, in dem der Quellcode eines Programms ausgeführt wird (indiziert Qualität der Software)	Objektiv durch ein Tool	Mittel ⚠️	Automatisiert ✅	Qualität 🏆
Quality Intelligence	Hilft bei der Identifikation kürzlicher Änderungen im Code (indiziert Qualität der Software)	Objektiv durch ein Tool	Mittel ⚠️	Automatisiert ✅	Qualität 🏆
Cycle Time	„Work in progress“ geteilt durch durchschnittliche Komplettierungsrate von Tasks (indiziert, wie gut der Workflow funktioniert)	Objektiv durch ein Tool	Mittel ⚠️	Automatisiert ✅	Produktivität 🏃
Kundenzufriedenheit	Kunden- oder Nutzerzufriedenheit mit dem Produkt oder der Dienstleistung	Subjektiv durch den Kunden	High ✅	Teilweise manuell & Tools notwendig 🔴	Kundennutzen 🔍
Planned-to-done-ratio	Verhältnis zwischen geplanten und fertiggestellten User Stories	Objektiv durch ein Tool	Mittel ⚠️	Automatisiert ✅	Vorhersagbarkeit 🎲
Usage Index	Zeigt, welche Features von Kunden tatsächlich und in welcher Intensität genutzt werden	Objektiv durch ein Tool	High ✅	Teilweise manuell ⚠️	Kundennutzen 🔍
Innovationsrate	Fähigkeit der Teams, werthaltige Features zu entwickeln vs. „schlechte“ Arbeit wieder gut zu machen (Bug-Fixes und Supportanfragen)	Objektiv durch ein Tool	Mittel ⚠️	Teilweise manuell & Tools notwendig 🔴	Qualität 🏆
Unternehmenswert	Der Wert des Unternehmens(-bereichs)	Objektiv oder subjektiv durch die Stakeholder	Mittel ⚠️	Teilweise manuell ⚠️	Kundennutzen 🔍
Psychologische Sicherheit	Probabilidade de os funcionários expressarem abertamente as suas opiniões e ideias	Subjetivo através de uma ferramenta (de inquérito)	Alto ✅	Parcialmente manual e ferramentas necessárias 🔴	Cultura 🧑‍🤝‍🧑
Propósito	Uma razão emocional para a existência da sua empresa ou departamento	Subjetivo através de uma ferramenta (de inquérito)	Alto ✅	Parcialmente manual e ferramentas necessárias 🔴	Cultura 🧑‍🤝‍🧑
Visão	Uma imagem emocional de como a sua empresa ou departamento será no futuro	Subjetivo através de uma ferramenta (de inquérito)	Alto ✅	Parcialmente manual e ferramentas necessárias 🔴	Cultura 🧑‍🤝‍🧑
Satisfação do funcionário / Felicidade	Satisfação dos funcionários com o seu trabalho	Subjetivo através de uma ferramenta (de inquérito)	Alto ✅	Parcialmente manual e ferramentas necessárias 🔴	Cultura 🧑‍🤝‍🧑

Não me entenda mal: é claro que você pode ter modelos de maturidade ágil mais complicados ou métricas ágeis, como o Agilômetro. Mas acho muito interessante o experimento mental de querer medir apenas um KPI. É por isso que este artigo explora essa meta. 

Usamos os KPIs ágeis acima como base para este texto.

Uma observação prévia: uma métrica ágil simples, pragmática e muito útil é a mostrada no vídeo aqui. Agustina até compartilha publicamente os dados da equipe de todo o ano passado:

Play

Rejeitar métricas e KPIs ágeis?

Será que você quer métricas ágeis e KPIs ágeis?

Antes de nos aprofundarmos, uma coisa que ouço ou leio regularmente no LinkedIn quando converso com coaches ágeis, scrum masters ou consultores do Scaled Agile Frameworks: você quer medir o ágil?

Existem mentiras, existem mentiras deslavadas e depois existem as estatísticas.

Mark Twain

Mark Twain é um pouco dramático em relação a isso. Mas ele tem razão. Um ponto que Albert Einstein resumiu em poucas palavras.

Nem tudo o que pode ser contado conta.

Albert Einstein

O que são boas “KPIs” em Agile - Velocidade, gráficos de burndown, número de implementações com falha? Essas métricas ágeis são cruciais para o sucesso ágil? Eu duvido. 

Mas você desiste de todas as métricas? Isso também seria um erro.

Vantagens dos KPIs e métricas ágeis

No mundo de hoje, o ambiente de negócios muda rapidamente. Em tempos de bonança, os tomadores de decisão pensam na transformação ágil porque têm os recursos e a segurança. E em tempos ruins?

Em tempos de crise econômica, os líderes voltam ao pensamento tradicional. Eles voltarão a adotar velhos padrões de comportamento: por exemplo, decisões de cima para baixo que não são realmente compatíveis com o pensamento ágil moderno.

Portanto, se os líderes não tiverem KPIs claros para orientar o barco em tempos ruins, nem sequer iniciem uma transformação ágil. Porque então, na crise econômica, qualquer progresso feito nessa transformação seria destruído.

Portanto, provavelmente a única chance de os métodos ágeis sobreviverem a tempos difíceis no ambiente de escala é vencer o sistema com suas próprias armas: fornecendo métricas. Métricas que ajudam a gerenciar em tempos de incerteza.

E tenho certeza: existem métricas ágeis que agregam valor. 

Em retrospectiva, considero um dos meus maiores erros ter sempre categoricamente métricas para a transformação ágil **ter recusado.

Marcus Raitner

Einstein também diz isso em sua citação: “Há coisas que contam”. É sobre elas que este artigo trata.

Medir a agilidade - O que torna uma boa métrica ágil?

Suponha que a pergunta que você faz em seu Daily Stand-up seja tipicamente: O que vocês realizaram hoje? Então, essa é a maneira como você “mede” o progresso em sua equipe.

Boa pergunta, certo? Não, não está certo. Essa pergunta força a equipe a mostrar que está trabalhando duro. A pergunta pressiona a equipe a concluir a “lista de tarefas” para que possa se orgulhar da métrica: Sim, estive bastante ocupado nas últimas 24 horas!

Mas concluir a “lista de tarefas” é bom ou não? Bem, depende. Algo mais é muito mais importante: ou seja, atingir o objetivo da equipe. Isso é tipicamente - no caso de equipes ágeis - entregar valor ao cliente ou, em inglês, “delivering value”.

Agile KPIs - como medir a agilidade

Uma pergunta (ou métrica) melhor em seu Daily Stand-up seria, portanto: “Como você ajudou sua equipe ou organização a atingir nossa meta (de Sprint) nas últimas 24 horas?”

Mude sua pergunta (ou a métrica), mude a maneira como as pessoas pensam e agem: primeiro eficaz, depois eficiente - parafraseando Peter Drucker para dizer.

Mude a métrica - mude a maneira como as pessoas pensam e agem.

Parafraseando Einstein: Precisamos encontrar a única coisa que pode ser contada - e que realmente importa.

Então, o que realmente conta em uma transformação ágil?

A visão correta dos KPIs e métricas ágeis

O objetivo de sua transformação ágil definitivamente não é uma transformação ágil. Por que você está fazendo a transformação ágil? Vamos usar a “técnica dos 3 porquês” para entender isso:

O principal motivo para sua transformação ágil: você não quer acabar como a empresa Blockbuster, que ignorou as tendências do setor e as necessidades dos clientes, não estava aberta a mudanças e acabou ficando sem dinheiro.

Você quer acabar como a Netflix, que está constantemente evoluindo seu modelo de negócios em torno das principais necessidades de seus clientes. Basta você olhar para o Estudo de caso Blockbuster vs. Netflix.

Como você pode traduzir isso em uma métrica em uma transformação ágil? Bem, isso vai ser difícil.

O que as empresas fazem em vez disso: Usam métricas porque elas são fáceis de medir. Porque as ferramentas que existem por aí as cospem de qualquer maneira. A probabilidade de que essas sejam as métricas corretas é muito baixa.

Por exemplo, não se trata de melhorar a velocidade ou a rapidez do sprint. Esse é um erro comum: monitorar e medir o esforço ou a eficiência. Em vez disso, trata-se de satisfazer as necessidades do cliente. 

Agile KPIs & Medir a agilidade - uma percepção importante

Tendo estabelecido tudo isso, precisamos medir a validade de nossa “métrica única” em relação a algo ou encontrar um correlato.

Precisamos medir os resultados, não os outputs. Precisamos medir nossa transformação ágil com base no quanto ela nos ajuda a atingir nosso objetivo. Não devemos medir as pessoas com base no tempo gasto, mas com base em sua contribuição para uma visão ou objetivo comum - devemos medir o valor criado para o cliente!

Se quisermos medir o valor do cliente, precisamos entender muito bem as necessidades do cliente.

Por exemplo, uma empresa ferroviária precisa entender que não está no negócio de ferrovias. Ela precisa entender que está no negócio de transporte. Porque os clientes não se importam se são transportados de trem ou de avião.

Uma breve digressão: o importante com as métricas ágeis é, obviamente, refletir sobre elas. Como, por exemplo, com o Spotify Health Check com a retrospectiva correspondente. 

Você pode fazer exatamente isso (se necessário, também entre equipes) com nossa ferramenta de Health Check & Retrospectiva. Mais informações podem ser encontradas em “Como funciona”. Você também pode simplesmente dar uma olhada em uma retrospectiva de Health Check aqui. Neste caso, é uma retrospectiva sobre Scrum.

A medição de métricas culturais (como a segurança psicológica) pode, portanto, ocorrer em retrospectivas ágeis, onde as medidas também podem ser obtidas imediatamente.

Uma alternativa a isso são as reuniões individuais entre gerentes e funcionários. 

Mesmo nessa rotina, pesquisas de pulso curtas e reflexões regulares podem ajudar a coletar métricas culturais significativas e, ao mesmo tempo, implementar um processo de melhoria contínua.

Nossa ferramenta Echometer também pode ajudar você com isso. O modelo a seguir contém algumas perguntas sobre saúde que você pode refletir individualmente com os membros da sua equipe. Você pode respondê-las em uma escala de 1 a 7. 

Experimente sem fazer login usando o botão:

Outra visão das métricas ágeis: Tempo

Outra reflexão é importante aqui. Na melhor das hipóteses, as métricas dependem do tempo e/ou do estágio em que você se encontra na transformação ágil. 

Digamos que você já saiba que uma transformação ágil com a Estrutura Scaled Agile (SAFe®) ou outras estruturas ágeis é a etapa certa para você (a propósito, essa é a primeira coisa em que você deve pensar como empresa).

Nesse caso, você deve se concentrar em Início da transformação ágil se baseia em uma coisa: A mentalidade ágil da equipe de liderança.

A equipa de gestão está realmente disposta a mudar? Compreende as implicações de uma transformação? Está disposta a ser a primeira equipa da empresa a introduzir seriamente métodos ágeis - incluindo Kanban, retrospetivas ágeis e autorreflexão contínua?

Teoricamente, uma primeira métrica ágil deve, portanto, concentrar-se na “disponibilidade da gestão ou da equipa de gestão”. O meu colega Jean dá no seu artigo 7 dicas sobre o papel dos líderes nas transformações ágeis .

A próxima pergunta importante que você deve fazer a si mesmo em sua transformação: Temos os processos certos para entender e monitorar continuamente as necessidades de nossos clientes? Essa pode ser a próxima métrica ágil.

Mas espera. Isso não nos ajuda a atingir o objetivo deste texto - apenas a coisa a ser medida.

Não. Ele serve para que você se inspire na transformação ágil em termos de um modelo de maturidade ágil significativo.

Então, vamos dar uma olhada nas métricas ágeis típicas e como elas se correlacionam com os resultados mais importantes da sua transformação ágil: o valor do cliente.

As métricas ágeis mais importantes - um ranking

Você encontrará uma tabela acima com os Métricas ágeis mais comunsEssas são as metas que desempenham um papel nas estruturas ágeis em escala e nas transformações ágeis. Eu as agrupei de acordo com cinco áreas, cinco metas que você pode em geral com uma transformação ágil:

• Benefícios para o clienteAs métricas atendem às necessidades do cliente?
• PrevisibilidadeVocê sabe o que está fazendo: Entregamos no prazo e com processos tranquilos?
• ProdutividadeEstamos realizando mais e mais tarefas no mesmo tempo e com os mesmos recursos?
• QualidadeVocê sabe o que é um produto: Entregamos um produto livre de defeitos e outros problemas?
• CulturaOs funcionários de nossa organização estão satisfeitos, aprendem continuamente e podem ser inovadores para que a velocidade de entrega desejada possa ser mantida a longo prazo?

KPIs ágeis - como medir o sucesso ágil

A tabela também fornece uma indicação de

• quão fácil é medir a métrica (com base em minha experiência pessoal)
• O quanto essa métrica se correlaciona com nosso objetivo principal de longo prazo: Valor futuro do cliente (com base em minha experiência).

Então, qual deles é o da tabela acima? o métrica ágil? O que é um bom KPI em Agile?

É interessante que parece não haver uma métrica ágil que seja fácil de medir e que, ao mesmo tempo, proporcione o máximo de valor para o cliente. Mas isso também é uma pena.

Eu diria que a “simplicidade da medição” não é tão importante quanto a “correlação com o futuro benefício para o cliente”. Portanto, as métricas mais válidas parecem ser o “Índice de Utilização”, a “Satisfação do Cliente” ou o “Net Promoter Score”.

A propósito, você pode começar a coletar 11 KPIs em sua equipe hoje mesmo, realizando o chamado Spotify Health Check com sua equipe. Dê uma olhada neste vídeo e nos outros vídeos mencionados para ver como ele funciona:

Play

Scaled agile Frameworks - o KPI ágil mais importante é…?

Não importa se você usa a estrutura Scaled Agile (SAFe®) ou outro modelo para aumentar sua maturidade ágil.

Considerando essas três métricas, o que mais se correlaciona com o valor futuro do cliente é provavelmente a satisfação do cliente. Ou, para ser mais exato, a satisfação do cliente de primeira linha. Você pode encontrar mais informações sobre esse tópico neste link.

A satisfação do cliente provavelmente também tem a maior correlação de todas essas métricas com o ROI de sua transformação ágil. Ela informa se você deve mudar algo ou manter o curso.

KPIs ágeis: Uma métrica simples é suficiente - ou não?

Mas pare! Se você se concentrar apenas na satisfação do cliente, como terá certeza de que poderá superar seus concorrentes? longo prazo à frente? Como é que tornam possível que ideias inovadoras e disruptivas cresçam e prosperem na vossa empresa? O que é, afinal, o vosso objetivo a longo prazo…

Diante dessas perguntas, acho que devemos voltar ao básico: Para criar continuamente valor para o cliente e inovar, você precisa de duas outras coisas: processos ágeis e suaves e uma cultura corporativa saudável.

Sua cultura corporativa garante que os funcionários se sintam Psicologicamente seguro Você não precisa se preocupar com o que sente, está aberto ao fracasso, fala e compartilha suas ideias. E seus processos ágeis garantem que você implemente suas ideias mais rapidamente do que seus concorrentes.

**Ágil, como um líder, visa uma abordagem People-First; coloca as pessoas acima das coisas.****
**Vikram Verma

O gráfico a seguir ilustra isso de forma simples. Se o valor do cliente for sua meta de longo prazo, então a entrada para isso é “processos ágeis” vezes “cultura corporativa”.

Cultura × Processos ágeis = Benefício a longo prazo para o cliente

Uma vez li que “a transformação ágil requer uma mudança cultural, não uma mudança de processo.”

Não posso concordar com isso. Você precisa de ambos.

Três KPIs ágeis no modelo de maturidade ágil

Portanto, se quiser medir apenas uma coisa nos Scaled Agile Frameworks (SAFe®) ou noutros frameworks, seria a satisfação do cliente. Mas, honestamente, não posso recomendar medir apenas uma coisa - desculpem desapontá-lo.

Se você realmente quiser manter as métricas o mais simples possível, recomendo medir pelo menos três coisas para ter uma indicação da sua maturidade ágil:

• Perder o Benefício ou valor para o cliente - através da satisfação do cliente. 
• Sinto falta de você Cultura corporativa - através de segurança psicológica como um indicador de aprendizado e inovação. 
• Perder o Estabelecimento de métodos ágeis - usando a “planned-to-done-ratio” como um indicador de quão bem são capazes de fornecer valor incremental ao cliente.

Depois de medir, desenvolva algo. Depois, aprenda com isso. E, em seguida, repita suas métricas… Construa. Medir. Aprenda…

É simples, não é? Não, é claro que não. Mas você está pensando seriamente em estabelecer estruturas ágeis em sua organização?

O que é um bom KPI ágil e como ele me beneficia em minha transformação ágil?

Atualmente, estamos a entrevistar dezenas de especialistas - Release Train Engineers, Agile Coaches, Scaled Agile Framework Berater - sobre o tema dos KPIs e métricas no contexto dos Scaled Agile Frameworks e métodos ágeis.

Com base nessas entrevistas, desenvolvemos o Projeto Scagile: 7 webinars que ajudarão você a 7 erros típicos em transformações ágeis a evitar. Um dos webinars é sobre o tema “Métricas ágeis”.

Se você ainda estiver procurando por um quadro retrô adequado, nosso artigo poderá ajudá-lo com o assunto: As melhores placas retrô em comparação.