Czy prędkość jest użytecznym wskaźnikiem? Nasza ocena

Tak – w obrębie zespołu, szkodliwe poza nim. Wskaźnik Velocity stanowi dane wejściowe do prognozowania, którymi kieruje się zespół; w momencie, gdy staje się on celem lub przedmiotem porównań między zespołami, nabiera nadmiernego znaczenia i traci sens. DORA celowo pominęła ten wskaźnik w zestawie wskaźników realizacji.

Prawie wszyscy uczestnicy dyskusji zgadzają się, że wskaźnik prędkości nigdy nie powinien opuszczać zespołu — a mimo to prawie każda organizacja pozwala na to. Ta rozbieżność stanowi sedno całej dyskusji. Wskaźnik ten jest rzeczywiście przydatny w jednym zadaniu, a w pozostałych przypadkach ma zdecydowanie destrukcyjny wpływ, dlatego też ocena musi być zróżnicowana.

Argument przemawiający za przydatnością prędkości

W kontekście pracy zespołu wskaźnik velocity ma praktyczne zastosowanie. Pozwala on na prognozowanie: wystarczy podzielić pozostały zakres prac przez ostatnią średnią zespołu, aby uzyskać przybliżoną liczbę sprintów potrzebnych do dostarczenia produktu. Pozwala to ustalić realistyczny zakres sprintu: należy wybierać historie tak, aby ich łączna wartość wynosiła około osiemdziesięciu do dziewięćdziesięciu procent ostatniej średniej, pozostawiając miejsce na zadania nieplanowane. Wskaźnik ten sygnalizuje również rzeczywiste zmiany — trzydziestoprocentowy spadek jest sygnałem, który warto omówić, a nie powodem do oskarżeń.

Motywacja kierownictwa stojąca za traktowaniem prędkości jako wskaźnika jest również uzasadniona i warto o tym uczciwie wspomnieć. Liderzy ponoszą odpowiedzialność za realizację zadań i chcą mieć wgląd w ten proces. „Jeśli nie możemy w jakiś sposób zmierzyć wydajności zespołu, skąd mamy wiedzieć, czy realizuje on zadania?” – to rozsądne pytanie, a nie wypowiedź złoczyńcy. Problemem nie jest samo pragnienie. Problemem jest to, że wskaźnik prędkości nie jest odpowiednim narzędziem do tego celu.

Argument, że prędkość stanowi pułapkę

Wystarczy wskazać kierunek wzrostu, a proces przebiega w przewidywalny sposób. Wyznaczcie cel — „zwiększyć prędkość o dwadzieścia procent w tym kwartale” — a zespół spełni to zadanie, zwiększając szacowaną wielkość tej samej pracy zamiast wykonywać jej więcej. Wystarczy zamienić kilka zadań o wartości „trzy” na „pięć”, a liczba wzrośnie bez rzeczywistego wzrostu wydajności. Jest to prawo Goodharta działające w cyklu dwutygodniowym i nie jest to hipoteza: nawet Mike Cohn, czołowy zwolennik stosowania punktów fabularnych, przyznaje, że najmniejsza nawet sugestia, iż prędkości będą porównywane, powoduje stopniową, ale stałą inflację punktów.

Porównania między zespołami są jeszcze gorsze, ponieważ sprawiają wrażenie rygorystycznych, a jednocześnie są bezsensowne. Dwa zespoły oceniające ten sam backlog uzyskują różne wyniki, ponieważ kalibrują je w oparciu o różne historie referencyjne — na tym właśnie polega istota szacowania względnego. Uśrednianie lub tworzenie rankingów zniekształca kalibrację obu zespołów wyłącznie w celu zasilania pulpitu wskaźników. Oznaką tego, że organizacja podchodzi do tego zagadnienia w niewłaściwy sposób, jest sytuacja, w której osoba na wysokim stanowisku musi osobiście chronić swoje zespoły przed traktowaniem prędkości jako kluczowego wskaźnika efektywności (KPI) — rozwiązanie to sprawdza się dokładnie tak długo, jak długo ta osoba pozostaje na swoim stanowisku.

W jakich okolicznościach zmienilibyśmy zdanie

Z pełnym przekonaniem poparlibyśmy stosowanie wskaźnika velocity przez każdy zespół, który wykorzystuje go wyłącznie do prognozowania i planowania, a nigdy nie ujawnia go na zewnątrz. Stosowany w ten sposób wskaźnik ten wcale nie stanowi pułapki — to po prostu obliczenia, które zespół wykonuje samodzielnie.

Zrezygnowalibyśmy z tego całkowicie w dwóch przypadkach. Po pierwsze, jeśli praca jest na tyle jednolita, że zarówno prognozowanie liczby historii, jak i sumowanie punktów — wówczas wskaźnik prędkości stanowi obciążenie, a przepustowość jest prostsza i trudniejsza do manipulowania. Po drugie, jeśli organizacja nie jest w stanie powstrzymać się od wykorzystywania tej liczby jako narzędzia manipulacji. Gdy mechanizm ten jest kulturowo zakorzeniony i żadna osoba nie jest w stanie go powstrzymać, uczciwym posunięciem jest zaprzestanie generowania nadużywanej liczby i przejście na wskaźniki przepływu, które nie są nadużywane.

Praktyczne podejście

• Wskaźnik prędkości mierzy tempo, a nie wydajność. Proszę to głośno powtórzyć w sali, gdy po raz pierwszy ktoś potraktuje ten wskaźnik jako miarę wyników.
• Proszę nigdy nie porównywać zespołów, nigdy nie wyznaczać tego jako celu, nigdy nie przeliczać tego na przewidywaną liczbę godzin na programistę. Każde z tych działań stanowi ten sam błąd, tylko w innym wydaniu.
• Należy przekazywać przełożonym wyniki, a nie liczbę punktów. Cztery kluczowe wskaźniki DORA — częstotliwość wdrażania, czas realizacji zmian, wskaźnik niepowodzeń zmian oraz czas przywrócenia sprawności — pozwalają mierzyć efektywność dostarczania bez stwarzania okazji do manipulacji i, w przeciwieństwie do punktów, mają jednakowe znaczenie we wszystkich zespołach. To właśnie taki zestaw wskaźników faktycznie interesuje kierownictwo.
• Nie należy zmieniać punktacji zadań z backlogu, gdy zespół przyspiesza tempo pracy. Zadania nie stały się mniejsze — to zespół stał się szybszy, a wskaźnik prędkości wzrośnie samoczynnie. Zmiana punktacji w celu utrzymania stałego wskaźnika prędkości działa jak mechanizm zapadkowy obracający się w odwrotnym kierunku i w ten sam sposób psuje prognozę.

Wskaźnik prędkości ma służyć zespołowi jako punkt odniesienia, a nie menedżerom do oceniania. Jeśli pozostanie on w obrębie zespołu, jest to jedna z bardziej przydatnych wartości w metodologii agile. Jeśli jednak zostanie upubliczniony, staje się najdoskonalszym przykładem trybu awarii zasilania.

Najczęściej zadawane pytania

Czy prędkość jest wskaźnikiem wydajności?

Nie. Wskaźnik prędkości mierzy tempo, a nie wydajność — czyli liczbę punktów fabularnych, które dany zespół realizuje w ramach jednego sprintu zgodnie z własną kalibracją. Nie pozwala on stwierdzić, czy praca miała wartość, i nigdy nie miał tego na celu. Badania przeprowadzone w ramach projektu DORA celowo wykluczają wskaźnik prędkości z mierników realizacji właśnie z tego powodu.

Czy można porównać tempo pracy poszczególnych zespołów?

Nie. Dwie drużyny oceniające tę samą pracę uzyskują różne wartości prędkości, ponieważ stosują różne historie odniesienia — na tym właśnie polega istota szacowania względnego. Porównywanie ich przypomina porównywanie dwóch termometrów o różnych punktach zerowych. Mike Cohn, który opowiada się za punktami fabularnymi, przyznaje, że najmniejsza nawet sugestia, iż prędkości będą porównywane, prowadzi do konsekwentnego zawyżania wartości punktowych.

Co powinniśmy przekazywać kierownictwu zamiast wskaźnika prędkości?

Należy raportować wyniki, a nie liczbę punktów. Cztery kluczowe wskaźniki DORA — częstotliwość wdrażania, czas realizacji zmian, wskaźnik niepowodzeń zmian oraz czas przywrócenia działania usługi — pozwalają mierzyć efektywność dostarczania w sposób, który nie zachęca do manipulacji i umożliwia porównywanie wyników między zespołami. Wskaźnik prędkości pozostaje w obrębie zespołu jako element planowania; to właśnie te cztery kluczowe wskaźniki powinny być przedmiotem uwagi kierownictwa.

Warto przeczytać

• Prędkość: do czego służy i jak ją obliczyć — zasady działania oraz dlaczego przestaje działać w momencie, gdy staje się celem.
• Punkty fabularne a #NoEstimates — spór na wczesnym etapie: jaka jest wartość liczby, zanim stanie się ona prognozą.
• Punkty fabularne a godziny — dlaczego przeliczanie którejkolwiek z tych jednostek na godziny powoduje ponowne pojawienie się problemu, który miał rozwiązać wskaźnik velocity.
• Czym jest wykres burndown? — śledzenie liczby punktów przypisanych w ramach sprintu; rzetelne wykorzystanie tej liczby.
• Agile Theatre: tryb awarii zasilania — w jaki sposób wskaźniki, takie jak prędkość, stają się narzędziami kontroli.