System działu analityki produktu

Główne wskaźniki produktu definiowane są kartami w „Wskaźnik”: adopcja, retencja i konwersja — każdy wskaźnik z definicją, źródłem danych i właścicielem. Odczyty aktualizowane są okresowo w „Pomiar”, a każdy nieuzasadniony ruch przechodzi do „Analiza”, gdzie analityk rozkłada go: który segment użytkowników? Który krok podróży? Kiedy się zaczął? Dojrzała analiza produkuje „Hipoteza” w formie falsyfikowalnej — zmiana X podniesie Y, ponieważ Z — testowana w „Eksperyment” z z góry określonym zakresem, czasem i kryterium sukcesu. Wynik rozstrzygany jest w „Decyzja”: przyjęcie lub porzucenie; potem przenoszony do „Dokumentacja”, aby ci, którzy przyjdą później, wiedzieli, co testowaliśmy i czego się nauczyliśmy.

Forum to rada danych: tablice wskaźników publikowane i omawiane są okresowo, a hipotezy wystawiane przed przetestowaniem na wzajemną krytykę kolegów — czy pomiar jest poprawny? Czy nie ma pomieszania czynników? — więc eksperymenty umacniają się, zanim pochłoną wysiłek rozwoju. Decyzje o przyjęciu lub porzuceniu dokumentowane są ze swoimi liczbami w stałych wątkach — analityczny rejestr firmy pozostaje żywy zamiast raportów czytanych raz i grzebanych.

Analityk produktu jest właścicielem podróży karty od „Pomiar” do „Eksperyment”: aktualizuje odczyty, rozkłada odchylenia i projektuje eksperymenty. Kierownik produktu przyjmuje „Decyzja” i zamienia ją w mapę drogową oraz zleca nowe analizy konkretnymi pytaniami. Inżynier danych zapewnia poprawność potoków i definicji, aby żadna decyzja nie opierała się na zepsutej liczbie. Złota zasada: żadnego wejścia w „Eksperyment” bez zapisanego przed rozpoczęciem kryterium sukcesu.