Metryki Próżności vs. Metryki Działalne: Jak Rozpoznać Różnicę
Metryki próżności czują się jak postęp i nie tworzą nic. Oto praktyczny test do rozpoznawania różnicy – i tabela referencji najczęstszych sprawców.
Termin "metryka próżności" został spopularyzowany przez Erica Riesa w "Lean Startup", ale koncepcja pochodzi z dziesięcioleci temu: opisuje każdą metrykę, która czyni cię szczęśliwym z powodu twojego biznesu bez pomagania ci go zrozumieć lub ulepszać. Widoki stron. Całkowite pobierania. Brutto rejestracje. Wzmianki prasowe. Impressiony na Twitterze. Te liczby rosną i wzrost czuje się jak wygrana i to uczucie jest dokładnie niebezpieczeństwem – ponieważ wysiłek spędzony na świętowaniu i zgłaszaniu metryk próżności to wysiłek nie poświęcony na liczby, które faktycznie napędzają decyzje.
Rozróżnienie między próżnością a działalnością nie zawsze jest oczywiste i niektóre metryki naprawdę należą do obu kategorii w zależności od kontekstu. Co następuje to struktura do podjęcia decyzji i tabela referencji obejmująca metryki najczęściej dyskutowane.
Test trzypytaniowy
Zastosuj te trzy pytania do każdej metryki, którą rozważasz śledzić. Jeśli zawiedzie więcej niż jedno, jest to prawie na pewno metryka próżności.
Pytanie 1: Czy ta metryka może spadać? Metryka, która tylko kiedykolwiek rośnie – całkowici zarejestrowani użytkownicy, skumulowane widoki stron, wszystkie pobierania – zawiera brak informacji o tym, czy sprawy się poprawiają czy pogarszają teraz. Metryki działalne mogą iść w obu kierunkach. Zdolność do upadku to co czyni metrykę znaczącą jako sygnał.
Pytanie 2: Czy zmiana tej metryki podpowiada konkretne działanie? Jeśli ta metryka spadłaby o 20% w przyszłym miesiącu, czy wiedziałbyś co robić inaczej? Jeśli odpowiedź to "badalibyśmy dalej," metryka jest zbyt wysokopoziomowa, aby być bezpośrednio działalna. Jeśli odpowiedź to "zwiększylibyśmy wychodzące rozmowy sprzedażowe" lub "naprawilibyśmy przepływ wdrażania na kroku trzy," to jest działalna.
Pytanie 3: Czy ta metryka jest trudna do zawyżenia bez poprawy bazowej rzeczywistości? Całkowici zarejestrowani użytkownicy mogą być zawyżeni poprzez kupowanie list e-mailowych lub uruchamianie na Product Hunt. Cotygodniowo aktywni użytkownicy nie mogą być zawyżeni bez rzeczywistego sprowadzenia użytkowników z powrotem do produktu. Metryki, które są łatwe do zawyżenia bez tworzenia rzeczywistej wartości, to metryki próżności w konstrukcji.
Metryka próżności to nie metryka, która wygląda dobrze. To metryka, która czyni cię czując się, jakbyś się poprawiał, gdy może się nie poprawiać. Uczucie to pułapka.
Tabela referencji
| Metryka | Werdykt | Dlaczego |
|---|---|---|
| Całkowici zarejestrowani użytkownicy | Próżność | Tylko rośnie. Mówi ci nic o zaangażowaniu, dostarczanej wartości lub czy produkt pracuje. Zastąp poprzez cotygodniowo aktywnych użytkowników lub wskaźnik aktywacji. |
| Miesięcznie aktywni użytkownicy (MAU) | Działalna | Może rosnąć lub maleć. Odzwierciedla czy użytkownicy wracają – warunek wstępny do retencji i przychodu. Szczególnie potężna gdy śledzona przez kohorty. |
| Widoki stron / sesje strony | Próżność | Może być zawyżona poprzez ruch bot, skoki społeczne lub dowolne wydatki płatne. Bez stawki konwersji dołączonej, opisuje uwagę, a nie trakcję. Użyj zamiast tego wskaźnika konwersji ruchu do wersji próbnej. |
| Wskaźnik konwersji wersji próbnej na płatną | Działalna | Mierzy czy twój lejek pozyskiwania pracuje. Spadek wyzwala specyficzne badanie wdrażania, ceny lub przesłania. Trudna do zawyżenia bez poprawy rzeczywistej konwersji. |
| Obserwujący mediów społecznościowych | Próżność | Liczbę obserwujących można kupić, podąża za prawem potęgi niezwiązanym z jakością biznesu i jest słabym predyktorem jakiegokolwiek dalszego wyniku biznesu. Śledź wskaźnik referendalny lub udział głosu w kwalifikowanych społecznościach. |
| Rozmiar listy e-mailowej | Zależy | Próżność jeśli niekwalifikowana i nieangażowana. Działalna jeśli podzielona na segmenty poziomem zaangażowania i skorelowana z dalszą konwersją. Rozmiar listy ma znaczenie tylko gdy odsetek otwarcia i wskaźniki kliknięć są zdrowe. |
| Net Promoter Score (NPS) | Zależy | Działalna gdy śledzona konsekwentnie w czasie z podziałami na poziomie segmentów i procesem śledzenia dla detraktów. Próżność gdy ankietowana raz, świętowana i archiwizowana. Wynik jest mniej wartościowy niż trend i wzorem jakościowym. |
| Przychód (brutto) | Zależy | Działalna gdy rozłożona na kohortę, kanał i segment. Potencjalnie mylące gdy przedstawiona jako pojedyncza liczba mieszana, która maskuje wysoki churn za silnym pozyskaniem nowych klientów. Zawsze sparuj z retencją przychodu netto. |
| Wzmianki prasowe / zasięg mediów | Próżność | Rzadko skorelowana z wynikami biznesu na wczesnym etapie. Mierz czy prasa prowadzi wersje próbne lub rejestracje – jeśli nie, należy do archiwów marketingowych, a nie do pulpitu biznesu. |
| Wskaźnik retencji na dzień 30 | Działalna | Bezpośrednio mierzy czy nowi użytkownicy znaleźli wystarczającą wartość aby pozostać aktywni jeden miesiąc po rejestracji. Jeden z najuczciwszych wiodących wskaźników retencji długoterminowej i LTV dostępnych dla zespołów na wczesnym etapie. |
| Ocena sklepu aplikacji | Próżność | Odzwierciedla stronniczą, samowybrana próbę twoich najbardziej i najmniej zadowolonych użytkowników. Przydatna do opini jakościowych; bezużyteczna jako metryka biznesu. Śledź retencję na dzień 30 i wskaźnik churn aby mierzyć rzeczywistą zadowolenie z produktu. |
| Koszt pozyskania klienta (CAC) | Działalna | Bezpośrednio działalna – wzrost wyzwala badanie efektywności kanału, wskaźnika konwersji i kosztów personelu. Znacząca tylko gdy wyliczona z pełnym włączeniem kosztów (ludzie + wydatki na reklamy + narzędzia) i śledzona na kanał, nie tylko mieszana. |
Kategoria "Zależy" zasługuje na uwagę
Kilka metryk w tabeli – NPS, przychód, rozmiar listy e-mailowej – siada w kategorii "zależy", która jest warta rozpakowania. To metryki, które są działalne w jednym kontekście i próżność w innym. Różnica jest prawie zawsze o tym, jak są śledzone, podzielone na segmenty i śledzą się, a nie o samej metryce.
NPS to najjaśniejszy przykład. Pojedyncza liczba NPS mieszana, ankietowana rocznie i przedstawiona w talii zarządu, to metryka próżności. Mówi ci coś (wynik), czuje się znaczące (liczba powyżej 40 to "dobra"), ale nie mówi ci którzy klienci są detraktami, dlaczego są detraktami, ani co powinieneś zrobić aby ich nawracać. NPS śledzony miesięcznie na segment klienta, z konsekwentnym procesem śledzenia dla każdej odpowiedzi detraktora, to metryka działalna. Ta sama liczba, całkowicie inna użyteczność.
Prawie każda metryka staje się bardziej działalna gdy jest podzielona na segmenty. Przychód mieszany rozłożony na kanał pozyskiwania, segment klienta i rozmiar umowy generuje całkowicie różny wgląd z poprzedniej liczby mieszanej. Pracy uczynienia metryki działalnej jest często pracy podzielenia jej na segmenty gdzie wariacja żyje – ponieważ wariacja to gdzie żyje możliwość podejmowania decyzji.
Koszt organizacyjny metryk próżności
Metryki próżności nie są nieszkodliwe. Biorą czas aby ich produkować, czas aby je raportować i – co najzabobniej – dają one zespołom pozwolenie czuć się dobrze wobec pracy, która może nie posuwać biznes do przodu. Zespół, który świętuje 100,000 całkowitych zarejestrowanych użytkowników, to zespół, który nie pyta dlaczego tylko 4,000 z nich jest aktywnych. To pytanie, niepostawione, to różnica między produktem, który rozwiązuje problem retencji w miesiącu 6 a jednym, który go odkrywa w miesiącu 18 gdy trajektoria wzrostu została już napisana.
Praktyczne rozwiązanie to nie zakaz wszystkich metryk wysokopoziomowych z pulpitu – to sparowanie każdej metryki łatwej do świętowania z trudniejszą metryką, która dostarcza kontekst, którego jej brakuje. Całkowici zarejestrowani użytkownicy, sparowani z miesięcznymi aktywnymi użytkownikami i wskaźnikiem aktywacji. Ruch witryny, sparowany ze wskaźnikiem konwersji wersji próbnej. Przychód brutto, sparowany z retencją przychodu netto. Każde sparowanie tworzy napięcie, które uniemożliwia wygodnej metryce wytwarzanie samozadowolenia.
Niektórzy inwestorzy, szczególnie na najwcześniejszych etapach, będą pytać o całkowitych zarejestrowanych użytkowników, pobierania aplikacji lub obserwujących mediów społecznościowych jako dowód trakcji. Warte zrozumienia dlaczego: te metryki są łatwe do porównania na firmach i etapach i inwestorzy bez głęboką wiedzę domenową używają ich jako przybliżonych proxy. Dostarcz je gdy pytany – ale zawsze prowadź przy użyciu metryk działalnych, które mówią rzeczywistą historię. Założyciel, który wyjaśnia "mamy 8,000 zarejestrowanych użytkowników, 3,400 z których jest miesięcznie aktywnych, z retencją 72% na dzień 30" demonstruje poziom jasności operacyjnej, którego sama liczba użytkownika nie może przekazać.
Przesunięcie z metryk próżności do działalnych to tyle samo praktyka kulturowa co techniczna. W FabricLoop, zespoły które dokonały przesunięcia, często utrzymują jedną, wspólaną notatkę, która wymienia oficjalne metryki – te które pojawiają się w cotygodniowym przeglądzie, te które mają właścicieli, te które generują zadania gdy poruszają się w złym kierunku. Ta lista działa jako filtr: gdy ktoś proponuje dodanie nowej metryki do przeglądu, pytanie "czy to przechodzi test trzypytaniowy?" ma wspólny punkt odniesienia. Lista nie musi być długa aby być potężną – często sześć do ośmiu metryk, konsekwentnie śledzone, wystarczają aby trzymać rosnący zespół skierowany we właściwym kierunku.