Co zrobisz na miejscu PMa w Medium?

Jaką wybrać JEDNĄ KLUCZOWĄ METRYKĘ dla Medium?

Po wakacyjnej przerwie (choć ja jeszcze smażę się na Bali 😎) trochę inny format newslettera - poćwiczmy produktową intuicję.

Poniżej znajdziesz realne case study produktu (a przynajmniej oparte na źródle ;)) opisuje konkretną sytuację i wyzwanie, przed którym stanęli produktowcy z Medium. Wybierz, co Ty byś zrobił na ich miejscu, a potem zobacz co realnie się wydarzyło.

BTW. Zwolniły się 4 bilety na jesienną edycję Product Management Academy, na której razem z Olgą Springer (Senior PM w Atlassianie) pokazujemy nasz warsztat pracy product managera. Jest też wiele case study :). Zapraszam :).

🛠️ Case Study: Jaką metryką oceniać wpływ nowych funkcji w Medium?

Medium to jak wiesz popularna platforma do publikowania treści, założona przez Evana Williamsa. Zmieniła sposób, w jaki autorzy dłuższych tekstów mogą łatwo publikować i zarabiać na swoim treściach w internecie.

W przeciwieństwie do swoich poprzedników, Bloggera i Twittera, Medium oferuje dużo przyjemniejsze doświadczenie czytelnicze, a autorom łatwą publikację dłuższych treści. Sam zresztą kiedyś z niego korzytsałem.

Jedną z wyróżniających platformę funkcji jest „Highlight”, która pozwala użytkownikom zaznaczać i dzielić się konkretnymi fragmentami postów.

Jaką metryką oceniać wpływ nowych funkcji w Medium?

Medium wdrożyło tę funkcję i stanęło przed klasycznym wyzwaniem: Jak określić, czy funkcja „Highlight” ma pozytywny wpływ na ich produkt. Na jaką metrykę długoterminowo patrzeć?

Zespół produktowy potrzebował metryki, która dokładnie odzwierciedli, czy funkcja dodaje rzeczywistą, podstawową wartość do doświadczeń użytkowników. Chciał skupić się tylko na JEDNEJ KLUCZOWEJ METRYCE.

Metryki, które zespół rozważał:

  • Retention Time (RT): Czas spędzony przez użytkowników na platformie.

  • Social Shares (SS): Liczba udostępnień highlightów w mediach społecznościowych.

  • Total Time Reading (TTR): Szacunkowy czas spędzony na czytaniu postów

Na co Ty sie decydujesz?

🔍 Odpowiedź: co wybrało Medium?

W 2013 roku Medium do określania wpływu ficzerów na produkt wybrało jako główną metrykę:

..

.

Total Time Reading (TTR).

Dlaczego TTR? Szukali metryki, które najlepiej będzie pokazywać zaangażowanie użytkownika w produkt w kontekście aplikacji, którą jest Medium. Takiej, która najlepiej odzwierciedla rzeczywistą wartość dla użytkowników.

Jeśli metryka zaangażowania użytkownika rośnie - można przyjąć, że użytkownik otrzymuje coraz więcej wartości z produktu (bo jak bym nie dostawał wartości, to by nie wracał i nie korzystał więcej z produktu).

W przypadku Medium, tę podstawową wartość użytkownik otrzymuje gdy realnie czyta artykuł. Stąd wybór padł na Total Time Reading (TTR). Od tamtej pory, każdy ficzer związany z artykułami (w tym właśnie funkcja „highlight”) oceniany jest pod względem wpływu na TTR, jako JEDNEJ KLUCZOWEJ METRYCE, które ma znaczenie (tzw. „one metric that matters”).

Dlaczego nie Retention Time / Social Shares?

TTR bezpośrednio odzwierciedla głębokość interakcji z treściami, a to jest podstawowa wartość, którą przekazuje Medium:

  • Retention Time - jest bardziej generyczne. Oczywiście na pewno warto ją mierzyć, ale dotyczy on całej platformy i można tę metrykę podbijać nie tylko skupiając się na usprawnianiu najważniejszej wartości dla usera - czytaniu. Jeśli chcemy, żeby zespół był bardziej skupiony, TTR lepiej będzie pokazywało, nad czym przede wszystkim chcemy pracować.

  • Social Shares - to może mierzyć wiralowość artykułów, ale nie mierzy podstawowej wartości: „czytania”. Co więcej, jeśli postawimy Social Shares jako najważniejszą metrykę - łatwo wyobrazić sobie, w którą stronę prawdopodobnie pójdzie produkt - medium pełnego kontrowersyjnych, krzykliwych opinii, które każdy chce share’ować.

Jak Medium tłumaczy wybór TTR?

Wybór w kilku słowach tłumaczy Pete Davies, ówczesny Product Lead w Medium:

Nie brakuje dyskusji na temat tego, co dokładnie oznacza "zaangażowanie" i jak można je mierzyć — jeśli w ogóle można. Oczywiście zależy to od platformy i tego, jak oczekujesz, że użytkownicy będą na niej spędzać czas.

  • Dla stron z treściami (np. New York Times) chcesz, aby ludzie czytali. A potem wracali, żeby czytać więcej.

  • Serwis matchmakingowy (np. OkCupid) próbuje dopasować partnerów. Liczba udanych dopasowań daje dobry obraz kondycji biznesu.

A co z platformą, która łączy obie te idee? Czasami opisuję Medium jako "matchmaking treści" — chcemy, żeby ludzie pisali, a inni, żeby czytali świetne posty. To działa dwustronnie: jedno nie może istnieć bez drugiego.

Co jest główną aktywnością, która łączy te dwie strony? Czytanie. Czytelnicy nie tylko przeglądają stronę ani nie klikają w reklamy. Oni czytają. Na Medium optymalizujemy czas, który ludzie spędzają na CZYTANIU.

Total Time Reading (TTR) to metryka, która pomaga nam zrozumieć, jak platforma Medium działa jako całość. Możemy analizować ten wskaźnik na wiele sposobów (np. zalogowani vs. niezalogowani, nowe posty vs. stare, itd.)”

📚 Źródła Case Study:

Daj znać co myślisz o takiej formie Case Study :)

Reply

or to participate.