Ок, сегодня будет тема попроще — как могут вредить метрики ;)
Самая простая ошибка: «после не значит вследствие». Сделали что-то в продукте — изменилась метрика — засчитали себе win. Подкрутили еще — метрика просела — lose. Можно ли на этом основании делать какие-то выводы? Кажется, что «да», а на самом деле «пока не понятно».
В самой первой главе в Симулятора (@oleg_gpio) есть пара хороших задач про понимание, где причинно-следственная связь, а где только возможная корреляция. По мне так очень недооцененное знание, особенно в приложении к работе с метриками.
Связанная ошибка — считать, что изменения метрики что-то подтверждают. Мне кажется, что они всего лишь дают довольно слабые дополнительные свидетельства.
В первом случае вы себя убеждаете в собственной правоте (подкрепляете иллюзии). Во втором — продолжаете осторожно повышать уровень уверенности в том, что проверяемая модель описывает реальность. Для первой задачи обычно хватает одного наблюдения, для второй точно нужна их серия.
Третья ловушка — слишком внимательно смотреть на метрики и слишком сильно реагировать на их изменения. Довольно очевидно, как это может привести к переключению в исключительно реактивный режим.
Просело количество новых посетителей на сайте, начали думать как поправить рекламу; упал средний чек, начали думать про апсейл; увеличился отток, начали думать, какую новую фичу запилить, чтобы она повысила ретеншен.
Все это время уровень конверсии из регистрации в платящих клиентов никак не менялся, поэтому про него и не думали.
Задачи, которые кажутся срочными, легко и естественно вытесняют задачи, которые на самом деле являются важными. Так устроен наш мозг — он с радостью реагирует на актуальные стимулы, тут же забывая о более далекой перспективе.
Проактивный режим, на мой взгляд, включается, только когда мы начинаем регулярно задавать себе вопросы про будущее.
В таком режиме, к вопросу «Сколько новых клиентов пришло в прошлом месяце?» добавляется не только вопрос «Что нам сделать чтобы привести больше клиентов в следующем?», но и такие вопросы как «Где у нас основные точки для роста?» и «Чем мы сейчас не занимаемся, а стоило бы?»
«Закопавшись в операционке, забыли про стратегию», — ровно об этом. Слишком пристальное наблюдение за метриками легко провоцирует первое и вполне может вытеснять второе.
Обо всем этом можно было бы и не писать, но метрики настолько полезная штука, что лишний раз вспомнить/проговорить потенциальные риски, которые с ними связаны, — кажется никогда не повредит.

• • •

Missing some Tweet in this thread? You can try to force a refresh
 

Keep Current with Менеджер продукта

Менеджер продукта Profile picture

Stay in touch and get notified when new unrolls are available from this author!

Read all threads

This Thread may be Removed Anytime!

PDF

Twitter may remove this content at anytime! Save it as PDF for later use!

Try unrolling a thread yourself!

how to unroll video
  1. Follow @ThreadReaderApp to mention us!

  2. From a Twitter thread mention us with a keyword "unroll"
@threadreaderapp unroll

Practice here first or read more on our help page!

More from @produnderhood

Jan 29, 2022
Как на собеседовании на продакта отвечать на вопрос "Как бы вы улучшили %product%?". Тред.
Например "How would you improve Google Maps?". Не обязательно что гугл будет вас спрашивать про свои продукты. Не обязательно та же индустрия, куда вы идёте. Продукт может быть любой.
Серебряной пули нет, однако есть список бест практис, рекомендуемых к применению.

Фреймворк ниже — это *грубые* и *широкие* мазки. Они описывают ключевые шаги, необходимые для улучшения продукта.

Судя по мок интервью и фидбекам, этот фреймворк использует большинство.
Read 35 tweets
Jan 28, 2022
Какие вопросы чаще всего задают на продакт интервью прямо сейчас? Тред.
Во всех странах/компаниях/командах разная культура найма. Кому-то достаточно пары звонков, кто-то попросит поговорить еще и с EMои, аналитиком, маркетологом, СЕО и бог знает с кем.
Вопросы из этого треда покрывают большую часть компетенций, которую у вас будут проверять. Однако это не означает, что в реальности будут спрашивать их все — всё зависит от позиции, на которую вы идёте.
Read 10 tweets
Jan 27, 2022
На собеседовании на продакта вам будут задавать вопросы из списка ниже — тут 22 самых популярных. Все они давно известны, лучшая структура ответа давно подобрана.
Разумеется, в реальности будет что-то еще. Типа "Привет, как прошли выходные?", "Остались ли у вас еще вопросы?", хаха
Все проводят интервью по-разному, так что вероятно вас спросят или частный случай из списка ниже, или какой-нить внутряк из индустрии. Так или иначе эти 22 вопроса, на мой взгляд, покрывают практически всё, что от вас хотят услышать.
Read 30 tweets
Jan 26, 2022
Советую глянуть канал Exponent, где продакты из Гугла, Фейсбука и прочих участвуют в мок интервью youtube.com/c/ExponentTV/v…. В реплаях оставлю пару интересных примеров.
How would you design a product around movies for Facebook?
How would you improve Instagram stories?
Read 4 tweets
Jan 26, 2022
Итак, переходим к интересному: что такое мок интервью и почему всем стоит это попробовать.
Утренний опрос показал, что среди 150 проголосовавших 2/3 не знают о мок интервью, 1/4 предпочитают не пробовать, 9 нашли это полезным и только 2 бесполезным. Это хороший результат :)
Мок интервью — это имитация собеседования в тренировочных целях, когда два продакта задают друг другу вопросы с *реальных интервью* и помогают разобрать ошибки. Почему это так ценно?
Read 14 tweets
Jan 25, 2022
Сопроводительное письмо и зачем его вообще писать.
По моему опыту без сопроводительного письма конверсия в ответ рекрутёра сильно ниже, чем с.
Письмо лучше писать всегда заново и под конкретную позицию/компанию. Это, конечно, большой геморрой, потому что отнимает уйму времени, хоть со временем и набиваешь руку.

Однако это помогает пройти через второй фильтр — человека.
Read 13 tweets

Did Thread Reader help you today?

Support us! We are indie developers!


This site is made by just two indie developers on a laptop doing marketing, support and development! Read more about the story.

Become a Premium Member ($3/month or $30/year) and get exclusive features!

Become Premium

Don't want to be a Premium member but still want to support us?

Make a small donation by buying us coffee ($5) or help with server cost ($10)

Donate via Paypal

Or Donate anonymously using crypto!

Ethereum

0xfe58350B80634f60Fa6Dc149a72b4DFbc17D341E copy

Bitcoin

3ATGMxNzCUFzxpMCHL5sWSt4DVtS8UqXpi copy

Thank you for your support!

Follow Us!

:(