Как решить, какой релиз достоин проработки, а какой стоит отложить в долгий ящик? Что делать, если вы провели АБ-тест, но важные метрики продукта изменились двояко: одни стали выше в тестовой группе, другие - меньше? Дискуссионные вопросы, которые рано или поздно возникают в продуктовой работе. Возникновение таких вопросов - признак того, что в команде есть культура аналитического принятия решений.
Зачастую за этими вопросами стоят более простые по форме, и в то же время более сложные по содержанию задачи: какие метрики важны для конкретного продукта и какова связь между ними? Чтобы анализ данных и многочисленные счетчики не зря отнимали ресурсы, нужно уметь отвечать на такого рода вопросы.
Занимаясь аналитикой разнообразных продуктов, Елена прошла путь проб и ошибок. Как и большинство продактов, маркетологов и аналитиков, стремилась привести систему метрик в порядок и понять, что же такое продукт с точки зрения аналитики.
Каждая ситуация уникальна, и ни один из клиентов или работодателей, не желал бы, чтобы его секреты оказались предметом чьего-то выступления. И тем не менее ей есть, что вам рассказать.
Обобщая подход к построению прочной системы метрик, в которой решаемы трудные задачи и продуктивны сами измерения, Елена назвала свой метод "Пирамидой метрик".