Получи случайную криптовалюту за регистрацию!

Продукторий Владимира Меркушева

Логотип телеграм канала @vladimir_merkushev — Продукторий Владимира Меркушева П
Логотип телеграм канала @vladimir_merkushev — Продукторий Владимира Меркушева
Адрес канала: @vladimir_merkushev
Категории: Бизнес и стартапы
Язык: Русский
Количество подписчиков: 20.12K
Описание канала:

Взгляд на мир глазами менеджера продукта. Работаю в управлении продуктами уже более 8 лет (Kolesa Group, Avito, Yandex, OLX). Пишу о собственном опыте, делюсь полезными ссылками, делаю фото-репортажи из офисов IT компаний. Живу в Лиссабоне. @mervlad

Рейтинги и Отзывы

2.50

2 отзыва

Оценить канал vladimir_merkushev и оставить отзыв — могут только зарегестрированные пользователи. Все отзывы проходят модерацию.

5 звезд

0

4 звезд

0

3 звезд

1

2 звезд

1

1 звезд

0


Последние сообщения 11

2023-04-01 17:16:07
Подборка лучшего из #producthumor
С 1 апреля!
1.3K views14:16
Открыть/Комментировать
2023-03-31 12:02:21 Разбираем варианты ответов на вопрос про метрики.

Те из вас, кто в первую очередь подумал «А какую гипотезу мы вообще тестируем?», а некоторые даже написали это в комментариях — красавчики Это первый вопрос, который должен задать продакт при разборе любого эксперимента. Что хотим изменить, для какой аудитории и что будем считать успехом?

Но вопрос был «со звёздочкой». Прежде чем разбираться в вариантах, давайте вспомним какие виды метрик бывают в A/B тестах.

Целевая (target) метрика. Это та метрика, на которую направлена наша гипотеза. Именно по ней мы будем считать необходимую аудиторию, длительность теста, доверительные интервалы и статистическую значимость. Целевая метрика может быть только одна. Она не должна быть прямым следствием внесенного изменения (сделали кнопку больше — клики на кпопку). Она должна напрямую влиять на ключевые цели команды и компании (деньги, полезные действия или аудитория)

Вспомогательные (supporting) метрики. Они помогают проверить, что задуманные нами изменения пользовательского опыта работают. Дают опережающие сигналы для ранней обратной связи. Показывают, как изменение повлияло на смежные области продукта.

Контрольные (health) метрики. Они показывают, что тест не сломал случайно что-то в продукте. Чаще всего это технические метрики или метрики, связанные с обращениями пользователей в поддержку. Основной критерий отличия от вспомогательных метрик — мы предполагаем, что контрольные метрики не изменятся в тестовом варианте.

Теперь к нашим вариантам из опроса. Конверсия в покупку — отличная целевая метрика. Конверсия в добавление в корзину — хорошая целевая метрика для определенных гипотез и отличная вспомогательная метрика для любых изменений воронки.

Средний чек и среднее количество товаров в заказе — плохие целевые метрики и хорошие вспомогательные. Основная их проблема в том, что они непрерывные или не-бинарные. Конверсия в покупку может быть только 0 или 1 для каждого посетителя. Такие метрики называют бинарными, возможных значений у них всего два: либо действие произошло, либо нет. Средний чек может иметь огромный разброс и разнообразие значений: суммой покупки посетителя может быть любое число от 0 до X с точностью до центов. Поэтому с такими метриками работать гораздо сложнее — мощность теста всегда ниже, расчёт значимости сложнее, требуются дополнительные условия для обработки аномальных значений.

Вывод: если есть хорошая бинарная метрика, которая отражает поведение пользователя и цели гипотезы — используем её. Только в крайнем случае выбираем в качестве целевой не-бинарную метрику.

#abtesting
1.0K views09:02
Открыть/Комментировать
2023-03-30 18:29:27 Сегодня в рубрике #productquestion хочу вам задать вопрос про метрики для A/B теста. Представьте, что вы делаете изменения для воронки оформления заказа в онлайн магазине. Какую метрику из этих можно использовать для A/B теста как целевую?

Ответы в опрос
Завтра опубликую разбор всех вариантов. Прошлые вопросы можно найти по тегу #productquestion и проверить себя.
1.1K views15:29
Открыть/Комментировать
2023-03-29 15:49:22 ​#productquotes
1.4K views12:49
Открыть/Комментировать
2023-03-28 18:19:27 Кажется, такие вакансии не требуют дополнительной поддержки. Но я всё же хочу поделиться ссылкой.

Яндекс Браузер ищет сильных продактов. Подробнее в посте Вани Замесина, там же ссылка на вакансию. Года три назад я бы сам побежал откликаться.

Если ищете работу — вам сюда: https://t.me/zamesin/1842

#dreamjob
1.2K views15:19
Открыть/Комментировать
2023-03-27 16:48:45 Я очень люблю случайно находить каналы людей, которые являются профессионалами в своей области. Это сразу заметно. Обычно достаточно прочитать несколько постов чтобы понять, что автор разбирается в теме, о которой пишет.

Сегодня хочу порекомендовать один из таких, канал @lingua_strategy — Изучение языка как стратегия. Его ведёт Елена Кочева, сертифицированный коуч ICF, говорит на 5 иностранных языках, имеет 7 лет опыта в ИТ на позициях product analyst и product owner.

В канале Елена делится своим опытом изучения нового иностранного языка в условиях эмиграции и нехватки мотивации. Знакомо? Советую прочитать эти несколько постов, мне они показались очень полезными:

Как правильно учить слова https://t.me/lingua_strategy/66

Уровни мотивации при изучении языка https://t.me/lingua_strategy/198

Chat GPT для изучения языка https://t.me/lingua_strategy/145

Также Елена делится кейсами своих клиентов, среди которых продакты многих известных вам компаний, и советами при подготовке к собеседованию на иностранном языке. Обратите внимание, если улучшение уровня языка для работы есть в ваших планах.

#дружескийпиар
1.4K views13:48
Открыть/Комментировать
2023-03-26 14:18:25Запрыгнуть на поезд

Посмотрел несколько десятков продуктов на базе Chat GPT и ему подобных технологий. Кажется, этот поезд набирает ход и будет ехать ещё долго. Хочу попробовать свои силы. Есть частично проверенная клиентская проблема, выход на целевую аудиторию и идея продукта. Такой AI ассистент в популярной нише с оценкой рынка около $16 млрд.

Есть ли среди моих подписчиков те, кто разбирается в технической стороне генеративного ИИ? Буду рад пообщаться, рассказать идею и вместе подумать про реализуемость. А в случае совпадения интересов поработать вместе над MVP. Пишите на @mervlad

В качестве иллюстрации картинка от Playground AI. Так он видит идею продукта

#startup
1.5K views11:18
Открыть/Комментировать
2023-03-25 11:29:18 ​#producthumor
1.1K views08:29
Открыть/Комментировать
2023-03-24 13:07:59 OKR, которые не будет ненавидеть ваша команда

Отличная статья от Tability, если пропустить всю рекламу их продуктов. Мы, кстати, как-то пробовали вести свои OKR там. Не заметили большой разницы, обычная табличка в Google Sheets справляется не хуже.

Итак, какие ошибки нужно избегать, чтобы OKR помогали вашей команде и компании в целом.

Внедрение OKR с позиции руководства
Польза OKR обычно очевидна для топ менеджмента. Прозрачность, измеримость, понятные критерии оценки эффективности работы. Но исполнители могут воспринимать OKR как ещё один способ контроля. Нужно уделить много внимания на этапе внедрения и показать все плюсы для команды и каждого участника. OKR это способ аргументированно говорить «нет» задачам без цели, понятное владение продуктом, наглядное представление результатов работы каждой команды.

Слишком много целей
Это классическая ошибка в начале работы. Хоть во всех гайдах написано, что целей должно быть 3 на команду и по 3-4 ключевых результата, но мы всегда пытаемся сделать больше. OKR это инструмент фокуса команды на главном. Не надо пытаться добавить в них всё, чем занимается команда.

Непонятные цели
Цель не должна быть слишком конкретной, но в тоже время должен быть понятен результат её достижения. «Внедрить Stripe для приема платежей» плохая цель. «Сделать лучше опыт клиента при совершении платежа» хорошая, при поддержке её правильными ключевыми результатами.

Слишком много времени на подготовку OKR
Не всегда получается выбрать ключевые результаты, которые будут детально количественно описывать достижение цели. И это нормально. Особенно в начале квартала часть целей может не быть покрыта четкими ожиданиями по изменению метрик. Это может занять много времени продакта и аналитиков. Дайте команде свободу начать экспериментировать и добавить более четкие результаты в процессе. Сами целевые метрики, конечно, должны быть в OKR на стадии планирования.

Сложно проводить регулярные проверки OKR
В статье пишут про еженедельные проверки результатов. Я не думаю, что это правильный подход. Но раз в две недели нужно обязательно смотреть на OKR с командой и разбираться в статусе продвижения к целям. Для этого нужно иметь удобный инструмент работы с OKR и убедиться, что они доступны всем в команде. У нас, например, ссылка на актуальный файл с OKR прикреплена к основному чату команды в Slack (там есть функция закладок). Очень удобно и всегда под рукой. Файл с OKR в Google Sheets обычно доступен для редактирования всем на этапе планирования, а потом только продакту и техлиду, для отметок о прогрессе на протяжении квартала.

В статье много полезных ссылок на гайды по подготовке OKR. Добавляйте в избранное, пригодится

И главное, выбор и работа над OKR это процесс. Он требует внимания и усилий. Но это того стоит!

https://www.tability.io/odt-articles/how-to-create-okrs-your-team-wont-hate

#lifehacks #productlinks
1.1K viewsedited  10:07
Открыть/Комментировать
2023-03-22 14:38:32 ​На злобу дня
#producthumor
1.4K views11:38
Открыть/Комментировать