2020-09-28 18:00:09
#РазговорилисьСегодня о проверке гипотез и измерении изменений.
Началось всё с того, что ЦОДД перерисовал у нас в квартале разметку. Там, где были две полосы, стала одна. На весьма загруженном перекрестке теперь три потока по две полосы сливаются всего в одну (!). В том числе, потому что рядом разворотный круг нескольких маршрутов. Понятно, что мы быстро подключили мундепов и СМИ и есть шанс отката изменений взад, но заметка не совсем об этом.
Разберем это событие с точки зрения создания продукта.
Итак, мы хотим изменить продукт. В случае ЦОДД — дорожную разметку.
Для начала нужно определиться с ключевыми метриками, которые покажут, как повлияли изменения. В нашем случае, такими метриками могут быть:
1. пропускная способность перекрестка по основным направлениям
2. количество скопившихся на перекрестке автобусов (обычно их 1-2, не больше).
3. длина потока машин, въезжающих на перекресток с второстепенной дороги.
Затем чтобы понять, насколько изменения будут удачные, мы можем сделать три вещи.
1.
Проанализировать текущее поведение пользователей (транспортные потоки на перекрестке).
Измерить пропускную способность (благо камер полно), и смоделировать изменение "на бумаге".
2.
Провести эксперимент, проверить гипотезу.
Не перерисовывая полосы, убрать одну из них (например, сделав видимость ремонта). Посмотреть в течение 1-2 дней, как изменился трафик.
3.
Сделать изменение в продукте без анализа и проверки гипотез.
Этот вариант самый плохой — требует усилий (нанести разметку), сложно быстро откатить изменения.
Казалось быть, не можешь пойти по первому варианту, проведи эксперимент. «Но Иван-дурак, как истинный дурак, не сделал этого... а вытащил из отбоя козырного туза» ( КВН, БГУ) и пошел по третьему варианту.
В итоге, все метрики просели:
- пропускная способность резко уменьшилась (те, кому направо, ждут стрелку. Те, кому прямо и налево, блокируют поворачивающих направо).
- количество скопившихся автобусов достигло 7-9.
- длина потока на второстепенной дороге с десятков метров выросла до нескольких сотен.
Пользователи недовольны, жалобы полетели, ситуацию просто так не замять. И надо откатывать изменения.
Не берите пример с ЦОДД, проверяйте гипотезы малой кровью.
449 viewsedited 15:00