Когда кажется, что циферки бегут не так быстро, как должны — и | 4U | Чат-боты

Когда кажется, что циферки бегут не так быстро, как должны — иногда это не кажется

Вчера мы поняли, что неверно считаем статистику использования наших ботов. Когда исправили ошибку, отображаемое количество пользователей выросло на 400 тысяч — до 1 842 000, а число сообщений вообще увеличилось почти в 2 раза: с 24 до 43 миллионов!

Конечно, мы не нашли столько людей и сообщений на ровном месте: они спокойно лежали в наших базах, а мы неверно оценивали их количество

Заодно расскажем о том, как мы считаем эти значения:
• Сообщения: здесь мы учитываем сообщения, которые пользователь отправил в лс боту, а также сообщения, отправленные с помощью инлайн-режима. Сообщения из групп с нашим ботом не учитываются
• Пользователи: тут мы считаем людей, отправивших хотя бы 1 сообщение нашему боту или с его помощью. Мы не считаем пользователями тех, кто сделал запрос к инлайн боту, но не отправил ни одного сообщения

Техническая информация: да, кому-то это интересно))
Мы храним неагрегированные данные о событиях в базе данных ClickHouse. Пересчитывается статистика каждую минуту. Но в канале вы видите обновления каждые 5 секунд, а на сайте — еще чаще: промежуточные точки статистики мы генерируем с помощью линейной интерполяции