2022-02-02 20:59:19
У бота @novosterbot
прошло первое большое обновление.
Но вы скорее всего не обратили на это внимание, поэтому я его заострю
1. Бот получил возможность сканировать твиттер - каждому аккаунту присвоен тикер компании, к которой он относится. Появляется пост - сразу в бота летит уведомляшка. Для этого пришлось даже купить отдельный сервер. Основной не тянул нагрузку. Сканируем примерно 5000 аккаунтов. Сам твиттер этому весьма не рад, поэтому юзаем прокси. Многого прокси.
2. Из первого пункта следует второй: Многопоточность (многостаночность, хех)!
Бот теперь не только твиттеры, но и остальные новостные ленты обрабатывает существенно быстрее. Парсинг идет в 100 потоков одновременно (а раньше в один). Чтобы сравнить было-стало, представьте по мощности Порш и самокат.
3. Существенно выше стала распознаваемость. Если раньше бот пропускал новость и я списывал это на «молодость» алгоритма, то теперь любой задача стала больше избавиться от ложных срабатываний, поскольку «чувствительность» в этой версии выкручена на максимум! Вдобавок, планомерно учу понимать его контекст новости. Лучше всего алгоритм видно по тикеру «POLITIKA».
Впереди еще одно большое обновление, которое принесет возможность смотреть историю новостей по любому тикеру и еще пару полезных вещей, в том числе монетизация (да простят меня олды), поскольку мой «сорванец» нехило начал поджирать бюджет.
К слову, перевод текста с английского на русский - это платная штука, мы с вами покупаем её у Яндекса. Но новостной поток настолько плотный, что в сутки переводов получается примерно на 1000 руб.
На текущую секунду и с момента создания, бот уже перевел аж 39 000 новостных статей в поисках упоминаний в них тикеров или компаний!
Базовая функциональность бота навсегда останется бесплатной!
Так будет правильно - пусть служит на благо людям!
1.6K views17:59
T
