​​В Японии нейросеть обучили переводить язык жестов в текст | Дуров позвонит

​​В Японии нейросеть обучили переводить язык жестов в текст

Японский холдинг SoftBank разрабатывает приложение на основе искусственного интеллекта, которое позволит переводить язык жестов в текст на экране смартфона или ноутбука в режиме реального времени.

В основе данного проекта — система перевода жестов в текст, которая используется во время видеоконференций. Сообщается, что в настоящее время она способна перевести на японский язык до 5 тыс. знаков.

SoftBank начал первые исследования в 2017 году, совместно с Токийским университетом электросвязи. В разработке ИИ-переводчика с языка жестов также принял участие японский стартап ABEJA, специализирующийся в области искусственного интеллекта.

Для разработки приложения алгоритмы ABEJA изучили 50 тыс. видео, в которых используется язык жестов, чтобы обнаружить характерные движения для каждого подписанного слова.

Сейчас компания работает над повышением точности системы, — отмечается, что алгоритм должен научиться считывать более 100 вариаций одного жеста на слово.
В настоящее время данная услуга предоставляется на пробной основе медицинским организациям в Токио и Фукусиме. Предполагается, что открытый доступ к сервису откроется в 2024 году. В будущем SoftBank планирует разработать подобные системы на других языках.
@durovtv