Нейросеть YandexGPT в Алисе научилась поддерживать контекст бе | Tech Crunch

Нейросеть YandexGPT в Алисе научилась поддерживать контекст беседы

Нейросеть, представленная Яндексом 17 мая, с сегодняшнего дня умеет запоминать реплики диалога, а благодаря этому — дополнять тексты по запросу пользователя, переписывать их в нужном стиле и даже задавать встречные вопросы-уточнения.

Память контекста помогает долго совершенствовать ответы, получать от нейросети более полные и точные тексты и улучшать результаты творческих задач, где можно направлять робота в нужную сторону. YandexGPT (YaLM 2.0) держит в памяти до 50 предыдущих реплик беседы (или до 10 тыс. символов).

Для обучения нейросети контексту Яндекс использовал тысячи примеров диалогов, а часть данных была взята из опенсорс-проекта Open Assistant. Тренировка заняла менее трех недель, вся история модели YaGPT детально изложена на Хабре.

Следующие шаги, по словам создателей, — повышение качества датасетов и внедрение нового этапа обучения. Кроме того, новая модель вскоре заработает и в других сервисах компании.

Сейчас давать нейросети задачи можно в Яндекс Браузере, приложении Яндекс, Станциях и телевизорах с Алисой, а также на главной ya.ru по запросу «Давай придумаем».