​​«Яндекс» тут под вечер пятницы выкатил, похоже, чуть раньше | Денискины рассказы

​​«Яндекс» тут под вечер пятницы выкатил, похоже, чуть раньше времени свою нейронку для продолжения любых текстов. Называется YaLM (Yet another Language Model), сделана на Transformer-модели (как и популярные GPT-2/3), и для демонстрации возможностей запилили сервис с идеальным названием «Зелибоба», куда можно написать любой текст и нейросеть его продолжит.

Страница просуществовала полтора часа, сейчас почему-то выдаёт 404 (в «Яндексе» говорят, что поторопились открыть), но когда снова откроют — потыкаться самому весело. Вот тут есть примеры продолжений анекдотов категории /b, на iPhones.ru половину новости написала эта нейронка.

Для обучения использовали русскоязычные тексты: статьи из Википедии, книги, посты в социальных сетях и новостные заметки. Вроде как позже расскажут, в каких сервисах будут использовать такой алгоритм генерации текстов — наверное, речь про «Яндекс.Маркет» и их нейросетевые «умные» отзывы, о которых компания рассказала в мае.

Ну и вот в качестве затравочки один из примеров. Жиза.