​Новость из мира AI. Судя по контексту — очень важная для сооб | SEO без воды

​Новость из мира AI. Судя по контексту — очень важная для сообщества и всего мира в целом, но не увидел, чтобы где-то про это написали

Языковая модель Google под названием PaLM (Pathways Language Model) щас показывает какой-то невероятный перформанс среди всех существующих моделей впринципе. Даже GPT-3 курит в сторонке, а также ее братья GLaM, Megatron-Turing NLG, Gopher, Chinchilla и LaMDA

PaLM обучается на 540+ миллиардах параметров и в данный момент она решила 28 из 29 стандартных NLP задач, например:

— закрытие и завершение предложений (то, что делает Балабола и Сберовский RuGPT-3 (760М параметров))
— задачи на понимание прочитанного в контексте
— задачи на рассуждение на основе здравого смысла
и даже на объяснение смысла шуток (вот результат)

Еще ее заставляют играть в игру угадай фильм по эмодзи (но с подсказками): (Это Валли)

и конечно же ее заставляют писать код на Python, преобразовывать текст в код, переводить один вид кода в другой (С —> )

решать школьные задачки про яблоки

По ссылке есть ПДФ файл с результатами издевок над моделью и это очень сильно. В блоге Гугла пишут, что она даже на плато не вышло, ее мощность зависит напрямую от кол-ва параметров. Завтра это может быть триллион параметров и тогда она и правда заменит маркетологов (наконец-то)