ChatGPT, похоже, можно использовать как диагностический инстру | TechSparks

ChatGPT, похоже, можно использовать как диагностический инструмент качества преподавания: насколько тестирование в разных вузовских курсах реально проверяет способность студентов думать (то есть насколько преподаватель способен сформулировать вопросы или задания, требующие умственных усилий и владения материалом).
Команда исследователей из ОАЭ собрала тестовые вопросы по ряду дисциплин, прогнала их через ChatGPT, перемешала с реальными ответами студентов на зачетах и отправила на оценку тем сертифицированным спецам, кто оценивает ответы в университете, не раскрывая происхождение ответов.
В результате по 9 курсам из 32 ChatGPT выступил не хуже студентов, а подчас и сильно лучше. Например, по курсу “Введение в публичную политику” средняя оценка чат-бота вдвое превзошла таковую для белковых студентов.
“ChatGPT performed much better on questions that required information recall, but performed poorly on questions which required critical analysis” — то есть действительно хорошо проверяет качество экзаменационных вопросов.