Может ли ChatGPT сдать экзамены лучше студента — исследование
Если экзаменатор не видит, кто перед ним, ему будет не легко отличить искусственного студента от настоящего.
Искусственный интеллект может сдавать университетские экзамены не хуже, а то и лучше настоящих студентов. Причем, как правило, проверяющие не способны отличить искусственные мозги от настоящих.
К таким выводам пришли специалисты из Университета Рединга, использовав для проверки бот ChatGPT, пишет «Закон и Бизнес» со ссылкой на Би-Би-Си.
С его помощью они сконструировали 33 фальшивых «студента» и отправили их сдавать экзамены по психологии для желающих получить степень бакалавра в этом же университете.
По данным исследователей, результаты ненастоящих «студентов» в среднем были на полбалла выше, чем у их реальных сверстников. А эссе, написанные искусственным интеллектом, практически невозможно отличить от написанных живыми людьми: 94% из них не вызвали подозрений у проверяющих.
Авторы работы, опубликованной в журнале Plos One, отмечают, что в реальности, вероятно, удастся выявить еще меньший процент работ, выполненных при помощи ИИ. Показатель в 6% они считают завышенным.
«Это особенно тревожно, поскольку работы, выполненные с помощью ИИ, получали более высокие оценки, чем реальные работы студентов, — говорится в исследовании. — Таким образом, студенты могут безнаказанно списывать с помощью ИИ — и при этом получать более высокие оценки, чем те, кто сдавал честно».
Доцент Питер Скарф и профессор Этьен Рош, руководившие исследованием, заявили, что полученные ими результаты должны стать «тревожным сигналом» для преподавателей всего мира.
Правда, отмечают ученые, результаты фальшивых «студентов» превзошли результаты настоящих только на первых двух курсах. При этом настоящие студенты показали более высокие результаты в экзаменах на третьем курсе.
«Это согласуется с представлением о том, что в нынешней инкарнации ИИ испытывает трудности с более абстрактными рассуждениями», — говорят исследователи.
Ученые уже высказывают опасения по поводу влияния искусственного интеллекта на образование, а Университет Глазго недавно вновь ввел очные экзамены по одному из курсов.
В начале года газета Guardian сообщила о другом исследовании, которое показало, что большинство студентов используют программы искусственного интеллекта при написании эссе, но только 5%, по их собственному признанию, просто вставляют в свои работы текст, созданный ИИ, никак его не редактируя.