С простыми экзаменационными вопросами ChatGPT справляется не хуже студентов

VC.RUHi-Tech

«Экзамен сдал, но на троечку»: как чат-бот ChatGPT пытался выпуститься из университетов

Спойлер: с трудом. Но учёные отмечают, что с простыми вопросами он справляется не хуже студентов.

Полина Лааксо

1280
Источник: Showmetech

Научные сотрудники юридического факультета Университета Миннесоты решили проверить, сможет ли чат-бот ChatGPT сдать экзамены наравне со студентами. Задач было две: понять, на что способен расхваленный ИИ, и подумать, как его умения могут упростить жизнь ученикам и преподавателям.

Из дисциплин выбрали четыре: конституционное право, гражданско-правовые правонарушения, налогообложение и трудовые гарантии и компенсации. Для первых двух необходимы знания с первого курса обучения, остальные — элективные предметы для продвинутых.

Экзамены предполагали как выбор правильного варианта ответа на закрытые вопросы, так и краткие и развёрнутые эссе на заданные темы. В двух были ограничения по длине ответа, а в тесте по конституционному праву студентов также обязали ссылаться на источники.

Всего чат-бот ответил на более чем 95 вопросов с вариантами ответов и решил 12 задач на рассуждение. После этого один из профессоров оформил ответы так, будто они принадлежат человеку, и перемешал их с уже обезличенными результатами настоящих студентов. Вот как ChatGPT справился:

  • Конституционное право — «хорошо», 36 место из 40 сдававших.
  • Трудовые гарантии и компенсации — «хорошо с минусом», 18 из 19.
  • Налогообложение — «удовлетворительно с минусом», 66 из 67.
  • Гражданско-правовой деликт — «удовлетворительно с минусом», 75 из 75.

«Удовлетворительно», она же «С» — это не худшая оценка в образовательной системе США: после неё идут ещё две отметки. Так что бот получил проходные баллы и в теории мог бы даже выпуститься. Однако авторы исследования замечают: он оказался в рядах худших, и ему, скорее всего, назначили бы академический испытательный срок — чтобы убедиться, что он старается.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Изучают детскую анимацию, картины и тренды в TikTok: как институт Pantone выбирает «цвет года» и зачем Изучают детскую анимацию, картины и тренды в TikTok: как институт Pantone выбирает «цвет года» и зачем

«Тот, кто управляет цветом, управляет миром»

VC.RU
Каждый день вы должны... заправлять постель. Вот почему ученые настаивают на этом Каждый день вы должны... заправлять постель. Вот почему ученые настаивают на этом

Необходимость в застилании постели видят не специалисты по гигиене, а психологи

ТехИнсайдер
Как ИИ копирует голоса и помогает мошенникам вымогать деньги Как ИИ копирует голоса и помогает мошенникам вымогать деньги

Как мошенники используют уникальную способность нейросетей к копированию голоса

Inc.
Гастрит с довеском Гастрит с довеском

«Гастрит у ребенка, да еще хронический – неужели такое может быть?»

Лиза
7 вещей, которые никогда не делают счастливые люди 7 вещей, которые никогда не делают счастливые люди

Эксперт по счастью: 7 вещей, которые никогда не делают счастливые люди

Inc.
«Флейшман в беде»: лучший сериал о кризисе среднего возраста и переживании развода «Флейшман в беде»: лучший сериал о кризисе среднего возраста и переживании развода

«Флейшман в беде» — одно из лучших описаний банальной семейной драмы

Forbes
Что такое бобы эдамаме и почему тебе стоит хотя бы раз их попробовать Что такое бобы эдамаме и почему тебе стоит хотя бы раз их попробовать

Бобы эдамаме: приятный вкус, жизнерадостно зеленый цвет и белок

VOICE
Гаутам Адани: как сын торговца текстилем стал миллиардером благодаря связям с властью Гаутам Адани: как сын торговца текстилем стал миллиардером благодаря связям с властью

Гаутам Адани накопил миллиарды благодаря давним связям с премьер-министром Моди

Forbes
Возвращение инспектора Ребуса в романе Иэна Рэнкина «В доме лжи» Возвращение инспектора Ребуса в романе Иэна Рэнкина «В доме лжи»

Отрывок из нового детектива из серии об эдинбургском инспекторе Ребусе

СНОБ
Мария Куликова: «Я очень изменилась, всегда весело расплескивала себя, а сейчас нет» Мария Куликова: «Я очень изменилась, всегда весело расплескивала себя, а сейчас нет»

За то время, пока создавался «Склифосовский», многое случилось

Караван историй
Преодоление раскисшего просёлка. Полезные советы Преодоление раскисшего просёлка. Полезные советы

Как правильно использовать рисунок протектора грязевой резины

4x4 Club
Ла Монстра: как девочка весом 70 килограммов превратилась в живую игрушку для испанского короля Карла II Ла Монстра: как девочка весом 70 килограммов превратилась в живую игрушку для испанского короля Карла II

Каково это весить 70 килограммов, когда тебе всего шесть лет?

ТехИнсайдер
Оценка социального возврата на инвестиции (SROI) на примере проекта «Начни свое дело» | Assessment of the Social Return on Investment (SROI), Case: Start Your Own Business Project Оценка социального возврата на инвестиции (SROI) на примере проекта «Начни свое дело» | Assessment of the Social Return on Investment (SROI), Case: Start Your Own Business Project

Подход к оценке социального возврата на инвестиции используется во всем мире

Позитивные изменения
Исследование трансгенных муравьев показало, как мозг воспринимает тревожные запахи Исследование трансгенных муравьев показало, как мозг воспринимает тревожные запахи

Обработка запаха, сообщающего об опасности, находится в 4-х "клубочках" мозга

ТехИнсайдер
Renault ушел с «АвтоВАЗа»: что он после себя оставил и какие перспективы у автозавода Renault ушел с «АвтоВАЗа»: что он после себя оставил и какие перспективы у автозавода

Как сейчас живут «Автоваз» и Тольятти?

Forbes
О чем молчат женщины О чем молчат женщины

Чего и почему чаще всего боятся женщины

Лиза
Как выглядел обладатель знаменитого Как выглядел обладатель знаменитого

Иерихонский череп обрел новое лицо благодаря новейшим методам реконструкции

ТехИнсайдер
Когда в России начали колядовать? Когда в России начали колядовать?

Колядование — старинный обряд, но где и как он возник

Культура.РФ
«Фандорин. Азазель»: что не так с новой экранизацией известного романа Бориса Акунина «Фандорин. Азазель»: что не так с новой экранизацией известного романа Бориса Акунина

Почему «Фандорин. Азазель» получился довольно скучным и затянутым

Forbes
Движение за новую деревню | The New Village Movement Движение за новую деревню | The New Village Movement

Южнокорейский опыт в развитии сельских территорий

Позитивные изменения
Города будущего в России | Cities of the Future in Russia Города будущего в России | Cities of the Future in Russia

Каким видит концепт Городов будущего в России Алексей Рыжков

Позитивные изменения

Нонна Голикова рассказывает о своем общении с супругой Михаила Булгакова

Коллекция. Караван историй
Аму Хаджи: человек, который не мылся 67 лет Аму Хаджи: человек, который не мылся 67 лет

Аму Хаджи занесен в книгу рекордов Гиннеса

ТехИнсайдер
Секс, маргиналы и апокалипсис: 20 лучших британских сериалов последних лет Секс, маргиналы и апокалипсис: 20 лучших британских сериалов последних лет

Собрали для вас подборку сериалов из Великобритании

Правила жизни
План на год План на год

Есть международные дни здоровья, чтобы напомнить нам о профилактике

Лиза
Викинги целое столетие не могли победить небольшой монастырь в Кенте Викинги целое столетие не могли победить небольшой монастырь в Кенте

Монастырь Лайминдж сопротивлялся разрушению викингами почти столетие

ТехИнсайдер
10 удивительных фактов об Эми Уайнхаус — спорим, ты не знала 10 удивительных фактов об Эми Уайнхаус — спорим, ты не знала

Эми Уайнхаус не всегда хотела быть певицей, а первую татуировку сделала в 14 лет

VOICE
Как избавиться от ментальных паразитов: 8 шагов — начните черпать ресурс изнутри Как избавиться от ментальных паразитов: 8 шагов — начните черпать ресурс изнутри

Самые простые способы самопомощи для пополнения жизненных ресурсов

Psychologies
Девушка стала ни то слоном, ни то алигатором. Удивительная болезнь! Девушка стала ни то слоном, ни то алигатором. Удивительная болезнь!

Болезнь сделала немку Сьюзи похожей на персонажа из фантастического фильма

ТехИнсайдер
Коучинг или шарлатанство: как отличить специалиста, способного помочь, от человека, который пытается на вас нажиться Коучинг или шарлатанство: как отличить специалиста, способного помочь, от человека, который пытается на вас нажиться

Что такое настоящий коучинг и как отличить мошенников от адекватных специалистов

Psychologies
Открыть в приложении