С простыми экзаменационными вопросами ChatGPT справляется не хуже студентов

VC.RUHi-Tech

«Экзамен сдал, но на троечку»: как чат-бот ChatGPT пытался выпуститься из университетов

Спойлер: с трудом. Но учёные отмечают, что с простыми вопросами он справляется не хуже студентов.

Полина Лааксо

1280
Источник: Showmetech

Научные сотрудники юридического факультета Университета Миннесоты решили проверить, сможет ли чат-бот ChatGPT сдать экзамены наравне со студентами. Задач было две: понять, на что способен расхваленный ИИ, и подумать, как его умения могут упростить жизнь ученикам и преподавателям.

Из дисциплин выбрали четыре: конституционное право, гражданско-правовые правонарушения, налогообложение и трудовые гарантии и компенсации. Для первых двух необходимы знания с первого курса обучения, остальные — элективные предметы для продвинутых.

Экзамены предполагали как выбор правильного варианта ответа на закрытые вопросы, так и краткие и развёрнутые эссе на заданные темы. В двух были ограничения по длине ответа, а в тесте по конституционному праву студентов также обязали ссылаться на источники.

Всего чат-бот ответил на более чем 95 вопросов с вариантами ответов и решил 12 задач на рассуждение. После этого один из профессоров оформил ответы так, будто они принадлежат человеку, и перемешал их с уже обезличенными результатами настоящих студентов. Вот как ChatGPT справился:

  • Конституционное право — «хорошо», 36 место из 40 сдававших.
  • Трудовые гарантии и компенсации — «хорошо с минусом», 18 из 19.
  • Налогообложение — «удовлетворительно с минусом», 66 из 67.
  • Гражданско-правовой деликт — «удовлетворительно с минусом», 75 из 75.

«Удовлетворительно», она же «С» — это не худшая оценка в образовательной системе США: после неё идут ещё две отметки. Так что бот получил проходные баллы и в теории мог бы даже выпуститься. Однако авторы исследования замечают: он оказался в рядах худших, и ему, скорее всего, назначили бы академический испытательный срок — чтобы убедиться, что он старается.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

«Не хочу провести жизнь за компом»: белоруска уволилась из Google, чтобы путешествовать «дикарём» «Не хочу провести жизнь за компом»: белоруска уволилась из Google, чтобы путешествовать «дикарём»

Как Виктория Пилинко с одним рюкзаком отправилась в путешествие по миру

VC.RU
Взаимо(не)выгодные отношения: стоит ли давать деньги в долг — личный опыт Взаимо(не)выгодные отношения: стоит ли давать деньги в долг — личный опыт

Можно ли давать деньги в долг и сохранить хорошие отношения?

Psychologies
Не работает тачпад на ноутбуке: причины и способы решения проблемы Не работает тачпад на ноутбуке: причины и способы решения проблемы

Что делать, если перестал работать тачпад на ноутбуке с Windows

CHIP
Ген, найденный у долгожителей, омолаживает сердце на 10 лет Ген, найденный у долгожителей, омолаживает сердце на 10 лет

Ученые обнаружили полезную мутацию, которая задерживает старение сердца

ТехИнсайдер
Как кофеин влияет на мозг и тело: неожиданные факты Как кофеин влияет на мозг и тело: неожиданные факты

Исследования выявили ряд интересных фактов, связанных с кофеином

Psychologies
Эта девушка выжила в трех кораблекрушениях, включая «Титаник» Эта девушка выжила в трех кораблекрушениях, включая «Титаник»

История Вайолетт Джесопп: жизнь нередко оказывается покруче любого сценария

VOICE
Софья Евстигнеева: Софья Евстигнеева:

Софья Евстигнеева не представляет жизни без театра и очень любит съемки в кино

Коллекция. Караван историй
Как перестать бояться и начать коллекционировать искусство Как перестать бояться и начать коллекционировать искусство

Личная коллекция искусства — это привилегия узкого круга людей?

СНОБ
8 неожиданных методов использования горчичного порошка в быту: полезные советы для дома и дачи 8 неожиданных методов использования горчичного порошка в быту: полезные советы для дома и дачи

Горчичный порошок сделает все, что угодно!

ТехИнсайдер
Четыре случая, когда обвинения партнера несправедливы: говорят мужчины Четыре случая, когда обвинения партнера несправедливы: говорят мужчины

Мужчины объясняют возможную мотивацию своих поступков

Psychologies
Незабываемый 2012-й Незабываемый 2012-й

Сомелье о том, как «великий урожай» 2012 года изменил российское виноделие

СНОБ
«Фундамент» города будущего: ключевые тренды и подходы к проектированию | The “Foundation” of the City of the Future: Key Trends and Design Approaches «Фундамент» города будущего: ключевые тренды и подходы к проектированию | The “Foundation” of the City of the Future: Key Trends and Design Approaches

Какими могут быть подходы к разработке концепций Города будущего?

Позитивные изменения
Какие животные переживут глобальное потепление Какие животные переживут глобальное потепление

Какие животные смогут приспособиться к глобальному потеплению и выжить?

ТехИнсайдер
Мировое поголовье паразитов резко сокращается — но это не очень хорошие новости Мировое поголовье паразитов резко сокращается — но это не очень хорошие новости

Не все паразиты опасны, и даже им порой нужна наша защита

ТехИнсайдер
10 книг для легкого чтения в праздники 10 книг для легкого чтения в праздники

Книги, с которых стоит начать год

Правила жизни
«Кто дарит жизнь — дарит смерть»: как женщины воспринимают старение матери «Кто дарит жизнь — дарит смерть»: как женщины воспринимают старение матери

Как принять старение своей матери?

Psychologies
Все дело в пятке: за что мода полюбила мюли? Все дело в пятке: за что мода полюбила мюли?

Почему все полюбили расслабленную обувь без задника?

Правила жизни
Inc. Адаптация Inc. Адаптация

Как сохранить устойчивость разума и тела в кризисное время

Inc.
Их же оружием: как ликвидировали хакерскую группировку вымогателей Hive Их же оружием: как ликвидировали хакерскую группировку вымогателей Hive

В области борьбы с киберпреступностью прорыв: как боролись с группировкой Hive

Forbes
Ученые нашли виновника всемирной эпидемии ожирения, и это не фастфуд Ученые нашли виновника всемирной эпидемии ожирения, и это не фастфуд

Новое предположение ученых: в лишнем весе виновата не калорийная еда!

Maxim
Думай как миллионер: какие мысли помогут разбогатеть Думай как миллионер: какие мысли помогут разбогатеть

Разница между бедными и богатыми — в отношении к деньгам

Psychologies
По одной квитанции… По одной квитанции…

Майор ГБ Сергей Шпигельглаз — одна из самых мрачных фигур чекистского пантеона

Дилетант
У самок пещерных вшей есть У самок пещерных вшей есть

Животный мир полон восхитительно странных гениталий

ТехИнсайдер
Жанна д’Арк при осаде Орлеана Жанна д’Арк при осаде Орлеана

Картина французского живописца Жюля-Эжена Леневё, посвященная посланнице Бога

Дилетант
Прогулка вокруг марсианских вулканов Прогулка вокруг марсианских вулканов

Отправляемся в экспедицию на Марс

Наука и жизнь
Почему знак сердца совсем не похож на реальное сердце? Интересное объяснение Почему знак сердца совсем не похож на реальное сердце? Интересное объяснение

Почему знак сердца не похож на реальный орган?

ТехИнсайдер
Если ты полюбишь север: что делать в Мурманске Если ты полюбишь север: что делать в Мурманске

Дайте Мурманску шанс: полярная ночь, хрустящий снег, шаманы, северное сияние

Правила жизни
«Партнер мастурбирует»: стоит ли беспокоиться — разбор с сексологами «Партнер мастурбирует»: стоит ли беспокоиться — разбор с сексологами

Почему нам сложно принять то, что партнер может наслаждаться и без нас?

Psychologies
Садоводство снижает риск рака. Пора в огород! Садоводство снижает риск рака. Пора в огород!

Общественное садоводство может играть важную роль в предотвращении рака

ТехИнсайдер
Как привести себя в порядок после новогодних праздников? Простые советы для всех! Как привести себя в порядок после новогодних праздников? Простые советы для всех!

Как избавиться от лишних килограммов после затянувшихся праздников?

ТехИнсайдер
Открыть в приложении