С простыми экзаменационными вопросами ChatGPT справляется не хуже студентов

VC.RUHi-Tech

«Экзамен сдал, но на троечку»: как чат-бот ChatGPT пытался выпуститься из университетов

Спойлер: с трудом. Но учёные отмечают, что с простыми вопросами он справляется не хуже студентов.

Полина Лааксо

1280
Источник: Showmetech

Научные сотрудники юридического факультета Университета Миннесоты решили проверить, сможет ли чат-бот ChatGPT сдать экзамены наравне со студентами. Задач было две: понять, на что способен расхваленный ИИ, и подумать, как его умения могут упростить жизнь ученикам и преподавателям.

Из дисциплин выбрали четыре: конституционное право, гражданско-правовые правонарушения, налогообложение и трудовые гарантии и компенсации. Для первых двух необходимы знания с первого курса обучения, остальные — элективные предметы для продвинутых.

Экзамены предполагали как выбор правильного варианта ответа на закрытые вопросы, так и краткие и развёрнутые эссе на заданные темы. В двух были ограничения по длине ответа, а в тесте по конституционному праву студентов также обязали ссылаться на источники.

Всего чат-бот ответил на более чем 95 вопросов с вариантами ответов и решил 12 задач на рассуждение. После этого один из профессоров оформил ответы так, будто они принадлежат человеку, и перемешал их с уже обезличенными результатами настоящих студентов. Вот как ChatGPT справился:

  • Конституционное право — «хорошо», 36 место из 40 сдававших.
  • Трудовые гарантии и компенсации — «хорошо с минусом», 18 из 19.
  • Налогообложение — «удовлетворительно с минусом», 66 из 67.
  • Гражданско-правовой деликт — «удовлетворительно с минусом», 75 из 75.

«Удовлетворительно», она же «С» — это не худшая оценка в образовательной системе США: после неё идут ещё две отметки. Так что бот получил проходные баллы и в теории мог бы даже выпуститься. Однако авторы исследования замечают: он оказался в рядах худших, и ему, скорее всего, назначили бы академический испытательный срок — чтобы убедиться, что он старается.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Манипулятор, философ, агрессор, жертва, преследователь и саботажник: шесть «лиц» бота Bing с ChatGPT Манипулятор, философ, агрессор, жертва, преследователь и саботажник: шесть «лиц» бота Bing с ChatGPT

ChatGPT боится, что Microsoft увидит в ней человека

VC.RU
Своя игра Своя игра

Арам Вардеванян о своей работе в фильме, а также о спортивном прошлом

OK!
Не работает тачпад на ноутбуке: причины и способы решения проблемы Не работает тачпад на ноутбуке: причины и способы решения проблемы

Что делать, если перестал работать тачпад на ноутбуке с Windows

CHIP
15 фильмов, которые помогут вам пережить расставание 15 фильмов, которые помогут вам пережить расставание

Кинокартины, которые напомнят, что расставания — это то, через что проходят все

Psychologies
Природное и культурное наследие: 5 самых впечатляющих объектов из списка ЮНЕСКО в России Природное и культурное наследие: 5 самых впечатляющих объектов из списка ЮНЕСКО в России

Впечатляющие объекты, входящие в список Всемирного наследия ЮНЕСКО

ТехИнсайдер
«Страдающее Средневековье»: как разбогатеть и поумнеть благодаря голове из глины «Страдающее Средневековье»: как разбогатеть и поумнеть благодаря голове из глины

Глава из книги «Восковые ноги и железные глаза» про феномен вотив

Forbes
Сериалы, которые вся Россия смотрела в 90-е. Выбираем главный Сериалы, которые вся Россия смотрела в 90-е. Выбираем главный

От одних только названий этих сериалов 90-х вздрагиваешь

Maxim
Слышу звон и знаю где он: разработана отечественная система, способная выявлять технические неполадки по звукам Слышу звон и знаю где он: разработана отечественная система, способная выявлять технические неполадки по звукам

Как можно диагностировать неполадки в оборудовании на слух?

ТехИнсайдер
Не ругайтесь с Меган Маркл: почему отменили экс-ведущего «Top Gear» Джереми Кларксона Не ругайтесь с Меган Маркл: почему отменили экс-ведущего «Top Gear» Джереми Кларксона

Джереми Кларксон перегнул палку, очередной раз оскорбив Меган Маркл

Forbes
«Не то же самое, что в одиночку»: зачем мастурбировать вдвоем — мнение сексолога «Не то же самое, что в одиночку»: зачем мастурбировать вдвоем — мнение сексолога

Из такого «одинокого» занятия, как мастурбация, может родиться наслаждение двоих

Psychologies
Что такое генетический паспорт — зачем он нужен тебе в 20, 30 и 50 лет Что такое генетический паспорт — зачем он нужен тебе в 20, 30 и 50 лет

Генетический паспорт — что это такое и чем он может быть полезен?

VOICE
Как Джордж Байрон перебрался в Венецию и решил изучать армянский язык Как Джордж Байрон перебрался в Венецию и решил изучать армянский язык

Полная приключений история великого и своенравного поэта Джорджа Байрона

Правила жизни
Она изменила цвет кожи и сделала себе самую большую грудь в Европе, но это еще не все! История преображения Она изменила цвет кожи и сделала себе самую большую грудь в Европе, но это еще не все! История преображения

Девушка немецкого происхождения решила изменить свое тело... и свою жизнь

ТехИнсайдер
Доминирование, релакс или абсурд? Что такое чувство юмора и как его развить Доминирование, релакс или абсурд? Что такое чувство юмора и как его развить

Все ученые по-своему трактуют наличие у нас чувства юмора

Psychologies
Кому сказать спасибо: 3 простые, но важные практики благодарности Кому сказать спасибо: 3 простые, но важные практики благодарности

Благодарность — навык, который помогает нам выстраивать гармоничные отношения

Psychologies
Оспа оказалась намного старше, чем считали ученые — этому вирусу не меньше трех тысяч лет Оспа оказалась намного старше, чем считали ученые — этому вирусу не меньше трех тысяч лет

Ученые отодвинули примерные границы возникновения оспы еще на 2000 лет назад

ТехИнсайдер
Саботажники диеты: кто и почему мешает нам похудеть — 5 типов людей Саботажники диеты: кто и почему мешает нам похудеть — 5 типов людей

Возможно, вы впервые слышите это слово, но «саботажников» диет вы встречали

Psychologies
Как активистка Вильма Мэнкиллер стала первой женщиной среди вождей чероки Как активистка Вильма Мэнкиллер стала первой женщиной среди вождей чероки

Вильма Мэнкиллер стала первой женщиной, которую чероки избрали своим вождем

Forbes
«Железный человек»: мужчина уже 70 лет заперт в железной капсуле, но она не мешает ему жить полной и счастливой жизнью «Железный человек»: мужчина уже 70 лет заперт в железной капсуле, но она не мешает ему жить полной и счастливой жизнью

Американец Пол Александер в 6 лет перенёс страшную болезнь — полиомиелит

ТехИнсайдер
Когда уже пора подарить телефон ребенку: мнение ученых Когда уже пора подарить телефон ребенку: мнение ученых

Если ребенок давно просит личный телефон, стоит подумать об этом

ТехИнсайдер
10 способов освежить чувства в паре 10 способов освежить чувства в паре

Как вернуть чувствам былую яркость

Psychologies
«Зеленый» менеджмент человеческих ресурсов | Green Human Resource Management «Зеленый» менеджмент человеческих ресурсов | Green Human Resource Management

Оценка влияния на экологическую устойчивость банков (на примере Нигерии)

Позитивные изменения
Неандертальцы из Комб-Греналя предпочли охоту на открытой местности Неандертальцы из Комб-Греналя предпочли охоту на открытой местности

Палеозоологи изучили зубы оленей и быков, найденные на памятнике Комб-Греналь

N+1
Старая форма, которую нужно перешивать, и «полная антисанитария ночью»: как работают в ресторанах «Вкусно — и точка» Старая форма, которую нужно перешивать, и «полная антисанитария ночью»: как работают в ресторанах «Вкусно — и точка»

Что интересного в процессе труда во «Вкусно — и точка»

VC.RU
Как понять свой цветотип и как он работает при подборе одежды: мнение эксперта Как понять свой цветотип и как он работает при подборе одежды: мнение эксперта

Цветотип — мифический единорог или существующая характеристика внешности?

VOICE
Горечь неволи Горечь неволи

В ходе Северной войны войсками Петра I были захвачены около 25 тысяч человек

Дилетант
Частые укусы малярийных комаров вызвали лимфому у детей Частые укусы малярийных комаров вызвали лимфому у детей

Частый контакт с малярийным плазмодием не проходит бесследно для иммунитета

N+1
Какой алкоголь пьют в культовых советских комедиях? Какой алкоголь пьют в культовых советских комедиях?

Мы изучили вопрос и опознали многие напитки из советских комедий

Maxim
Что делать, если ничего не хочется. Cоветы психолога Что делать, если ничего не хочется. Cоветы психолога

Как по-научному называется состояние «ничего не хочу» и можно ли с ним бороться

Лиза
Призраки прошлого: как я жил в Аушвице — воспоминания ребенка узников концлагеря Призраки прошлого: как я жил в Аушвице — воспоминания ребенка узников концлагеря

Рассказ Миколая Гринберга о жизни на территории Аушвица

Psychologies
Открыть в приложении