С простыми экзаменационными вопросами ChatGPT справляется не хуже студентов

VC.RUHi-Tech

«Экзамен сдал, но на троечку»: как чат-бот ChatGPT пытался выпуститься из университетов

Спойлер: с трудом. Но учёные отмечают, что с простыми вопросами он справляется не хуже студентов.

Полина Лааксо

1280
Источник: Showmetech

Научные сотрудники юридического факультета Университета Миннесоты решили проверить, сможет ли чат-бот ChatGPT сдать экзамены наравне со студентами. Задач было две: понять, на что способен расхваленный ИИ, и подумать, как его умения могут упростить жизнь ученикам и преподавателям.

Из дисциплин выбрали четыре: конституционное право, гражданско-правовые правонарушения, налогообложение и трудовые гарантии и компенсации. Для первых двух необходимы знания с первого курса обучения, остальные — элективные предметы для продвинутых.

Экзамены предполагали как выбор правильного варианта ответа на закрытые вопросы, так и краткие и развёрнутые эссе на заданные темы. В двух были ограничения по длине ответа, а в тесте по конституционному праву студентов также обязали ссылаться на источники.

Всего чат-бот ответил на более чем 95 вопросов с вариантами ответов и решил 12 задач на рассуждение. После этого один из профессоров оформил ответы так, будто они принадлежат человеку, и перемешал их с уже обезличенными результатами настоящих студентов. Вот как ChatGPT справился:

  • Конституционное право — «хорошо», 36 место из 40 сдававших.
  • Трудовые гарантии и компенсации — «хорошо с минусом», 18 из 19.
  • Налогообложение — «удовлетворительно с минусом», 66 из 67.
  • Гражданско-правовой деликт — «удовлетворительно с минусом», 75 из 75.

«Удовлетворительно», она же «С» — это не худшая оценка в образовательной системе США: после неё идут ещё две отметки. Так что бот получил проходные баллы и в теории мог бы даже выпуститься. Однако авторы исследования замечают: он оказался в рядах худших, и ему, скорее всего, назначили бы академический испытательный срок — чтобы убедиться, что он старается.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Школьник обманом привлёк миллионы на компанию по чистке ковров, а «прогорел» из-за украденных у секретарши $600 Школьник обманом привлёк миллионы на компанию по чистке ковров, а «прогорел» из-за украденных у секретарши $600

Барри Минкоу хотел стать «General Motors в мире клининга» обманным путём

VC.RU
«Пятница, 13-е»: почему мы подвержены суевериям — мнение психолога «Пятница, 13-е»: почему мы подвержены суевериям — мнение психолога

Почему мы избегаем определенных знаков и символов и выполняем странные ритуалы?

Psychologies
Домашние роботы 2.0 — почему андроидам придется пройти семь кругов бюрократического ада Домашние роботы 2.0 — почему андроидам придется пройти семь кругов бюрократического ада

Эволюция робототехники: готовы ли мы морально и юридически к роботам-помощникам?

Inc.
5 способов пустить в дело пустые консервные банки. Вам не придется сдавать их на переработку! 5 способов пустить в дело пустые консервные банки. Вам не придется сдавать их на переработку!

Из пустых жестяных банок можно сделать множество полезных для дома мелочей

ТехИнсайдер
Как кофеин влияет на мозг и тело: неожиданные факты Как кофеин влияет на мозг и тело: неожиданные факты

Исследования выявили ряд интересных фактов, связанных с кофеином

Psychologies
На изящном: Жан-Мишель Баския и античные мотивы На изящном: Жан-Мишель Баския и античные мотивы

Если вы не задумывались, о чем писал картины Баския, этот текст вам очень нужен

Правила жизни
Здоровье из воздуха: что такое исцеляющая среда и почему она важна для медицины Здоровье из воздуха: что такое исцеляющая среда и почему она важна для медицины

Как появилась идея исцеляющей среды и почему она актуальна в наши дни?

Forbes
Как макияж помогает полюбить себя: 4 важных аргумента — мнение визажистов и психологов Как макияж помогает полюбить себя: 4 важных аргумента — мнение визажистов и психологов

Как макияж улучшает наше психологическое состояние?

Psychologies
Туризм в одном здании! Как устроена жизнь отеля, который стоит на границе двух стран Туризм в одном здании! Как устроена жизнь отеля, который стоит на границе двух стран

Отель, который расположился прямо на вершине международной границы

ТехИнсайдер
Ученые из США назвали практику, которая позволяет даже «обычным людям» научиться творчеству Ученые из США назвали практику, которая позволяет даже «обычным людям» научиться творчеству

Исследование показало, что в некоторой степени творчеству можно научиться

Inc.
Что лучше: стиральный порошок, капсулы или гель для стирки? Что лучше: стиральный порошок, капсулы или гель для стирки?

Разберемся в преимуществах и недостатках каждого чистящего средства для стирки

ТехИнсайдер
«Встречаюсь с женатым мужчиной и не чувствую вины»: история читательницы и комментарий психолога «Встречаюсь с женатым мужчиной и не чувствую вины»: история читательницы и комментарий психолога

Многие, но не все, женщины считают отношения с несвободным мужчиной ошибкой

Psychologies
Праздники подошли к концу: главная ошибка первой рабочей недели — проверьте себя Праздники подошли к концу: главная ошибка первой рабочей недели — проверьте себя

Как настроиться на работу после праздников?

Psychologies
Людмила Зайцева: «Сопротивляться обаянию Олега Ефремова было невозможно» Людмила Зайцева: «Сопротивляться обаянию Олега Ефремова было невозможно»

Я пришла к Станиславу и сказала, что готова сниматься в фильме в любом качестве

Караван историй
Инфантилизм, боязнь близости, синдром Мюнхгаузена: почему мужчина обманывает — 6 главных причин Инфантилизм, боязнь близости, синдром Мюнхгаузена: почему мужчина обманывает — 6 главных причин

Давайте разберемся, что стоит за мужской ложью

Psychologies
Королева ненадежности: самая плохая винтовка в мире Королева ненадежности: самая плохая винтовка в мире

Автоматическая винтовка, которая давала один отказ на 30-60 выстрелов

Maxim
Как сложилась судьба людей, живших в блокаду в Доходном доме Как сложилась судьба людей, живших в блокаду в Доходном доме

Глава из книги «Голоса из окон: ожившие истории Петербургских домов»

СНОБ
«Мы не снимали кино про дружбу народов» «Мы не снимали кино про дружбу народов»

Сардана Саввина о фильме «Не хороните меня без Ивана» и феномене якутского кино

Weekend
Галина Юзефович x Феликс Сандалов Галина Юзефович x Феликс Сандалов

Меня утешает мысль, что оставленные книги могут случайно попасть в нужные руки

СНОБ
Свисающий живот как символ достатка: как в 20 веке в США появились «Клубы толстяков»? Свисающий живот как символ достатка: как в 20 веке в США появились «Клубы толстяков»?

Оказывается, кубики пресса и мускулистые плечи не всегда были в моде

ТехИнсайдер
Вот какие профессии будут востребованы в будущем. Посмотрите этот список! Вот какие профессии будут востребованы в будущем. Посмотрите этот список!

В какой сфере актуально развиваться даже через 10-20 лет

ТехИнсайдер
Садоводство снижает риск рака. Пора в огород! Садоводство снижает риск рака. Пора в огород!

Общественное садоводство может играть важную роль в предотвращении рака

ТехИнсайдер
Почему знак сердца совсем не похож на реальное сердце? Интересное объяснение Почему знак сердца совсем не похож на реальное сердце? Интересное объяснение

Почему знак сердца не похож на реальный орган?

ТехИнсайдер
«Жить ей оставалось недолго»: история маньяка в викторианском Лондоне «Жить ей оставалось недолго»: история маньяка в викторианском Лондоне

Отрывок из книги «Доктор Яд» об одном из самых страшных маньяков Лондона

Forbes
Как противостоять эмоциональному насилию: разбираем 5 ситуаций Как противостоять эмоциональному насилию: разбираем 5 ситуаций

Агрессор показывает, что относится к жертве как к вещи. Как можно дать отпор?

Psychologies
Аура океана Аура океана

50‑метровая стальная яхта Ocean Z строилась on speculation

Y Magazine
Александр Тоболь: «ВКонтакте открывает пользователям мир NFT» Александр Тоболь: «ВКонтакте открывает пользователям мир NFT»

У NFT в России появился шанс стать массовой и доступной технологией

Собака.ru
Эти бандиты терроризировали Англию в начале 20 века. История “Острых козырьков” Эти бандиты терроризировали Англию в начале 20 века. История “Острых козырьков”

В любое время находится группа людей, которые считают, что они выше закона

ТехИнсайдер
Этюд в багровых штанах Этюд в багровых штанах

«Ковбой из Копенгагена»: Николас Виндинг Рефн снова в Европе

Weekend
Гармония с собой: как перестать бояться одиночества Гармония с собой: как перестать бояться одиночества

Действительно ли одиночество такое страшное?

Psychologies
Открыть в приложении