С простыми экзаменационными вопросами ChatGPT справляется не хуже студентов

VC.RUHi-Tech

«Экзамен сдал, но на троечку»: как чат-бот ChatGPT пытался выпуститься из университетов

Спойлер: с трудом. Но учёные отмечают, что с простыми вопросами он справляется не хуже студентов.

Полина Лааксо

1280
Источник: Showmetech

Научные сотрудники юридического факультета Университета Миннесоты решили проверить, сможет ли чат-бот ChatGPT сдать экзамены наравне со студентами. Задач было две: понять, на что способен расхваленный ИИ, и подумать, как его умения могут упростить жизнь ученикам и преподавателям.

Из дисциплин выбрали четыре: конституционное право, гражданско-правовые правонарушения, налогообложение и трудовые гарантии и компенсации. Для первых двух необходимы знания с первого курса обучения, остальные — элективные предметы для продвинутых.

Экзамены предполагали как выбор правильного варианта ответа на закрытые вопросы, так и краткие и развёрнутые эссе на заданные темы. В двух были ограничения по длине ответа, а в тесте по конституционному праву студентов также обязали ссылаться на источники.

Всего чат-бот ответил на более чем 95 вопросов с вариантами ответов и решил 12 задач на рассуждение. После этого один из профессоров оформил ответы так, будто они принадлежат человеку, и перемешал их с уже обезличенными результатами настоящих студентов. Вот как ChatGPT справился:

  • Конституционное право — «хорошо», 36 место из 40 сдававших.
  • Трудовые гарантии и компенсации — «хорошо с минусом», 18 из 19.
  • Налогообложение — «удовлетворительно с минусом», 66 из 67.
  • Гражданско-правовой деликт — «удовлетворительно с минусом», 75 из 75.

«Удовлетворительно», она же «С» — это не худшая оценка в образовательной системе США: после неё идут ещё две отметки. Так что бот получил проходные баллы и в теории мог бы даже выпуститься. Однако авторы исследования замечают: он оказался в рядах худших, и ему, скорее всего, назначили бы академический испытательный срок — чтобы убедиться, что он старается.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

«Ругаю сотрудников за переработки»: ИТ-менеджеры рассказали о своих стилях управления «Ругаю сотрудников за переработки»: ИТ-менеджеры рассказали о своих стилях управления

Как добиться того, чтобы люди хорошо работали сами, без избыточного контроля?

VC.RU
Чтение выходного дня: фрагмент романа «Мальчики из “Никеля”» Колсона Уайтхеда, дважды лауреата Пулитцеровской премии Чтение выходного дня: фрагмент романа «Мальчики из “Никеля”» Колсона Уайтхеда, дважды лауреата Пулитцеровской премии

«Мальчики из “Никеля”» — о борьбе с рабством во времена Гражданской войны в США

Правила жизни
Как голос ИИ может помочь в лечении депрессии и тревоги: вы поразитесь! Как голос ИИ может помочь в лечении депрессии и тревоги: вы поразитесь!

Могут ли роботы помочь в лечении депрессии?

TechInsider
Разгрузка для печени Разгрузка для печени

Печень выполняет множество функций, а потому нуждается в особом внимании

Лиза
Фотограф Playboy рассказал, как делал откровенные снимки Памелы Андерсон, Деми Мур, Шэрон Стоун и других знаменитостей Фотограф Playboy рассказал, как делал откровенные снимки Памелы Андерсон, Деми Мур, Шэрон Стоун и других знаменитостей

Фотограф Стивен Вайда рассказал интимные подробности горячих съемок

Maxim
Отложи наушники: как познакомиться с кем-то, не пользуясь интернетом Отложи наушники: как познакомиться с кем-то, не пользуясь интернетом

Как заводить знакомства в олдскульном стиле — иными словами, без помощи Сети

VOICE
Как активистка Вильма Мэнкиллер стала первой женщиной среди вождей чероки Как активистка Вильма Мэнкиллер стала первой женщиной среди вождей чероки

Вильма Мэнкиллер стала первой женщиной, которую чероки избрали своим вождем

Forbes
Что заводит ее больше всего: топ-3 женских фантазий Что заводит ее больше всего: топ-3 женских фантазий

Женщины выбирают партнера не только сознательно, но и бессознательно

Maxim
5 странностей советских квартир, которые в современных домах уже не встретишь 5 странностей советских квартир, которые в современных домах уже не встретишь

В квартирах времен СССР нередко встречались странные детали

TechInsider
Влад Тирон: Как стать настоящим художником Влад Тирон: Как стать настоящим художником

Актер Влад Тирон — кто такой новый Эраст Фандорин

СНОБ
Как Сергей Дягилев сломал стену между артистом и зрителем и построил ее заново Как Сергей Дягилев сломал стену между артистом и зрителем и построил ее заново

Почему Сергей Дягилев ― глыба мирового балета

Правила жизни
На изящном: как Джексон Поллок стал культурным героем США На изящном: как Джексон Поллок стал культурным героем США

В Джексона Поллока мало кто верил, но пропаганда и пресса сделали свое дело

Правила жизни
Как ездить зимой на велосипеде и насколько это безопасно? Как ездить зимой на велосипеде и насколько это безопасно?

Вокруг зимней езды на велосипеде ходит множество слухов и мифов

TechInsider
Зерновой рынок становится все депрессивнее Зерновой рынок становится все депрессивнее

Итоги первой половины сезона 2022/23 из жизни зернового рынка

Агроинвестор
Наследство Иваны Трамп: что и кому оставила экс-супруга бывшего президента США Наследство Иваны Трамп: что и кому оставила экс-супруга бывшего президента США

Ивана Трамп не оставила своему бывшему супругу в наследство ничего

Forbes
Как киберпреступники создают вредоносные программы при помощи чат-бота ChatGPT Как киберпреступники создают вредоносные программы при помощи чат-бота ChatGPT

Хакеры используют чат-бот ChatGPT для быстрого создания инструментов взлома

Forbes
Как правильно спать: 6 распространенных ошибок — советы косметолога Как правильно спать: 6 распространенных ошибок — советы косметолога

Самые распространенные ошибки, которые мы совершаем после захода солнца

Psychologies
Общение в интернете: как создать реальные связи — советы психологов Общение в интернете: как создать реальные связи — советы психологов

Психологи объясняют, как выстроить доверительные отношения в соцсетях

Psychologies
Что будет, если вы перестанете спать Что будет, если вы перестанете спать

Как долго может длиться бессонная “ночь”?

TechInsider
Алексей Кучеров Алексей Кучеров

История московского бизнесмена, который боролся с уличным пьянством

СНОБ
Оценка социального возврата на инвестиции (SROI) на примере проекта «Начни свое дело» | Assessment of the Social Return on Investment (SROI), Case: Start Your Own Business Project Оценка социального возврата на инвестиции (SROI) на примере проекта «Начни свое дело» | Assessment of the Social Return on Investment (SROI), Case: Start Your Own Business Project

Подход к оценке социального возврата на инвестиции используется во всем мире

Позитивные изменения
Факты и легенды о мультфильмах серии «Шрек» Факты и легенды о мультфильмах серии «Шрек»

Все, что творилось за кадром в этом царстве говорящих ослов

Maxim
Почему в культуре и обществе гендерные стереотипы передаются из поколения в поколение Почему в культуре и обществе гендерные стереотипы передаются из поколения в поколение

Что мешает распространению прогрессивных взглядов и почему опускать руки нельзя

Forbes
Тест Aston Martin DBX707, самого крутого кроссовера в мире Тест Aston Martin DBX707, самого крутого кроссовера в мире

Aston Martin DBX707: заслуживает ли он своей цены?

4x4 Club
Зачем бобры строят плотины? Зачем бобры строят плотины?

Зачем бобры вообще строят плотины? Они в них живут?

TechInsider
Идеальный образ жизни, чтобы сдержать ухудшение памяти в старости. Стоит узнать! Идеальный образ жизни, чтобы сдержать ухудшение памяти в старости. Стоит узнать!

Исследование показало, что для здоровья важно соблюдать не одно правило

TechInsider
Каждый день вы должны... заправлять постель. Вот почему ученые настаивают на этом Каждый день вы должны... заправлять постель. Вот почему ученые настаивают на этом

Необходимость в застилании постели видят не специалисты по гигиене, а психологи

TechInsider
Волки съели оленей на острове около Аляски и взялись за каланов Волки съели оленей на острове около Аляски и взялись за каланов

За последние годы на острове около Аляски сложилась редкая ситуация

TechInsider
Не блоху подковать Не блоху подковать

Краткая история развития нанотехнологий

N+1
История со ста нулями. Как Сергей Брин создал компанию Google История со ста нулями. Как Сергей Брин создал компанию Google

Как Сергей Брин добился успеха, а главное каким образом оказался в США

Цифровой океан
Открыть в приложении