Чем хороша новая версия популярного бота от OpenAI GPT-4

ForbesHi-Tech

Четвертое измерение: что умеет новая языковая модель от OpenAI GPT-4

Манвел Аветисян

Фото Silas Stein / picture alliance via Getty Images

С момента появления ChatGPT в интернете уже разошлись мемы с вакансией «выключателя», который должен вытащить вилку из розетки, если ИИ внутри модели оживет. Директор по развитию прикладных проектов Института искусственного интеллекта AIRI Манвел Аветисян рассказывает о том, что сейчас умеет новая версия основы популярного бота GPT-4 и как релиз новинки от OpenAI отразится на нашей жизни.

Эволюция языковых моделей

Бурное развитие умных языковых ботов началось с довольно простой мысли: в виде текста можно представить огромное количество задач, а значит, можно научить модели ИИ эти задачи решать. В 2017 году появились трансформерные архитектуры, способные обучаться на больших объемах текстов. Чуть позже ученые совместили обучение с подкреплением (Reinforcement learning, RL, технология, которая позволяет «хвалить» программу за правильные действия и «наказывать» за неправильные) с большими языковыми моделями, такими, как GPT-3 (Large Language Models, LLM). Получился ChatGPT.

Представьте себе игру в шахматы: подкрепление в ней — это результат игры. Компьютерному агенту на основе искусственного интеллекта необходимо научиться делать ходы, которые приведут к победе. Люди способны действовать с подкреплением, удаленным на годы вперед, например, долго и усердно трудиться в школе и университете, чтобы получить первую зарплату. Компьютеру сложно выполнять длинные последовательности действий для достижения итогового результата, и разработчикам приходится учить ИИ «заглядывать вперед» при выборе следующего шага. Исследователи начали обучать модели, способные отвечать на вопросы человека и интегрировать в них огромные объемы человеческой обратной связи.

Среди основных прорывов, полученных исследователями в последнее время, можно отметить:

  • Toolformer, LLM от Meta (признана в России экстремистской организацией и запрещена): исследователи научили большие языковые модели обращаться к внешним инструментам (веб-поиску, переводчику, калькулятору).
  • LLaMA, LLM от Meta (признана экстремистской организацией на территории РФ): ученые доказали, что объем данных для обучения модели важнее, чем ее сложность. Более легкие по вычислительным ресурсам модели с большими выборками обучающих данных обошли большие модели в качестве решения прикладных задач.
  • ChatGPT на Bing научился указывать источники тех или иных фактов, которые он приводит в ответе на вопрос.

Плюсы и минусы нового движка

GPT-4 — последняя из больших языковых моделей семейства GPT от OpenAI: GPT-2, GPT-3 и GPT-3.5, которая легла в основу первой версии популярного бота ChatGPT. Модель состоит из большого количества нейросетей, которые умеют обрабатывать, понимать, анализировать, интерпретировать и генерировать тексты на естественном языке. Несмотря на то что четвертая версия модели понимает 28 языков, включая малоресурсные валлийский язык и урду (близкий к хинди язык индоевропейской семьи), наилучшие результаты по-прежнему можно получить, используя для создания промптов (так называются фразы-запросы к модели) английский.

GPT-4 прошел проверку эффективности на множестве экзаменов — как академических, так и профессиональных. Порой работы модели превосходили результаты большинства параллельно тестируемых людей. Например, на смоделированном экзамене для адвокатов (Uniform Bar Examination) GPT-4 оказалась среди 10% лучших участников теста, в то время как ChatGPT оказался среди худших 10%. Кроме того, согласно данным технического отчета OpenAI, сгенерированные GPT-4 ответы нравились тестовой группе пользователей в 70,2% случаев чаще, чем ответы GPT-3.5. Впрочем, по словам самих создателей, разница между ответами от двух версий бота может показаться незаметной в процессе работы с интерфейсом.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Серж Танкян Серж Танкян

Правила жизни музыканта Сержа Танкяна

Esquire
Жертва кризиса доверия: почему закончилась полуторавековая история Credit Suisse Жертва кризиса доверия: почему закончилась полуторавековая история Credit Suisse

Что привело Credit Suisse к тупику, из которого он оказался не в состоянии выйти

Forbes
Вибраторы и лечение. Когда и как появились компаньоны женщин — занимательная история Вибраторы и лечение. Когда и как появились компаньоны женщин — занимательная история

История вибраторов: как они помогали в лечении женщин

ТехИнсайдер
«Я никогда не была с женатыми мужчинами»: Лолита рассказала о съёмках сериала «Актрисы» «Я никогда не была с женатыми мужчинами»: Лолита рассказала о съёмках сериала «Актрисы»

Лолита Милявская рассказала, каково ей было работать с популярным режиссером

VOICE
«Пластикоз»: ученые дали имя синдрому, из-за которого желудки птиц буквально разрывает изнутри острыми фрагментами пластика «Пластикоз»: ученые дали имя синдрому, из-за которого желудки птиц буквально разрывает изнутри острыми фрагментами пластика

Птицы и рыбы во всем мире тихо страдают от новой болезни

ТехИнсайдер
Метафорические карты Метафорические карты

Очередное гадание или психологическая практика?

Лиза
Взрослые — это теперь мы. Как не бояться и получать удовольствие Взрослые — это теперь мы. Как не бояться и получать удовольствие

Как меняется жизнь в тот момент, когда понимаешь, что взрослый — это ты сам?

РБК
11 главных химических элементов, из которых состоит наше тело 11 главных химических элементов, из которых состоит наше тело

Человек — это на 99% кислород, водород, азот, углерод, кальций и фосфор!

ТехИнсайдер
«Задавайте открытые вопросы»: 4 навыка откровенного разговора — советы для супругов «Задавайте открытые вопросы»: 4 навыка откровенного разговора — советы для супругов

Как вести открытый, осмысленный и доброжелательный диалог в паре?

Psychologies
Ангорский кролик: даст фору любым котикам Ангорский кролик: даст фору любым котикам

Немного об ангорских кроликах, которые "утрут нос" вашим любимым интернет-героям

ТехИнсайдер
Физика в НИИ Черногорье Физика в НИИ Черногорье

Большой и подробный разбор досок из Black Mesa — ремейка оригинального Half-Life

N+1
Полет на Маркс Полет на Маркс

Авангардистам редко удавалось осуществить свои утопические фантазии на практике

Правила жизни
Брюс всемогущий: как Брюс Уиллис стал «своим парнем» с экрана и постепенно исчез с него Брюс всемогущий: как Брюс Уиллис стал «своим парнем» с экрана и постепенно исчез с него

Вспоминаем яркую карьеру Уиллиса и рассказываем, как Джон Макклейн сдал пост

Правила жизни
Может ли секс без обязательств перерасти в отношения: 4 мнения мужчин — узнайте правду Может ли секс без обязательств перерасти в отношения: 4 мнения мужчин — узнайте правду

Что мужчины думают о сексе без обязательств?

Psychologies
Убийства, катастрофы и секс: 4 новых скандальных документальных проекта на Netflix Убийства, катастрофы и секс: 4 новых скандальных документальных проекта на Netflix

Документальные проекты на Netflix, вызвавшие большой общественный резонанс

Forbes
Как понять, что у тебя гормональный дисбаланс: 6 изменений тела, которые должны насторожить Как понять, что у тебя гормональный дисбаланс: 6 изменений тела, которые должны насторожить

Расстройства в гормональной сфере могут быть удивительно разнообразны

VOICE
Несгибаемая Мишель Йео: как актриса боролась со стереотипами Голливуда и победила Несгибаемая Мишель Йео: как актриса боролась со стереотипами Голливуда и победила

Forbes Woman рассказывает о долгом пути Мишель Йео к признанию

Forbes
Ложимся на крыло? Ложимся на крыло?

Парусные суперъяхты могли бы легко решить проблему декарбонизации

Y Magazine
Вторые на Луне Вторые на Луне

Как продвигается работа над космической программой Artemis?

ТехИнсайдер
Велимир Хлебников Велимир Хлебников

Велимир Хлебников: поэт, умер в 1922 году

Правила жизни
Заметки натуралиста Заметки натуралиста

Какие растительные ингредиенты заменяют химические аналоги

Лиза
Как запрограммировать психику на похудение: 8 советов от врача Как запрограммировать психику на похудение: 8 советов от врача

8 простых подсказок, которые помогут тебе терять килограммы быстрее

VOICE
Одна вокруг света: главная дорога Аргентины и Озеро инков в горах Одна вокруг света: главная дорога Аргентины и Озеро инков в горах

209-я серия о кругосветном путешествии Ирины Сидоренко: приключения в Аргентине

Forbes
20 самых знаковых моментов за всю историю премии «Оскар» 20 самых знаковых моментов за всю историю премии «Оскар»

Самые важные, яркие и курьезные моменты за всю историю премии «Оскар»

Правила жизни
Самые интересные российские вина из шардоне Самые интересные российские вина из шардоне

Чем интересны российские вина из «шардоне» и на какие стоит обратить внимание

СНОБ
Бесплатные услуги на борту, скандалы и худшие пассажиры: о чем молчат стюардессы Бесплатные услуги на борту, скандалы и худшие пассажиры: о чем молчат стюардессы

Стюардесса рассказала все о своей работе

Maxim
Как создать уют на кухне Как создать уют на кухне

10 простых и бюджетных способов преобразить свою кухню

Лиза
«Один — за троих»: что умеет GPT-4 и как он изменит работу людей «Один — за троих»: что умеет GPT-4 и как он изменит работу людей

Как GPT-4 изменит рынок труда

Inc.
30 потрясающих вещей, которым в 2023-м году исполнилось 30 лет 30 потрясающих вещей, которым в 2023-м году исполнилось 30 лет

У тебя есть возможность с ужасом ощутить, как быстро пролетели годы

Maxim
6 мужских недостатков, на которые женщины на самом деле не обращают внимания 6 мужских недостатков, на которые женщины на самом деле не обращают внимания

Если ты комплексуешь по любому из этих поводов, срочно переставай!

Maxim
Открыть в приложении