GPT-3 научили нейросеть собирать информацию из разных источников

N+1Hi-Tech

GPT-3 научили искать ответы в интернете и подкреплять их ссылками на источники

Григорий Копиев

OpenAI

Разработчики из OpenAI научили нейросеть GPT-3 отвечать на вопросы так, как это часто делают люди: спрашивая у поисковика, собирая информацию из нескольких источников и давая в итоговом тексте ссылки на них. Исследование показало, что ответы такой нейросети нравятся людям больше, чем лучшие ответы на те же вопросы на Reddit. Краткое описание и интерактивные примеры опубликованы на сайте OpenAI, там же доступна статья с подробностями обучения и тестирования.

В 2017 году исследователи из Google представили архитектуру нейросетей, которую назвали трансформером. Ее ключевой особенностью стала реализация механизма внимания, позволяющая нейросети учитывать все слова в даваемом ей предложении и понимать их важность. Затем исследователи из OpenAI создали на ее основе нейросеть GPT и два ее преемника (GPT-2 и GPT-3), последний из которых научился генерировать тексты, которые часто сложно отличить от написанных человеком. Как и в случае с дипфейками, это вызвало в научном сообществе дискуссии о том, какие опасности несет в себе такая технология. В частности, из-за особенностей работы генеративные нейросети могут создавать правдоподобный, но ложный с точки зрения фактов текст.

Исследователи из OpenAI решили сделать GPT-3 более «прозрачной» и научили ее не только генерировать ответы, но и приводить ссылки на источники. Они создали для GPT-3 интерактивную среду — фактически текстовый браузер, работающий через API поисковика Bing. Среда показывает результаты выдачи по поисковому запросу с заголовками и абзацем текста, а также позволяет открыть нужную ссылку, пролистать страницу

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Динамически меняющая внешность маска поможет обмануть систему распознавания лиц Динамически меняющая внешность маска поможет обмануть систему распознавания лиц

Инженеры создали маску, способную изменять форму лица и цвет кожи

N+1
Учёные обнаружили, что за нашими тёмными и негативными мыслями скрывается вполне измеримый фактор Учёные обнаружили, что за нашими тёмными и негативными мыслями скрывается вполне измеримый фактор

Тёмный фактор личности — что это такое и как он влияет на нас?

Популярная механика
Это я беру на себя: почему бизнес все чаще размещает IT-решения на своих серверах Это я беру на себя: почему бизнес все чаще размещает IT-решения на своих серверах

Почему бизнес предпочитает развивать свою IT-инфраструктуру?

Forbes
10 лучших книг по психологии по мнению эксперта 10 лучших книг по психологии по мнению эксперта

Эти книги помогут вам разобраться в устройстве психики и понять свои эмоции

РБК
Психологический портрет: что такое сейфтизм Психологический портрет: что такое сейфтизм

Сейфтизм: что это такое и чего в нем больше — пользы или вреда?

Forbes
Удивительная история великого винного афериста Руди Куарнавана Удивительная история великого винного афериста Руди Куарнавана

Руди Куарнаван и лаборатория по подделке вина

Maxim
«Зеленая Амазонка»: как Франсуаза д’Обонн придумала экофеминизм «Зеленая Амазонка»: как Франсуаза д’Обонн придумала экофеминизм

Активистка, которая сформулировала термин «экофеминизм»

Forbes
Что наука говорит о балансе работы и личной жизни Что наука говорит о балансе работы и личной жизни

Как правильно расставлять приоритеты между работой и личной жизнью?

Популярная механика
7 самых интересных мест в Солнечной системе, где может существовать жизнь 7 самых интересных мест в Солнечной системе, где может существовать жизнь

Солнечная система полна потенциальных мест, в которых могут выживать микробы

Популярная механика
Окно за границу: какие меры помогут раскрыть экспортный потенциал российской промышленности Окно за границу: какие меры помогут раскрыть экспортный потенциал российской промышленности

Как развивать экспорт российской продукции?

СНОБ
Константин Хабенский – о «Чемпионе мира», театре и возрасте Константин Хабенский – о «Чемпионе мира», театре и возрасте

Константин Хабенский о «Чемпионе мира», шахматах и неудачных проектах

GQ
Алексей Ивашов: «Отец ушел из дома, и на этот раз все могло закончиться разводом» Алексей Ивашов: «Отец ушел из дома, и на этот раз все могло закончиться разводом»

В кино я наконец повидал родителей: Светлану Светличную и Владимира Ивашова

Коллекция. Караван историй
Вплоть до снятия с учета: ГИБДД жестко отреагировала на уловку водителей Вплоть до снятия с учета: ГИБДД жестко отреагировала на уловку водителей

Установка двойных стекол в машине – штраф

РБК
В коктейле главное — баланс В коктейле главное — баланс

Бармены о новых идеях и трендах, предпочтениях гостей и отношениях с поварами

Bones
Биоархеологи нашли древнекитайскую женщину-карлика Биоархеологи нашли древнекитайскую женщину-карлика

Женщина-карлик из могильника Бэйшэньцзяцяо в городе Сиань

N+1
Советский деликатес: почему врачи рекомендуют есть печень трески зимой Советский деликатес: почему врачи рекомендуют есть печень трески зимой

Вкусная, источник незаменимых витаминов и микроэлементов — все это печень трески

РБК

Мюзикл — одна из главных форм массового развлечения XX века

Esquire
10 причин никогда не садиться на диету 10 причин никогда не садиться на диету

Современные диетологи категорически против таких методов снижения веса. Почему?

Psychologies
Инвестиционный поход Инвестиционный поход

Важен баланс между стабильностью и риском

Esquire
Вождь итальянского футуризма, эксцентрик и идеолог фашизма: занимательная жизнь Филиппо Томмазо Маринетти Вождь итальянского футуризма, эксцентрик и идеолог фашизма: занимательная жизнь Филиппо Томмазо Маринетти

Филиппо Томмазо Маринетти — поэт-скандалист, вождь итальянского футуризма

Esquire
«Теремок» с секретом. Что ставят в Саратовском театре кукол «Теремок» с секретом. Что ставят в Саратовском театре кукол

О чем мечтают актеры Саратовского театра кукол «Теремок»

СНОБ
Звезда Немезида: тайный близнец Солнца мог привести к массовому вымиранию и гибели динозавров Звезда Немезида: тайный близнец Солнца мог привести к массовому вымиранию и гибели динозавров

Где-то на задворках нашей звездной системы прячется "отторгнутый" близнец Солцна

Популярная механика
90 м² 90 м²

Собственная квартира Марии и Павла Ивановых из FullHouseDesign

AD
Farus Beta: спорткар, который не знал конкурентов Farus Beta: спорткар, который не знал конкурентов

Farus Beta — необычный спорткар из Бразилии

Популярная механика
Конфуз года: Боня, Бузова и другие звезды, которые попались на фотошопе в 2021-м Конфуз года: Боня, Бузова и другие звезды, которые попались на фотошопе в 2021-м

Кого из российских звезд подписчики уличили в фотошопе

Cosmopolitan
В путешествие с ребенком: как не испортить себе отдых В путешествие с ребенком: как не испортить себе отдых

Время отпусков и путешествий. Встает вопрос: как быть с ребенком?

Psychologies
Что надо знать о кефирной диете. Мнение врача Что надо знать о кефирной диете. Мнение врача

Почему многие предпочитают кефирную диету?

РБК
Чем заняться дома зимой? Чем заняться дома зимой?

Как разнообразить свой досуг, не покидая дома?

Psychologies
Доверие на автопилоте: почему человек верит машине больше, чем людям, — и не напрасно ли Доверие на автопилоте: почему человек верит машине больше, чем людям, — и не напрасно ли

Почему человек доверяет компьютеру и к чему это может привести?

VC.RU
Пчелы запечатали ульи прополисом и пережили извержение вулкана Кумбре-Вьеха Пчелы запечатали ульи прополисом и пережили извержение вулкана Кумбре-Вьеха

Пчелы способны переживать опасные стихийные бедствия

N+1
Открыть в приложении