GPT-3 научили нейросеть собирать информацию из разных источников

N+1Hi-Tech

GPT-3 научили искать ответы в интернете и подкреплять их ссылками на источники

Григорий Копиев

OpenAI

Разработчики из OpenAI научили нейросеть GPT-3 отвечать на вопросы так, как это часто делают люди: спрашивая у поисковика, собирая информацию из нескольких источников и давая в итоговом тексте ссылки на них. Исследование показало, что ответы такой нейросети нравятся людям больше, чем лучшие ответы на те же вопросы на Reddit. Краткое описание и интерактивные примеры опубликованы на сайте OpenAI, там же доступна статья с подробностями обучения и тестирования.

В 2017 году исследователи из Google представили архитектуру нейросетей, которую назвали трансформером. Ее ключевой особенностью стала реализация механизма внимания, позволяющая нейросети учитывать все слова в даваемом ей предложении и понимать их важность. Затем исследователи из OpenAI создали на ее основе нейросеть GPT и два ее преемника (GPT-2 и GPT-3), последний из которых научился генерировать тексты, которые часто сложно отличить от написанных человеком. Как и в случае с дипфейками, это вызвало в научном сообществе дискуссии о том, какие опасности несет в себе такая технология. В частности, из-за особенностей работы генеративные нейросети могут создавать правдоподобный, но ложный с точки зрения фактов текст.

Исследователи из OpenAI решили сделать GPT-3 более «прозрачной» и научили ее не только генерировать ответы, но и приводить ссылки на источники. Они создали для GPT-3 интерактивную среду — фактически текстовый браузер, работающий через API поисковика Bing. Среда показывает результаты выдачи по поисковому запросу с заголовками и абзацем текста, а также позволяет открыть нужную ссылку, пролистать страницу

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Астрономы впервые достоверно нашли экзопланету с кратной полярной орбитой Астрономы впервые достоверно нашли экзопланету с кратной полярной орбитой

Ученые впервые подтвердили существование экзопланеты с кратной полярной орбитой

N+1
Даня Милохин — Forbes: «Я изменился. Стал паинькой, спортсменом и зожником» Даня Милохин — Forbes: «Я изменился. Стал паинькой, спортсменом и зожником»

Даня Милохин о том, кто следит за его деньгами и почему он бросил техникум

Forbes
На седьмое небо за пиццей: удивительные факты о высотных вращающихся ресторанах На седьмое небо за пиццей: удивительные факты о высотных вращающихся ресторанах

Как работает это чудо строительной инженерии — высотные вращающиеся рестораны?

ТехИнсайдер
Су-34: долгая история новейшего российского бомбардировщика Су-34: долгая история новейшего российского бомбардировщика

История Су-34 — тактического фронтового бомбардировщика

Популярная механика
«Болезни Империи. Как пытки рабов и зверства во время войн изменили медицину» «Болезни Империи. Как пытки рабов и зверства во время войн изменили медицину»

Почему во время Крымской войны большинство солдат погибало в госпиталях

N+1
Зачем фотографировать плиту перед выходом из дома? Зачем фотографировать плиту перед выходом из дома?

Что нужно сделать перед отъездом? Сфотографировать плиту

Cosmopolitan
ЦСКМС и Арктик СПГ 2: как в Заполярье строят плавучие заводы для сжижения природного газа ЦСКМС и Арктик СПГ 2: как в Заполярье строят плавучие заводы для сжижения природного газа

Суровые условия Арктики окупаются её богатствами

Популярная механика
«Не беспокойтесь о нас»: 5 самых трагичных судеб семей с «Титаника» «Не беспокойтесь о нас»: 5 самых трагичных судеб семей с «Титаника»

Истории с «Титаника» — о героизме, самопожертвовании и глупости

Cosmopolitan
Здесь был ЗИЛ. Репортаж о легендарном заводе, которого не стало Здесь был ЗИЛ. Репортаж о легендарном заводе, которого не стало

Выясняем, что стало с МСЦ № 6 ЗИЛа после сноса его исторического здания

РБК
Праздничный «сезон покупок» может повлечь катастрофические затраты. Страшные, но не для вашего кошелька Праздничный «сезон покупок» может повлечь катастрофические затраты. Страшные, но не для вашего кошелька

Связь между изменением климата и продуктами, которые мы покупаем

Популярная механика
Правила жизни Ли Куан Ю Правила жизни Ли Куан Ю

Правила жизни первого премьер-министра Сингапура Ли Куан Ю

Esquire
Ученые предложили новую модель темной материи с тяжелыми составными частицами Ученые предложили новую модель темной материи с тяжелыми составными частицами

Группа физиков-теоретиков предложила новую модель темной материи

N+1
Как 29-летний белорус построил «единорога» в США, помогая детям с аутизмом Как 29-летний белорус построил «единорога» в США, помогая детям с аутизмом

Elemy — «единорог», который помогает детям с аутизмом получать терапию

Forbes
Мой рок–н–ролл Мой рок–н–ролл

Уютный и минималистичный интерьер для большой семьи

SALON-Interior
Почему люди грубят друг другу? Почему люди грубят друг другу?

Я решила разобраться, почему люди грубят и ругаются друг с другом

ПУСК
Премия ВРАЛ: грустный рептилоид для Премия ВРАЛ: грустный рептилоид для

Торжественная церемония награждения авторов самых популярных лженаучных теорий

Популярная механика
Мама в форме: как сообщество матерей футболистов меняет отношение к женщинам в спорте Мама в форме: как сообщество матерей футболистов меняет отношение к женщинам в спорте

«Футбольные мамы» — всероссийский конкурс, который превратился в сообщество

Forbes
Пасть порву! Лучшие фильмы и сериалы о  непримиримой женской вражде Пасть порву! Лучшие фильмы и сериалы о  непримиримой женской вражде

Фильмы и сериалы, в которых конфликт разгорается между женщинами

Cosmopolitan
Торговое оборудование Торговое оборудование

Как друзья из Ростова-на-Дону создали соцсеть для трейдеров стоимостью $3 млрд

Forbes
Трудности доказательного перехода Трудности доказательного перехода

Как данные, собираемые университетами, могут быть полезны

Наука
Химики получили водород на катоде и аноде одновременно Химики получили водород на катоде и аноде одновременно

Ученые разработали новую систему электролиза

N+1
Чем заняться дома зимой? Чем заняться дома зимой?

Как разнообразить свой досуг, не покидая дома?

Psychologies
Автор особого назначения Автор особого назначения

Мария Степанова о романах Татьяны Устиновой

Weekend
Jeffery Quad: лучший полноприводный грузовик в мире Jeffery Quad: лучший полноприводный грузовик в мире

Полноприводный грузовик Jeffery Quad

Популярная механика
Самые странные вещи, которые продавали на NFT-аукционах Самые странные вещи, которые продавали на NFT-аукционах

От твита до вида на жительство — что продают на NFT-аукционах?

GQ
«Как ломаются спагетти и другие задачи по физике» «Как ломаются спагетти и другие задачи по физике»

Отрывок из книги «Как ломаются спагетти и другие задачи по физике»

N+1
Канадские мамонты пережили ледниковый период Канадские мамонты пережили ледниковый период

Палеогенетики обнаружили ДНК животных в образцах моложе 10000 лет

N+1
Лена Ванина Лена Ванина

Лена Ванина — сценаристка важных сериалов нового времени

Собака.ru
Что такое выученная беспомощность и как от нее избавиться Что такое выученная беспомощность и как от нее избавиться

Когда возникает выученная беспомощность и как себе помочь?

РБК
5 главных мифов о наборе веса в праздники 5 главных мифов о наборе веса в праздники

Самые популярные заблуждения о новогоднем рационе

Лиза
Открыть в приложении