Отрывок из книги «Полный бред! Скептицизм в мире больших данных»

N+1Наука

«Полный бред! Скептицизм в мире больших данных». Как относиться к получаемой информации критически

Манн, Иванов и Фербер, научно-популярные книгоиздатели

Если кто-то подкрепляет утверждения затейливыми терминами, цифрами и красивыми графиками, это еще не значит, что ему можно доверять. Статистика и язык точных наук могут быть всего лишь инструментами, призванными скрыть обман. Тот, кто умеет анализировать и перепроверять информацию, скорее всего, заметит подвох — остальные рискуют попасться в ловушку. В книге «Полный бред! Скептицизм в мире больших данных» (издательство «Манн, Иванов и Фербер»), переведенной на русский Елизаветой Пономаревой, ученые Карл Бергстром и Джевин Уэст рассказывают, как распознать чушь (в оригинале — bullshit) и почему для этого совсем не обязательно быть специалистом, а достаточно воспользоваться обыкновенной логикой. Предлагаем вам ознакомиться с фрагментом, посвященным «ошибке прокурора» и уровню значимости (p-value).

Ошибка прокурора

Как мы видели, в большинстве научных исследований ищут закономерности в данных, позволяющие делать выводы о мире. Но как отличить закономерность от случайного шума? И как определить, насколько она значима? Существует несколько способов это сделать, и самый распространенный — это использование р-значения. Грубо говоря, р-значение указывает, насколько вероятно, что наблюдаемая закономерность возникла по чистой случайности. Если это маловероятно, то мы можем сказать, что результат статистически значим. Но что это на самом деле означает и как нам трактовать р-значение? Мы ответим на эти вопросы с помощью короткой истории.

Представьте, что вы известный адвокат, который защищает скромного биолога, обвиняемого в самом поразительном похищении предмета искусства в современной истории.

Это сенсационное преступление. Богатая собирательница отправила частную коллекцию из тридцати шедевров европейского искусства на охраняемом поезде из своего особняка в Санта-Кларе в аукционный дом в Нью-Йорке. Когда поезд достиг пункта назначения, коробки отнесли в аукционный дом для распаковки. Путешествие прошло без происшествий, и к коробкам, на первый взгляд, никто не прикасался. Но, к всеобщему ужасу, четыре самые ценные картины были вырезаны из рам и исчезли! Ни полиция, ни страховая компания не нашли ни единой улики, не считая единственного отпечатка пальца на раме одной из пропавших работ. Украденные шедевры так никогда и не отыскали.

При отсутствии каких-либо иных наметок полиция прогнала от печаток пальца через огромную базу данных ФБР и нашла совпадение — отпечаток вашего клиента. (Он сдал свои отпечатки Администрации транспортной безопасности в обмен на возможность проходить досмотр в аэропорту, не снимая ботинок.) На допросе выяснилось, что у вашего клиента нет алиби. Он утверждает, что ни с кем не контактировал две недели, пока выслеживал окольцованную куропатку в горах Высокая Сьерра в рамках научного проекта.

Несмотря на отсутствие алиби, вы уверены, что ваш клиент не может быть виновен. Он всего лишь застенчивый ученый, а не хладнокровный похититель шедевров. У него уже есть два гранта NSF на исследование размножения куропаток, и, похоже, он не нуждается в дополнительных источниках дохода. К тому же, насколько вы заметили, он ни черта не понимает в искусстве; да что там, он считает, что Донателло — это черепашка-ниндзя.

Тем не менее начинается судебный процесс, и вы сталкиваетесь с блестящей молодой звездой прокуратуры. После описания всех остальных доказательств вины вашего клиента — слабых и косвенных — прокурор переходит к своему козырю, отпечатку пальца. Прокурор рассказывает присяжным, как именно компьютер сопоставляет отпечатки пальцев, и завершает свое выступление словами: «Нет абсолютно никаких шансов случайного совпадения настолько идентичных отпечатков».

Вы опровергаете его заявление: «По вашим словам, нет абсолютно никаких шансов настолько точного совпадения. Но так не бывает. В каждом тесте есть по крайней мере небольшой шанс ошибки». — «Конечно, — уступает он, — в принципе, тесты могут ошибаться. Но на практике шанс, что это случится, нулевой. Исследования ФБР показывают, что существует один шанс на десять миллионов, что два отпечатка совпадут настолько же точно. Один на десять миллионов — тут нет места сомнениям!»

Именно этого вы и ждали. Вы обращаетесь к присяжным и рисуете таблицу на три строки и два столбца на большом листе бумаги. Выглядит она примерно вот так.

«Я думаю, все мы согласны, что это преступление было кем-то совершено. И давайте также предположим, что отпечатки виновного есть в базе данных. Может быть, и нет, — обращаетесь вы к прокурору, — но это ослабит ваши доказательства. Так что давайте предположим, что они есть в базе». Прокурор кивает. «Тогда таблица должна выглядеть примерно вот так». Вы заполняете верхний ряд большим красным маркером.

Повернувшись к прокурору, вы интересуетесь: «Сколько человек включены в эту вашу базу ФБР?» Он перебивает вас: «Возражение, Ваша честь! Какое отношение это имеет к делу?» — «В этом и есть вся суть дела, — объясняете вы. — Я убежден, что объясню это все в течение следующих нескольких минут». — «Возражение отклонено». Сторона обвинения признается, что, если учесть все отпечатки пальцев преступников в США, все отпечатки гражданских лиц, полученные при проверке их биографий, и все отпечатки из базы Администрации транспортной безопасности, в базе представлено приблизительно пятьдесят миллионов американцев. И конечно, большинство отпечатков в базе не совпадают с тем, что найден на раме.

«Итак, теперь мы можем заполнять таблицу дальше», — говорите вы и вписываете число 50 000 000 в нижний правый угол.

Теперь вы указываете на нижний левый угол (это невиновные люди, чьи отпечатки тем не менее совпадут с найденным) и спрашиваете: «Как вы думаете, что нужно вписать сюда?»

Вы смотрите прямо на прокурора. «Вы сказали, что существует один шанс на десять миллионов, что алгоритм нашел неправильное совпадение. Это значит, что среди пятидесяти миллионов человек в этой базе должно быть примерно пять, чьи отпечатки совпадают с найденным и на месте преступления. Так что давайте заполним таблицу следующим образом»

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Археологи раскопали традиционный женский убор летописной муромы Археологи раскопали традиционный женский убор летописной муромы

Что археологи нашли в могильнике летописной муромы

N+1
«Дом — это не только деревяшки, но еще и память». Как житель Петербурга восстанавливает деревню и пытается спасти древний народ от вымирания «Дом — это не только деревяшки, но еще и память». Как житель Петербурга восстанавливает деревню и пытается спасти древний народ от вымирания

Как путешественники спасают древний народ от вымирания

СНОБ
Микропластик привел к загрязнению воды метилртутью Микропластик привел к загрязнению воды метилртутью

Микропластик в воде перевел метилртуть в токсичную форму

N+1
Как WeChat, только Twitter: зачем Илон Маск создает свое суперприложение Как WeChat, только Twitter: зачем Илон Маск создает свое суперприложение

Илон Маск ставит новую глобальную цель

Forbes
«Был честен с собой и со своим ремеслом»: каким был путь в искусстве Карла Брюллова «Был честен с собой и со своим ремеслом»: каким был путь в искусстве Карла Брюллова

Каким был путь в искусстве Карла Брюллова и как его показывают в музеях

Forbes
Как остановить выпадение волос Как остановить выпадение волос

Выпадение волос — проблема, с которой можно столкнуться в любом возрасте

Maxim
Неделя с пользой: 25 увлекательных книг, которые можно почитать в перерывах между работой и отдыхом Неделя с пользой: 25 увлекательных книг, которые можно почитать в перерывах между работой и отдыхом

25 интересных книг на любой вкус, которые затягивают с первых страниц

Правила жизни
Чем полезна жимолость: 7 фактов Чем полезна жимолость: 7 фактов

В чем именно польза жимолости

РБК
Зверь из Хвасона: почему самый опасный маньяк Южной Кореи избежал наказания Зверь из Хвасона: почему самый опасный маньяк Южной Кореи избежал наказания

Иногда преступникам удается уйти от правосудия очень странными путями

VOICE
Алина Загитова собралась в политику: смотрим, кто (и с какими результатами) ее там ждет Алина Загитова собралась в политику: смотрим, кто (и с какими результатами) ее там ждет

Что успели натворить шесть известных спортсменов, ставших депутатами

Maxim
Загадки космоса, на которые никто не знает ответа Загадки космоса, на которые никто не знает ответа

Что произойдет с человеком внутри черной дыры? Существуют ли инопланетяне?

Maxim
Виктор Франкл: в чем смысл нашей жизни и зачем в ней страдания Виктор Франкл: в чем смысл нашей жизни и зачем в ней страдания

В чем же смысл жизни?

Вокруг света
10 курьезных кинобаек 10 курьезных кинобаек

Вообще никто в реальности точно не знает, что делает кино интересным

Maxim
Один в поле воин Один в поле воин

Мирный книжный воин — про издательскую студию «Поле» и выпуск книг

Seasons of life
Новые виды паразитов вызвали вспышку кожного заболевания у антарктических рыб Новые виды паразитов вызвали вспышку кожного заболевания у антарктических рыб

Биологи обнаружили у антарктических рыб неизвестное кожное заболевание

N+1
Проклятый аксессуар: почему дочь Жаклин Кеннеди отказалась от семейной реликвии Проклятый аксессуар: почему дочь Жаклин Кеннеди отказалась от семейной реликвии

История аксессуара, который передавался в семье Жаклин Кеннеди с 1903 года

VOICE
Солнечный удар: как не допустить и избавиться от последствий Солнечный удар: как не допустить и избавиться от последствий

Учимся предотвращать солнечный удар и помогать себе и близким

РБК
5 семейных саг: длинное чтение на все лето 5 семейных саг: длинное чтение на все лето

Пять масштабных произведений для неторопливого чтения

СНОБ
На отдых На отдых

Море, горы и свежая рыба: топ-7 направлений для путешествия на несколько дней

Караван историй
5 фантастических книжных новинок, которые стоит прочесть этим летом 5 фантастических книжных новинок, которые стоит прочесть этим летом

Миры, созданные писателями, рано или поздно становятся реальностью

ТехИнсайдер
Специалисты Neovolt отвечают на вопросы читателей: все, что вы хотели знать про батареи Специалисты Neovolt отвечают на вопросы читателей: все, что вы хотели знать про батареи

Актуальные вопросы на тему покупки и эксплуатации аккумуляторов гаджетов

CHIP
На солнечной стороне На солнечной стороне

Как отдыхать летом с пользой для своей кожи

Лиза
Кто такие самцы Кто такие самцы

Чем отличаются самцы от самок?

СНОБ
Сладкие двойники Сладкие двойники

Стоит ли заменять сахар на его низкокалорийные аналоги?

Здоровье
Найден способ стать хорошим человеком Найден способ стать хорошим человеком

Можно ли заметно улучшить свои человеческие качества?

Psychologies
«Дамате» пересядет на собственные яйца «Дамате» пересядет на собственные яйца

Компания «Дамате» строит племрепродуктор второго порядка для индейки

Агроинвестор
Отец-тиран, безжалостный бизнесмен, растратчик: кем был медиамагнат Роберт Максвелл Отец-тиран, безжалостный бизнесмен, растратчик: кем был медиамагнат Роберт Максвелл

Вспоминаем историю медиамагната Роберта Максвелла

Forbes
Черный дым из выхлопной трубы: причины и способы их устранения Черный дым из выхлопной трубы: причины и способы их устранения

О каких «заболеваниях» ДВС свидетельствует черный дым?

РБК
Мимо туристических маршрутов. 7 неочевидных мест для отдыха в Турции Мимо туристических маршрутов. 7 неочевидных мест для отдыха в Турции

«Сноб» составил подборку небанальных мест для отдыха в Турции

СНОБ
Последний умер в зоопарке в 1936-м: в Австралии готовятся «воскресить» сумчатого волка Последний умер в зоопарке в 1936-м: в Австралии готовятся «воскресить» сумчатого волка

Истребленный вид может снова населить Зеленый континент

Вокруг света
Открыть в приложении