Отрывок из книги «Полный бред! Скептицизм в мире больших данных»

N+1Наука

«Полный бред! Скептицизм в мире больших данных». Как относиться к получаемой информации критически

Манн, Иванов и Фербер, научно-популярные книгоиздатели

Если кто-то подкрепляет утверждения затейливыми терминами, цифрами и красивыми графиками, это еще не значит, что ему можно доверять. Статистика и язык точных наук могут быть всего лишь инструментами, призванными скрыть обман. Тот, кто умеет анализировать и перепроверять информацию, скорее всего, заметит подвох — остальные рискуют попасться в ловушку. В книге «Полный бред! Скептицизм в мире больших данных» (издательство «Манн, Иванов и Фербер»), переведенной на русский Елизаветой Пономаревой, ученые Карл Бергстром и Джевин Уэст рассказывают, как распознать чушь (в оригинале — bullshit) и почему для этого совсем не обязательно быть специалистом, а достаточно воспользоваться обыкновенной логикой. Предлагаем вам ознакомиться с фрагментом, посвященным «ошибке прокурора» и уровню значимости (p-value).

Ошибка прокурора

Как мы видели, в большинстве научных исследований ищут закономерности в данных, позволяющие делать выводы о мире. Но как отличить закономерность от случайного шума? И как определить, насколько она значима? Существует несколько способов это сделать, и самый распространенный — это использование р-значения. Грубо говоря, р-значение указывает, насколько вероятно, что наблюдаемая закономерность возникла по чистой случайности. Если это маловероятно, то мы можем сказать, что результат статистически значим. Но что это на самом деле означает и как нам трактовать р-значение? Мы ответим на эти вопросы с помощью короткой истории.

Представьте, что вы известный адвокат, который защищает скромного биолога, обвиняемого в самом поразительном похищении предмета искусства в современной истории.

Это сенсационное преступление. Богатая собирательница отправила частную коллекцию из тридцати шедевров европейского искусства на охраняемом поезде из своего особняка в Санта-Кларе в аукционный дом в Нью-Йорке. Когда поезд достиг пункта назначения, коробки отнесли в аукционный дом для распаковки. Путешествие прошло без происшествий, и к коробкам, на первый взгляд, никто не прикасался. Но, к всеобщему ужасу, четыре самые ценные картины были вырезаны из рам и исчезли! Ни полиция, ни страховая компания не нашли ни единой улики, не считая единственного отпечатка пальца на раме одной из пропавших работ. Украденные шедевры так никогда и не отыскали.

При отсутствии каких-либо иных наметок полиция прогнала от печаток пальца через огромную базу данных ФБР и нашла совпадение — отпечаток вашего клиента. (Он сдал свои отпечатки Администрации транспортной безопасности в обмен на возможность проходить досмотр в аэропорту, не снимая ботинок.) На допросе выяснилось, что у вашего клиента нет алиби. Он утверждает, что ни с кем не контактировал две недели, пока выслеживал окольцованную куропатку в горах Высокая Сьерра в рамках научного проекта.

Несмотря на отсутствие алиби, вы уверены, что ваш клиент не может быть виновен. Он всего лишь застенчивый ученый, а не хладнокровный похититель шедевров. У него уже есть два гранта NSF на исследование размножения куропаток, и, похоже, он не нуждается в дополнительных источниках дохода. К тому же, насколько вы заметили, он ни черта не понимает в искусстве; да что там, он считает, что Донателло — это черепашка-ниндзя.

Тем не менее начинается судебный процесс, и вы сталкиваетесь с блестящей молодой звездой прокуратуры. После описания всех остальных доказательств вины вашего клиента — слабых и косвенных — прокурор переходит к своему козырю, отпечатку пальца. Прокурор рассказывает присяжным, как именно компьютер сопоставляет отпечатки пальцев, и завершает свое выступление словами: «Нет абсолютно никаких шансов случайного совпадения настолько идентичных отпечатков».

Вы опровергаете его заявление: «По вашим словам, нет абсолютно никаких шансов настолько точного совпадения. Но так не бывает. В каждом тесте есть по крайней мере небольшой шанс ошибки». — «Конечно, — уступает он, — в принципе, тесты могут ошибаться. Но на практике шанс, что это случится, нулевой. Исследования ФБР показывают, что существует один шанс на десять миллионов, что два отпечатка совпадут настолько же точно. Один на десять миллионов — тут нет места сомнениям!»

Именно этого вы и ждали. Вы обращаетесь к присяжным и рисуете таблицу на три строки и два столбца на большом листе бумаги. Выглядит она примерно вот так.

«Я думаю, все мы согласны, что это преступление было кем-то совершено. И давайте также предположим, что отпечатки виновного есть в базе данных. Может быть, и нет, — обращаетесь вы к прокурору, — но это ослабит ваши доказательства. Так что давайте предположим, что они есть в базе». Прокурор кивает. «Тогда таблица должна выглядеть примерно вот так». Вы заполняете верхний ряд большим красным маркером.

Повернувшись к прокурору, вы интересуетесь: «Сколько человек включены в эту вашу базу ФБР?» Он перебивает вас: «Возражение, Ваша честь! Какое отношение это имеет к делу?» — «В этом и есть вся суть дела, — объясняете вы. — Я убежден, что объясню это все в течение следующих нескольких минут». — «Возражение отклонено». Сторона обвинения признается, что, если учесть все отпечатки пальцев преступников в США, все отпечатки гражданских лиц, полученные при проверке их биографий, и все отпечатки из базы Администрации транспортной безопасности, в базе представлено приблизительно пятьдесят миллионов американцев. И конечно, большинство отпечатков в базе не совпадают с тем, что найден на раме.

«Итак, теперь мы можем заполнять таблицу дальше», — говорите вы и вписываете число 50 000 000 в нижний правый угол.

Теперь вы указываете на нижний левый угол (это невиновные люди, чьи отпечатки тем не менее совпадут с найденным) и спрашиваете: «Как вы думаете, что нужно вписать сюда?»

Вы смотрите прямо на прокурора. «Вы сказали, что существует один шанс на десять миллионов, что алгоритм нашел неправильное совпадение. Это значит, что среди пятидесяти миллионов человек в этой базе должно быть примерно пять, чьи отпечатки совпадают с найденным и на месте преступления. Так что давайте заполним таблицу следующим образом»

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Дети и шимпанзе отказались от вознаграждения ради видео с социальными взаимодействиями Дети и шимпанзе отказались от вознаграждения ради видео с социальными взаимодействиями

Дети и взрослые шимпанзе проявляют особый интерес к социальным взаимодействиям

N+1
Как определить, что ребенок созрел для лагеря? 10 основных ошибок родителей Как определить, что ребенок созрел для лагеря? 10 основных ошибок родителей

Дети взрослеют, и перед родителями встает множество вопросов

Psychologies
Разработана первая вакцина от птичьего гриппа для коров Разработана первая вакцина от птичьего гриппа для коров

Ученые разработали первую мРНК-вакцину от птичьего гриппа для коров

ТехИнсайдер
Как галактики превращаются в ярчайшие квазары: загадка, о которой спорят до сих пор Как галактики превращаются в ярчайшие квазары: загадка, о которой спорят до сих пор

Что-то странное происходит во Вселенной

ТехИнсайдер
Ешь, двигайся, спи Ешь, двигайся, спи

Как повседневные решения влияют на здоровье и долголетие

kiozk originals
«Разведчики внешних планет»: история «Пионеров» и «Вояджеров» «Разведчики внешних планет»: история «Пионеров» и «Вояджеров»

Фрагмент из книги «Разведчики внешних планет», посвященным загадке «Пионеров»

N+1
20 легендарных мультфильмов для всех возрастов, которые должен посмотреть каждый хоть раз в жизни 20 легендарных мультфильмов для всех возрастов, которые должен посмотреть каждый хоть раз в жизни

Эти анимационные фильмы могут поднять настроение не только детям

Правила жизни
Великий недогерой Великий недогерой

Ксения Рождественская о французском актере Жане-Луи Трентиньяне

Weekend
История советского контрснайпера: как школьный завхоз уложил 422 фашиста История советского контрснайпера: как школьный завхоз уложил 422 фашиста

Василий Теркин действительно существовал и был одним из лучших контрснайперов

ТехИнсайдер
Эти вещи ни в коем случае нельзя хранить дома: рассказывает эксперт Васту Эти вещи ни в коем случае нельзя хранить дома: рассказывает эксперт Васту

Есть вещи, которые ни в коем случае не стоит хранить в доме. Рассказываем, какие

VOICE
Вишенка против краба Вишенка против краба

История борьбы с нейробластомой

СНОБ
Анастасия Пиорунская Анастасия Пиорунская

Техно-экобренд из Петербурга? Да!

Собака.ru
Борис Эйфман — о танце, Петербурге и заслуженном озарении Борис Эйфман — о танце, Петербурге и заслуженном озарении

Борис Эйфман — о том, почему из раза в раз обращается к текстам Достоевского

РБК
Провокаторы: кто они и чем опасны Провокаторы: кто они и чем опасны

Как выйти из конфликта с провокатором?

Psychologies
Датчик коленвала: что это и как его проверить Датчик коленвала: что это и как его проверить

Как понять, что датчик коленвала захандрил и что делать в такой ситуации?

РБК
«Не хлебом единым»: как быстро приготовить вкусный сэндвич «Не хлебом единым»: как быстро приготовить вкусный сэндвич

Наш сегодняшний кулинарный герой — сэндвич

Psychologies
На курьих ножках и у чёрта в решете: как строили деревянные дома на Руси На курьих ножках и у чёрта в решете: как строили деревянные дома на Руси

Одним из самых уважаемых занятий в прошлом считалось плотницкое дело

Вокруг света
Цена прохлады: как выбрать кондиционер для дома Цена прохлады: как выбрать кондиционер для дома

На что обратить внимание при выборе кондиционера?

CHIP
Живущие в неволе черепахи отказались стареть Живущие в неволе черепахи отказались стареть

Скорость старения многих видов черепах при содержании в неволе равна нулю

N+1
Топ-5 летних проблем с ногами Топ-5 летних проблем с ногами

Какие несовершенства мешают нам носить сандалии и как с ними бороться?

Лиза
Маленькая, но горная птичка: зачем ученые переселили колибри и что из этого вышло Маленькая, но горная птичка: зачем ученые переселили колибри и что из этого вышло

Крылатые аборигены Нового Света не вынесут перемен

Вокруг света
Математик — о том, зачем идти в науку и как себя вести молодому ученому Математик — о том, зачем идти в науку и как себя вести молодому ученому

Почему наука — это потребность, а не вопрос выбора

РБК
Ягода-клубника Ягода-клубника

Ягодные десерты менее калорийны, чем кремовые пирожные и торты

Здоровье
Как ведьмы стали женщинами Как ведьмы стали женщинами

Как в ведьмах видели угрозу государству, церкви и капитализму

Weekend
Первые соревнования по плаванию проводились в открытом море: 5 шокирующих фактов из истории Олимпийских игр Первые соревнования по плаванию проводились в открытом море: 5 шокирующих фактов из истории Олимпийских игр

Все самое интересное и неизвестное о популярных международных соревнованиях

ТехИнсайдер
«Живите долго!»: простые советы долгожителей «Живите долго!»: простые советы долгожителей

Как встать на путь к долголетию?

Psychologies
Как вернуть форму намокшей соломенной шляпе в домашних условиях - это просто! Как вернуть форму намокшей соломенной шляпе в домашних условиях - это просто!

Лето - время соломенных шляп

VOICE
Астрономы уличили звезды в областях звездообразования в краже планет друг у друга Астрономы уличили звезды в областях звездообразования в краже планет друг у друга

Кража планет у других звезд являются обычными процессами

N+1
Нетворкинг и устойчивость: кому нужны специальные женские программы MBA Нетворкинг и устойчивость: кому нужны специальные женские программы MBA

Женщины стали чаще получать степень MBA

Forbes
Королева Виктория и царь зулусов: самый странный брак в истории Виндзоров Королева Виктория и царь зулусов: самый странный брак в истории Виндзоров

В XIX веке королева Великобритании Виктория стала женой африканского царя

VOICE
Открыть в приложении