Отрывок из книги «Полный бред! Скептицизм в мире больших данных»

N+1Наука

«Полный бред! Скептицизм в мире больших данных». Как относиться к получаемой информации критически

Манн, Иванов и Фербер, научно-популярные книгоиздатели

Если кто-то подкрепляет утверждения затейливыми терминами, цифрами и красивыми графиками, это еще не значит, что ему можно доверять. Статистика и язык точных наук могут быть всего лишь инструментами, призванными скрыть обман. Тот, кто умеет анализировать и перепроверять информацию, скорее всего, заметит подвох — остальные рискуют попасться в ловушку. В книге «Полный бред! Скептицизм в мире больших данных» (издательство «Манн, Иванов и Фербер»), переведенной на русский Елизаветой Пономаревой, ученые Карл Бергстром и Джевин Уэст рассказывают, как распознать чушь (в оригинале — bullshit) и почему для этого совсем не обязательно быть специалистом, а достаточно воспользоваться обыкновенной логикой. Предлагаем вам ознакомиться с фрагментом, посвященным «ошибке прокурора» и уровню значимости (p-value).

Ошибка прокурора

Как мы видели, в большинстве научных исследований ищут закономерности в данных, позволяющие делать выводы о мире. Но как отличить закономерность от случайного шума? И как определить, насколько она значима? Существует несколько способов это сделать, и самый распространенный — это использование р-значения. Грубо говоря, р-значение указывает, насколько вероятно, что наблюдаемая закономерность возникла по чистой случайности. Если это маловероятно, то мы можем сказать, что результат статистически значим. Но что это на самом деле означает и как нам трактовать р-значение? Мы ответим на эти вопросы с помощью короткой истории.

Представьте, что вы известный адвокат, который защищает скромного биолога, обвиняемого в самом поразительном похищении предмета искусства в современной истории.

Это сенсационное преступление. Богатая собирательница отправила частную коллекцию из тридцати шедевров европейского искусства на охраняемом поезде из своего особняка в Санта-Кларе в аукционный дом в Нью-Йорке. Когда поезд достиг пункта назначения, коробки отнесли в аукционный дом для распаковки. Путешествие прошло без происшествий, и к коробкам, на первый взгляд, никто не прикасался. Но, к всеобщему ужасу, четыре самые ценные картины были вырезаны из рам и исчезли! Ни полиция, ни страховая компания не нашли ни единой улики, не считая единственного отпечатка пальца на раме одной из пропавших работ. Украденные шедевры так никогда и не отыскали.

При отсутствии каких-либо иных наметок полиция прогнала от печаток пальца через огромную базу данных ФБР и нашла совпадение — отпечаток вашего клиента. (Он сдал свои отпечатки Администрации транспортной безопасности в обмен на возможность проходить досмотр в аэропорту, не снимая ботинок.) На допросе выяснилось, что у вашего клиента нет алиби. Он утверждает, что ни с кем не контактировал две недели, пока выслеживал окольцованную куропатку в горах Высокая Сьерра в рамках научного проекта.

Несмотря на отсутствие алиби, вы уверены, что ваш клиент не может быть виновен. Он всего лишь застенчивый ученый, а не хладнокровный похититель шедевров. У него уже есть два гранта NSF на исследование размножения куропаток, и, похоже, он не нуждается в дополнительных источниках дохода. К тому же, насколько вы заметили, он ни черта не понимает в искусстве; да что там, он считает, что Донателло — это черепашка-ниндзя.

Тем не менее начинается судебный процесс, и вы сталкиваетесь с блестящей молодой звездой прокуратуры. После описания всех остальных доказательств вины вашего клиента — слабых и косвенных — прокурор переходит к своему козырю, отпечатку пальца. Прокурор рассказывает присяжным, как именно компьютер сопоставляет отпечатки пальцев, и завершает свое выступление словами: «Нет абсолютно никаких шансов случайного совпадения настолько идентичных отпечатков».

Вы опровергаете его заявление: «По вашим словам, нет абсолютно никаких шансов настолько точного совпадения. Но так не бывает. В каждом тесте есть по крайней мере небольшой шанс ошибки». — «Конечно, — уступает он, — в принципе, тесты могут ошибаться. Но на практике шанс, что это случится, нулевой. Исследования ФБР показывают, что существует один шанс на десять миллионов, что два отпечатка совпадут настолько же точно. Один на десять миллионов — тут нет места сомнениям!»

Именно этого вы и ждали. Вы обращаетесь к присяжным и рисуете таблицу на три строки и два столбца на большом листе бумаги. Выглядит она примерно вот так.

«Я думаю, все мы согласны, что это преступление было кем-то совершено. И давайте также предположим, что отпечатки виновного есть в базе данных. Может быть, и нет, — обращаетесь вы к прокурору, — но это ослабит ваши доказательства. Так что давайте предположим, что они есть в базе». Прокурор кивает. «Тогда таблица должна выглядеть примерно вот так». Вы заполняете верхний ряд большим красным маркером.

Повернувшись к прокурору, вы интересуетесь: «Сколько человек включены в эту вашу базу ФБР?» Он перебивает вас: «Возражение, Ваша честь! Какое отношение это имеет к делу?» — «В этом и есть вся суть дела, — объясняете вы. — Я убежден, что объясню это все в течение следующих нескольких минут». — «Возражение отклонено». Сторона обвинения признается, что, если учесть все отпечатки пальцев преступников в США, все отпечатки гражданских лиц, полученные при проверке их биографий, и все отпечатки из базы Администрации транспортной безопасности, в базе представлено приблизительно пятьдесят миллионов американцев. И конечно, большинство отпечатков в базе не совпадают с тем, что найден на раме.

«Итак, теперь мы можем заполнять таблицу дальше», — говорите вы и вписываете число 50 000 000 в нижний правый угол.

Теперь вы указываете на нижний левый угол (это невиновные люди, чьи отпечатки тем не менее совпадут с найденным) и спрашиваете: «Как вы думаете, что нужно вписать сюда?»

Вы смотрите прямо на прокурора. «Вы сказали, что существует один шанс на десять миллионов, что алгоритм нашел неправильное совпадение. Это значит, что среди пятидесяти миллионов человек в этой базе должно быть примерно пять, чьи отпечатки совпадают с найденным и на месте преступления. Так что давайте заполним таблицу следующим образом»

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Силиконовая трубка с лекарством помогла бороться с раком мочевого пузыря изнутри Силиконовая трубка с лекарством помогла бороться с раком мочевого пузыря изнутри

Ка работает система доставки препарата для лечения рака мочевого пузыря

N+1
«Улыбайтесь и машите руками»: Кейт Миддлтон тренирует детей перед выходом в свет «Улыбайтесь и машите руками»: Кейт Миддлтон тренирует детей перед выходом в свет

Наследники герцогов Кембриджских очаровали поданных

VOICE
Палеогенетики уточили популяционную историю Таримской впадины Палеогенетики уточили популяционную историю Таримской впадины

Как ученые анализировали геномы древних людей из Таримской впадины

N+1
Война дала и отобрала все: каким был «несравненный партизан» Нестор Махно Война дала и отобрала все: каким был «несравненный партизан» Нестор Махно

Смыслом жизни Нестора Махно была война

Вокруг света
Цветовые ошибки: как один оттенок способен испортить весь интерьер Цветовые ошибки: как один оттенок способен испортить весь интерьер

Какие ошибки в выборе цвета стен способны испортить весь интерьер?

VOICE
20 самых потешных указов Петра I 20 самых потешных указов Петра I

Прекрасные и мудрые распоряжения великого русского императора

Maxim
Почему мы остаемся с нелюбимыми: 5 нелепых отговорок Почему мы остаемся с нелюбимыми: 5 нелепых отговорок

Как мы сами для себя оправдываем решение остаться с нелюбимыми?

Psychologies
Заново пережить травму: что такое триггеры и как они работают Заново пережить травму: что такое триггеры и как они работают

Что такое психологические триггеры, какими они бывают, как работают

Forbes
Самые любимые настольные игры в СССР Самые любимые настольные игры в СССР

Иногда советским гражданам требовалось оторваться от шахмат и домино

Maxim
«Живописец душ» Фальконеса: гимн Барселоне XX века и летопись человеческих страстей «Живописец душ» Фальконеса: гимн Барселоне XX века и летопись человеческих страстей

Отрывок из романа Ильдефонсо Фальконеса «Живописец душ»

Forbes
Чайлдфри: осознать и отстоять Чайлдфри: осознать и отстоять

Чайлдфри: как разобраться в себе или отстоять свою точку зрения без конфликта

Новый очаг
Запасы из морозилки: какие древности находят под снегом и льдом Запасы из морозилки: какие древности находят под снегом и льдом

Вечная мерзлота скрывает останки древних растений, животных и людей

Вокруг света
История одной вещи: железный конструктор, заменявший советским детям Lego История одной вещи: железный конструктор, заменявший советским детям Lego

История железного конструктора, который до сих пор вызывает приятную ностальгию

Правила жизни
Зона свежести в холодильнике: что это и зачем она нужна Зона свежести в холодильнике: что это и зачем она нужна

Стоит ли переплачивать за зону свежести в холодильнике?

CHIP
Арктический город будущего Арктический город будущего

Реальные технологии строительства в Арктике приходили из Норильска

ТехИнсайдер
Каким был принц Филипп: 9 фактов из биографии супруга королевы Елизаветы Каким был принц Филипп: 9 фактов из биографии супруга королевы Елизаветы

О яркой жизни супруга королевы Великобритании

РБК
«Мой отец кровоточит историей»: как постпамять влияет на жизнь поколений «Мой отец кровоточит историей»: как постпамять влияет на жизнь поколений

Как опыт коллективной травмы передается следующим поколениям

Forbes
5 самых скандальных фото-фейков в истории 5 самых скандальных фото-фейков в истории

Самые скандальные фото-фейки из тех, что известны на сегодня

ТехИнсайдер
В мире костюмов: секреты стиля Николая Дроздова В мире костюмов: секреты стиля Николая Дроздова

Николай Дроздов — воплощение стиля ученого-полевика

Правила жизни
«Дом — это не только деревяшки, но еще и память». Как житель Петербурга восстанавливает деревню и пытается спасти древний народ от вымирания «Дом — это не только деревяшки, но еще и память». Как житель Петербурга восстанавливает деревню и пытается спасти древний народ от вымирания

Как путешественники спасают древний народ от вымирания

СНОБ
Дом в Лас-Вегасе, конопляная Мекка и танцы в костюме пчелы: как сейчас живет Майк Тайсон Дом в Лас-Вегасе, конопляная Мекка и танцы в костюме пчелы: как сейчас живет Майк Тайсон

Как поживает «самый плохой человек на планете» Майк Тайсон

Maxim
7 советов, как выбрать сковороду для дома и не прогадать 7 советов, как выбрать сковороду для дома и не прогадать

Как выбрать сковороду

Лиза
Автопутешествие: как подготовить машину, что взять, как сэкономить Автопутешествие: как подготовить машину, что взять, как сэкономить

Как подготовить машину к дальней дороге, можно ли сэкономить в такой поездке

РБК
Анна Старшенбаум: «Я люблю жизнь. Мне очень многое в ней нравится» Анна Старшенбаум: «Я люблю жизнь. Мне очень многое в ней нравится»

Анну Старшенбаум называют «ангелом с детским взглядом»

Здоровье
Жизнь с роботом, развод с психопатом: отрывок из романа «Созданы для любви» Жизнь с роботом, развод с психопатом: отрывок из романа «Созданы для любви»

Глава из романа «Созданы для любви» — абсурдного и тонкого рассуждения о семье

Forbes
Особо опасны: 13 культовых фильмов о маньяках и серийных убийцах, которые стоит посмотреть всем любителям пощекотать нервы Особо опасны: 13 культовых фильмов о маньяках и серийных убийцах, которые стоит посмотреть всем любителям пощекотать нервы

Фильмы о серийных убийцах, от которых станет не по себе

Правила жизни
Датчик коленвала: что это и как его проверить Датчик коленвала: что это и как его проверить

Как понять, что датчик коленвала захандрил и что делать в такой ситуации?

РБК
Не только «Гарри Поттер»: 5 отличных романов Джоан Роулинг, которые стоит прочесть Не только «Гарри Поттер»: 5 отличных романов Джоан Роулинг, которые стоит прочесть

Книги, которые докажут, что Джоан Роулинг разносторонний и талантливый автор

ТехИнсайдер
«Сын разрушил нашу семью»: Лиам Пейн разорвал отношения с Шерил Коул «Сын разрушил нашу семью»: Лиам Пейн разорвал отношения с Шерил Коул

Лиам Пейн поделился откровениями о личной жизни

VOICE
5 фантастических книжных новинок, которые стоит прочесть этим летом 5 фантастических книжных новинок, которые стоит прочесть этим летом

Миры, созданные писателями, рано или поздно становятся реальностью

ТехИнсайдер
Открыть в приложении