Отрывок из книги «Полный бред! Скептицизм в мире больших данных»

ForbesКультура

Бывает ли безвредный алкоголь, что такое зомби-статистика и когда можно верить числам

Фото Getty Images

«Числа идеально подходят для изложения чуши. Они кажутся объективными, но ими легко манипулировать, чтобы рассказывать нужную историю», — говорят главные в мире эксперты по чуши, которые придумали университетский курс о том, как противостоять фейкам и дезинформации. Кто и как использует числа, чтобы морочить нам голову и когда не надо верить процентам и статистике.

Доктор биологических наук Карл Бергстром борется с фейками и враньем на протяжение многих лет. Как ученый он специализируется на механизмах распространения информации в рамках биологических и социальных систем — от внутриклеточного контроля экспрессии генов до дезинформации в социальных сетях. В период пандемии он боролся с антиваксерами, а недавно осудил подход Илона Маска к подсчету фейковых аккаунтов в Twitter как ненаучный. По его словам, выборка из 100 подписчиков, на основе которой Маск намерен оценить пропорцию настоящих аккаунтов в соцсети, не может считаться репрезентативной — это влечет за собой систематическую ошибку отбора. Но по экспертной оценке Бергстрома, скорее всего, Маск всех троллит.

В Вашингтонском университете Бергстром вместе с другим биологом Джевином Уэстом ведет курс под названием Calling Bullshit («Как распознать вранье»), задача которого — научить студентов скептически относиться к информации и уметь оценивать ее правдивость или убедительно доказывать ее фейковость. Об этом актуальном и полезном навыке они написали одноименную с курсом книгу, которая мае выходит на русском языке под названием «Полный бред! Скептицизм в мире больших данных» в издательстве «Манн, Иванов и Фербер». Forbes публикует отрывок.

«Вера людей в числа невероятно сильна. Скептики заявляют, что они «просто хотят увидеть данные», или требуют, чтобы им показали «исходные данные», или настаивают на том, что «показатели должны говорить сами за себя». Нас убеждают, что «данные никогда не врут». Но эта точка зрения может быть опасной. Даже если величины или числа верны, их всё равно можно использовать, чтобы морочить голову. Чтобы числа были понятными, они должны находиться в уместном контексте. Их нужно демонстрировать так, чтобы нам было доступно честное сравнение.

Мы полагаемся на приблизительные оценки, когда рассматриваем такие показатели, как, например, рост взрослого человека в определенной стране. Мужчины из Нидерландов считаются самыми высокими в мире — в среднем 183 сантиметра. Но чтобы получить эти данные, не измеряли всех жителей страны и не вычисляли среднее всех полученных величин. Вместо этого исследователи использовали случайную выборку местных мужчин, измерили тех, кто в нее попал, и экстраполировали выводы на все население. Если бы кто-то измерил полдюжины мужчин и вычислил их средний рост, только по случайности результат мог бы получиться неверным. Предположим, среди них некоторые были необычайно высокими. Это называют ошибкой выборки. К счастью, обширная выборка, как правило, позволяет выровнять отклонения, так что такая ошибка минимально влияет на результат.

Проблемы могут возникнуть и с процедурой измерения. Допустим, исследователи попросили участников сообщить о своем росте, но мужчины склонны завышать цифры, причем мужчины маленького роста делают это чаще, чем высокие.

Другой источник ошибки — предвзятость самой выборки — еще опаснее. Предположим, вы решили определить рост людей, отправились на местную баскетбольную площадку и стали измерять игроков. Баскетболисты, как правило, выше среднего роста, так что ваша выборка будет нерепрезентативной для населения в целом и в итоге значение окажется слишком высоким.

Большинство ошибок такого рода не настолько очевидны. Есть много хитроумных подходов, из-за которых выборка перестает характеризовать популяцию. Сводная статистика может быть удобным способом обобщать информацию, но, если она некорректна, вы легко введете свою аудиторию в заблуждение.

В расчеты и факты, которые кажутся совершенно очевидными, ошибки закрадываются по разным причинам. Можно запутаться в числах. Можно использовать слишком маленькую выборку, которая некорректно отражает особенности всей группы. Некорректными могут оказаться методики, с помощью которых мы выводим числа из иной информации. И наконец, числа могут просто быть полной чушью, выдуманной с нуля в попытке придать убедительность жалким аргументам. Мы должны помнить об этом, когда нам что-то доказывают с помощью численных показателей. Говорят, что цифры никогда не лгут, но следует помнить, что они часто вводят в заблуждение.

Зловредные проценты

Двенадцатая глава книги Карла Сагана 1996 года «Мир, полный демонов» называется «Тонкое искусство снимать лапшу с ушей». В ней автор разносит мир рекламы, атакующий нас ошеломительными, но бессмысленными фактами и цифрами. Саган подчеркивает ту же проблему, которой мы касаемся в этой главе: числа легко сбивают людей с толку, и рекламодатели многие десятилетия пользуются этим, чтобы убеждать. «От вас не ждут вопросов, — пишет Саган. — Не думайте. Покупайте».

Печально известный заголовок Breitbart сходным образом лишил читателей возможности провести осмысленное сопоставление. В этом впечатляющем образце нагнетания паники сообщалось, что 2139 потенциальных бенефициаров законопроекта DREAM (The Development, Relief and Education for Alien Minors Act — законопроект, согласно которому дети нелегальных мигрантов, получившие высшее образование или отслужившие в армии США, могут получить вид на жительство в США) — взрослые, нелегально прибывшие в США в детском возрасте — были осуждены или обвинены в преступлениях, совершенных против американцев. Число кажется пугающим. Но, конечно, закон DREAM относился к большому числу людей: соответствующий статус имели одновременно около 700 000 человек и еще около 800 000 получили его в какой-то момент до отмены программы. Это означает, что только 0,3% получателей такого статуса — то есть менее одного из 300 — обвинялись в преступлениях против американцев.

Уже лучше, но как это число соотносится с аналогичными показателями, касающимися граждан Америки? Если 0,75% американцев сидят за решеткой, получается, что граждане США в два раза чаще оказываются заключенными или обвиненными в совершении преступления, чем дети нелегальных мигрантов, претендующие на гражданство? Около 8,6% американских граждан были обвинены в преступлении в какой-то момент свой жизни, так и тут потенциальные бенефициары программы DREAM выглядят неплохо.

Конечно, они моложе и в целом могли просто не успеть совершить преступление до получения статуса, потому что у них было на это меньше времени, чем у среднего американца. Но оказывается, что 30% граждан США за какие-нибудь правонарушения (не считая дорожно-транспортных) арестовывались уже к 23 годам. Даже если мы предположим, что числа Breitbart корректны, издание представило их без необходимой информации, которая нужна читателю, чтобы поместить их в контекст.

Таким образом, демонстрируя исходные числа, можно заставить сравнительно небольшое количество выглядеть большим. Мы помещаем число в контекст с помощью выражения его в процентах. Конечно, проценты являются ценным инструментом сравнения. Но существуют различные способы затруднять необходимые сравнения и в процентах. Например, проценты могут заставить крупные показатели выглядеть менее значительными.

В своем блоге вице-президент по поиску Google признал, что его компания сталкивается с проблемами фейковых новостей, дезинформации и другого неуместного контента: «Наши алгоритмы помогают выявлять надежные источники среди сотен миллиардов страниц в нашем поисковом индексе. Однако стало очевидным, что небольшая часть запросов в нашем повседневном трафике (около 0,25%) выдает непристойные или откровенно вводящие в заблуждение результаты, а это не то, что нужно людям». Тут можно отметить две вещи. В первую очередь нам демонстрируют огромное, но практически не имеющее к нам отношения число как бы в роли контекста. «Сотни миллиардов страниц в нашем поисковом индексе». Этому огромному числу противопоставлено крошечное 0,25%. Но сотни миллиардов не имеют к этому особого отношения: это количество проиндексированных страниц, а не число поисковых запросов. Неважно, проиндексированы десять тысяч или сотни миллиардов страниц. Если 0,25% запросов в Google ведут не туда, у вас один на четыре сотни шанс получить чушь в результате поиска.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Девушки и яйца: как стильные и вкусные завтраки приносят сотни миллионов Девушки и яйца: как стильные и вкусные завтраки приносят сотни миллионов

Как две девушки сделали бизнес на блюдах с яйцами?

Forbes
Самая скандальная деталь картины «Бурлаки» Репина: ты её и не замечала Самая скандальная деталь картины «Бурлаки» Репина: ты её и не замечала

Шум вокруг картины «Бурлаки на Волге» сослужил хорошую службу Илье Ефимовичу

VOICE
По местам Дягилева в Петербурге. Отрывок из книги По местам Дягилева в Петербурге. Отрывок из книги

Какие места в Петербурге определили творчество Сергея Дягилева

СНОБ
Польза и вред легкого голодания: может ли регулярное недоедание продлевать жизнь? Польза и вред легкого голодания: может ли регулярное недоедание продлевать жизнь?

Недоедание: уменьшения числа потребляемых калорий недостаточно

ТехИнсайдер
Как заснуть буквально за минуту: способ, который все мы бессознательно используем Как заснуть буквально за минуту: способ, который все мы бессознательно используем

Как помочь своему организму заснуть?

Maxim
Рассеянный склероз: невролог объяснила, как распознать первые симптомы опасного заболевания Рассеянный склероз: невролог объяснила, как распознать первые симптомы опасного заболевания

Как «поймать» дебют рассеянного склероза — рассказывает эксперт

Psychologies
Рождение легенды: как появился «тот самый» шрифт для логотипа «Вокруг Света» Рождение легенды: как появился «тот самый» шрифт для логотипа «Вокруг Света»

«Вокруг света» — журнал с историей

Вокруг света
Ирина Пегова: «Хочется быть тихой, спокойной, нежной...» Ирина Пегова: «Хочется быть тихой, спокойной, нежной...»

Режиссеры находятся в плену ролей, которые я когда-то сыграла

Коллекция. Караван историй
Выдача ипотеки в России обвалилась более чем втрое за месяц Выдача ипотеки в России обвалилась более чем втрое за месяц

Рынок розничного кредитования в России откатился до уровней 2015-2016 годов

Forbes
Как устроены тормозные колодки: быстрая и безопасная езда Как устроены тормозные колодки: быстрая и безопасная езда

Как тормоза влияют на скорость, управляемость и безопасность автомобиля?

ТехИнсайдер
Дерни себя за волосы: 10 странных способов сделать утро не таким мучительным Дерни себя за волосы: 10 странных способов сделать утро не таким мучительным

Самые действенные советы, как перестать ненавидеть утро и нормально просыпаться

VOICE
База тренера База тренера

Как отличить коуча здорового человека от коуча курильщика?

Собака.ru
Команда «Молодости» нашей: как энтузиасты влюбляют людей в Горный Алтай Команда «Молодости» нашей: как энтузиасты влюбляют людей в Горный Алтай

Если вы никогда не были в Горном Алтае, мы даже вам немного завидуем

РБК
Как получить новую работу во время кризиса: советы карьерных консультантов Как получить новую работу во время кризиса: советы карьерных консультантов

Все, что было сделано, не имеет смысла. Как выбраться из этого состояния?

Psychologies
«Белый царь для народов Востока»: как бурятский врач Китай завоевывал «Белый царь для народов Востока»: как бурятский врач Китай завоевывал

Петр Бадмаев предложил поистине наполеоновский план российской экспансии в Азию

Вокруг света
Удовольствие для себя или польза для других: что мотивирует нас работать? Удовольствие для себя или польза для других: что мотивирует нас работать?

Что придает нашей деятельности смысл

Psychologies
Человек, который боялся воды: путешествия Тура Хейердала Человек, который боялся воды: путешествия Тура Хейердала

Когда Тур Хейердал вышел в море под парусом «Кон-Тики», ему предрекали фиаско

Вокруг света
Насколько реально самовозгорание человека? Насколько реально самовозгорание человека?

Возможен ли феномен спонтанного самовозгорания человека

ТехИнсайдер
Как экономить, если денег и так ни на что не хватает? Способы, которые работают Как экономить, если денег и так ни на что не хватает? Способы, которые работают

Как экономить еще сильнее, если ты уже экономишь?

VOICE
Секретный старый порт: почему стоит отправиться в турецкий город Гечек Секретный старый порт: почему стоит отправиться в турецкий город Гечек

У туристов Гечек славится мягким климатом и длинным купальным сезоном

Forbes
Неизведанная Калмыкия Неизведанная Калмыкия

Не обязательно ехать на край света, чтобы увидеть буддистские реликвии

Лиза
6 знаковых фильмов Милоша Формана 6 знаковых фильмов Милоша Формана

Картины прославленного чешско-американского режиссера

Esquire
Чтение выходного дня: фрагмент книги «Так можно: выстроить границы в отношениях с трудными родителями» Чтение выходного дня: фрагмент книги «Так можно: выстроить границы в отношениях с трудными родителями»

Как понять поведение наших родителей — отрывок из книги Дэвида М. Аллена

Правила жизни
Новые возможности и заслуженные победы: семь лучших мотивирующих фильмов Новые возможности и заслуженные победы: семь лучших мотивирующих фильмов

Картины о неунывающих энтузиастах и мечтателях, которые не боятся трудностей

Forbes
По прозвищу «Белокурый яд»: как Стелла Гольдшлаг погубила три тысячи евреев По прозвищу «Белокурый яд»: как Стелла Гольдшлаг погубила три тысячи евреев

Стелла Гольдшлаг — еврейка, помогающая гестапо находить своих соотечественников

VOICE
Новые Новые

Круизные лайнеры не гарантируют выживания пассажиров в кораблекрушении

ТехИнсайдер
Начнём с того, что нельзя доверить другим секс и еду: как перестать брать задачи на себя и начать делегировать Начнём с того, что нельзя доверить другим секс и еду: как перестать брать задачи на себя и начать делегировать

Нельзя доверить другим секс и еду: как научиться делегировать обязанности?

VC.RU
5 современных методов лечения рака: на что надеяться в 2020-е годы 5 современных методов лечения рака: на что надеяться в 2020-е годы

Способы лечить и останавливать развитие онкологических заболеваний

Psychologies
Как Тесса Лау создала строительных роботов-помощников и привлекла $45 млн Как Тесса Лау создала строительных роботов-помощников и привлекла $45 млн

На создание компании Dusty Robotics Тессу Лау вдохновил ремонт в ее доме

Forbes
Ирина Шейк 25 лет спустя: как выглядит мама русской модели, покорившей мир Ирина Шейк 25 лет спустя: как выглядит мама русской модели, покорившей мир

Ольга Шайхлисламова со знаменитой дочерью Ириной Шейк невероятно похожи

VOICE
Открыть в приложении