Отрывок из книги «Полный бред! Скептицизм в мире больших данных»

ForbesКультура

Бывает ли безвредный алкоголь, что такое зомби-статистика и когда можно верить числам

Фото Getty Images

«Числа идеально подходят для изложения чуши. Они кажутся объективными, но ими легко манипулировать, чтобы рассказывать нужную историю», — говорят главные в мире эксперты по чуши, которые придумали университетский курс о том, как противостоять фейкам и дезинформации. Кто и как использует числа, чтобы морочить нам голову и когда не надо верить процентам и статистике.

Доктор биологических наук Карл Бергстром борется с фейками и враньем на протяжение многих лет. Как ученый он специализируется на механизмах распространения информации в рамках биологических и социальных систем — от внутриклеточного контроля экспрессии генов до дезинформации в социальных сетях. В период пандемии он боролся с антиваксерами, а недавно осудил подход Илона Маска к подсчету фейковых аккаунтов в Twitter как ненаучный. По его словам, выборка из 100 подписчиков, на основе которой Маск намерен оценить пропорцию настоящих аккаунтов в соцсети, не может считаться репрезентативной — это влечет за собой систематическую ошибку отбора. Но по экспертной оценке Бергстрома, скорее всего, Маск всех троллит.

В Вашингтонском университете Бергстром вместе с другим биологом Джевином Уэстом ведет курс под названием Calling Bullshit («Как распознать вранье»), задача которого — научить студентов скептически относиться к информации и уметь оценивать ее правдивость или убедительно доказывать ее фейковость. Об этом актуальном и полезном навыке они написали одноименную с курсом книгу, которая мае выходит на русском языке под названием «Полный бред! Скептицизм в мире больших данных» в издательстве «Манн, Иванов и Фербер». Forbes публикует отрывок.

«Вера людей в числа невероятно сильна. Скептики заявляют, что они «просто хотят увидеть данные», или требуют, чтобы им показали «исходные данные», или настаивают на том, что «показатели должны говорить сами за себя». Нас убеждают, что «данные никогда не врут». Но эта точка зрения может быть опасной. Даже если величины или числа верны, их всё равно можно использовать, чтобы морочить голову. Чтобы числа были понятными, они должны находиться в уместном контексте. Их нужно демонстрировать так, чтобы нам было доступно честное сравнение.

Мы полагаемся на приблизительные оценки, когда рассматриваем такие показатели, как, например, рост взрослого человека в определенной стране. Мужчины из Нидерландов считаются самыми высокими в мире — в среднем 183 сантиметра. Но чтобы получить эти данные, не измеряли всех жителей страны и не вычисляли среднее всех полученных величин. Вместо этого исследователи использовали случайную выборку местных мужчин, измерили тех, кто в нее попал, и экстраполировали выводы на все население. Если бы кто-то измерил полдюжины мужчин и вычислил их средний рост, только по случайности результат мог бы получиться неверным. Предположим, среди них некоторые были необычайно высокими. Это называют ошибкой выборки. К счастью, обширная выборка, как правило, позволяет выровнять отклонения, так что такая ошибка минимально влияет на результат.

Проблемы могут возникнуть и с процедурой измерения. Допустим, исследователи попросили участников сообщить о своем росте, но мужчины склонны завышать цифры, причем мужчины маленького роста делают это чаще, чем высокие.

Другой источник ошибки — предвзятость самой выборки — еще опаснее. Предположим, вы решили определить рост людей, отправились на местную баскетбольную площадку и стали измерять игроков. Баскетболисты, как правило, выше среднего роста, так что ваша выборка будет нерепрезентативной для населения в целом и в итоге значение окажется слишком высоким.

Большинство ошибок такого рода не настолько очевидны. Есть много хитроумных подходов, из-за которых выборка перестает характеризовать популяцию. Сводная статистика может быть удобным способом обобщать информацию, но, если она некорректна, вы легко введете свою аудиторию в заблуждение.

В расчеты и факты, которые кажутся совершенно очевидными, ошибки закрадываются по разным причинам. Можно запутаться в числах. Можно использовать слишком маленькую выборку, которая некорректно отражает особенности всей группы. Некорректными могут оказаться методики, с помощью которых мы выводим числа из иной информации. И наконец, числа могут просто быть полной чушью, выдуманной с нуля в попытке придать убедительность жалким аргументам. Мы должны помнить об этом, когда нам что-то доказывают с помощью численных показателей. Говорят, что цифры никогда не лгут, но следует помнить, что они часто вводят в заблуждение.

Зловредные проценты

Двенадцатая глава книги Карла Сагана 1996 года «Мир, полный демонов» называется «Тонкое искусство снимать лапшу с ушей». В ней автор разносит мир рекламы, атакующий нас ошеломительными, но бессмысленными фактами и цифрами. Саган подчеркивает ту же проблему, которой мы касаемся в этой главе: числа легко сбивают людей с толку, и рекламодатели многие десятилетия пользуются этим, чтобы убеждать. «От вас не ждут вопросов, — пишет Саган. — Не думайте. Покупайте».

Печально известный заголовок Breitbart сходным образом лишил читателей возможности провести осмысленное сопоставление. В этом впечатляющем образце нагнетания паники сообщалось, что 2139 потенциальных бенефициаров законопроекта DREAM (The Development, Relief and Education for Alien Minors Act — законопроект, согласно которому дети нелегальных мигрантов, получившие высшее образование или отслужившие в армии США, могут получить вид на жительство в США) — взрослые, нелегально прибывшие в США в детском возрасте — были осуждены или обвинены в преступлениях, совершенных против американцев. Число кажется пугающим. Но, конечно, закон DREAM относился к большому числу людей: соответствующий статус имели одновременно около 700 000 человек и еще около 800 000 получили его в какой-то момент до отмены программы. Это означает, что только 0,3% получателей такого статуса — то есть менее одного из 300 — обвинялись в преступлениях против американцев.

Уже лучше, но как это число соотносится с аналогичными показателями, касающимися граждан Америки? Если 0,75% американцев сидят за решеткой, получается, что граждане США в два раза чаще оказываются заключенными или обвиненными в совершении преступления, чем дети нелегальных мигрантов, претендующие на гражданство? Около 8,6% американских граждан были обвинены в преступлении в какой-то момент свой жизни, так и тут потенциальные бенефициары программы DREAM выглядят неплохо.

Конечно, они моложе и в целом могли просто не успеть совершить преступление до получения статуса, потому что у них было на это меньше времени, чем у среднего американца. Но оказывается, что 30% граждан США за какие-нибудь правонарушения (не считая дорожно-транспортных) арестовывались уже к 23 годам. Даже если мы предположим, что числа Breitbart корректны, издание представило их без необходимой информации, которая нужна читателю, чтобы поместить их в контекст.

Таким образом, демонстрируя исходные числа, можно заставить сравнительно небольшое количество выглядеть большим. Мы помещаем число в контекст с помощью выражения его в процентах. Конечно, проценты являются ценным инструментом сравнения. Но существуют различные способы затруднять необходимые сравнения и в процентах. Например, проценты могут заставить крупные показатели выглядеть менее значительными.

В своем блоге вице-президент по поиску Google признал, что его компания сталкивается с проблемами фейковых новостей, дезинформации и другого неуместного контента: «Наши алгоритмы помогают выявлять надежные источники среди сотен миллиардов страниц в нашем поисковом индексе. Однако стало очевидным, что небольшая часть запросов в нашем повседневном трафике (около 0,25%) выдает непристойные или откровенно вводящие в заблуждение результаты, а это не то, что нужно людям». Тут можно отметить две вещи. В первую очередь нам демонстрируют огромное, но практически не имеющее к нам отношения число как бы в роли контекста. «Сотни миллиардов страниц в нашем поисковом индексе». Этому огромному числу противопоставлено крошечное 0,25%. Но сотни миллиардов не имеют к этому особого отношения: это количество проиндексированных страниц, а не число поисковых запросов. Неважно, проиндексированы десять тысяч или сотни миллиардов страниц. Если 0,25% запросов в Google ведут не туда, у вас один на четыре сотни шанс получить чушь в результате поиска.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Время вторых: сколько зарабатывают победители национальных кубков в Европе Время вторых: сколько зарабатывают победители национальных кубков в Европе

Что (кроме почета) получают победители национальных кубков в топ-5 лигах Европы

Forbes
Лучше научно-фантастические циклы с эпическим размахом, которых хватит надолго Лучше научно-фантастические циклы с эпическим размахом, которых хватит надолго

Лучшие фантастические циклы книг

ТехИнсайдер
Основательница ансамбля «Толока» — о традиции и современности Основательница ансамбля «Толока» — о традиции и современности

Как появилась идея ансамбля «Толока» и как она воплотилась в жизнь?

РБК
Либидо, память тела и внутренние установки: как психика делает секс болезненным Либидо, память тела и внутренние установки: как психика делает секс болезненным

Все у нас в голове. И боль во время интимной близости – не исключение

Лиза
10 самых засмотренных до дыр мультфильмов разных поколений 10 самых засмотренных до дыр мультфильмов разных поколений

Самые засмотренные мультфильмы за все время, разбитые по десятилетиям

Maxim
12 ключей к благополучию 12 ключей к благополучию

Благополучие складывается день за днем из мелких, но важных деталей

Psychologies
«Трудно даются праздничные речи»: как избавиться от страха выступлений «Трудно даются праздничные речи»: как избавиться от страха выступлений

Некоторые, когда приходит черед произносить речи, испытывают неловкость. Почему?

Psychologies
Маску на себя: почему не стоит забывать о собственных чувствах Маску на себя: почему не стоит забывать о собственных чувствах

Почему обращаться к помощи — не стыдно, а правильно

РБК
Искусство распознавать чушь: как найти истину в информационном хаосе Искусство распознавать чушь: как найти истину в информационном хаосе

Что побуждает человека использовать сомнительные данные

Forbes
«Стыдно быть человеком»: как искусство помогает переосмыслить травмы прошлого «Стыдно быть человеком»: как искусство помогает переосмыслить травмы прошлого

Роль искусства в проработке травм прошлого и арт-терапии

Forbes
Сохраняем спокойствие в условиях внешнего кризиса: чем компаниям помогут специалисты-психологи Сохраняем спокойствие в условиях внешнего кризиса: чем компаниям помогут специалисты-психологи

Как российские компании прибегают к помощи внешних и штатных психологов

Inc.
4 способа поддержать скорбящего человека 4 способа поддержать скорбящего человека

Четыре способа поддержать близкого человека в период его скорби

Psychologies
История яйца: как праздничное блюдо стало любимым завтраком История яйца: как праздничное блюдо стало любимым завтраком

Когда в Россию стали готовить блюда из куриных яиц?

Вокруг света
Убираем жир, но не теряем мышцы Убираем жир, но не теряем мышцы

Рассказываем, как худеть так, чтобы не довести себя до истощения

Лиза
Ископаемые биомолекулы указали на теплокровность тираннозавра Ископаемые биомолекулы указали на теплокровность тираннозавра

Общий предок динозавров был теплокровным

N+1
Самые странные шестиколесные машины, о которых вы точно ничего не знали Самые странные шестиколесные машины, о которых вы точно ничего не знали

Самые интересные машины, которым двух осей оказалось мало

РБК
7 непростительных ошибок при нанесении консилера (ты тоже их делала!) 7 непростительных ошибок при нанесении консилера (ты тоже их делала!)

Консилер: как выбрать оттенок и как его наносить?

VOICE
6 проблем с поведением у детей, которые нельзя игнорировать 6 проблем с поведением у детей, которые нельзя игнорировать

На некоторые поступки детей нельзя закрывать глаза

Psychologies
Круглые города оказались подвержены осадкам сильнее квадратных и треугольных Круглые города оказались подвержены осадкам сильнее квадратных и треугольных

Ученые смоделировали влияние формы города на частоту и интенсивность осадков

N+1
Тёмная материя Тёмная материя

Шоколадные скульптуры шефа Николя Клуазо

Robb Report
10 красивых имен со всего света, которые приносят успех 10 красивых имен со всего света, которые приносят успех

Не самые редкие имена, о значениях которых вы, скорее всего, не подозревали

Вокруг света
Самые сексуальные звездные братья: выбирай, кто из них успешнее и горячее Самые сексуальные звездные братья: выбирай, кто из них успешнее и горячее

"Дайте два" - это про наших парней

VOICE
Стресс, гормоны и лекарства: 6 причин ранней седины Стресс, гормоны и лекарства: 6 причин ранней седины

Это может произойти в любом возрасте. Основные причины ранней седины

Psychologies
Друг империи и враг декабристов: главный жандарм России Александр Бенкендорф Друг империи и враг декабристов: главный жандарм России Александр Бенкендорф

Граф Бенкендорф широко известен как «гонитель и душитель».

Вокруг света
Неизвестный Макиавелли: как сложилась судьба автора знаменитого трактата о государственном управлении Неизвестный Макиавелли: как сложилась судьба автора знаменитого трактата о государственном управлении

Никколо Макиавелли отличался трудолюбием и умел радоваться жизни

Вокруг света
Супчик с сюрпризом Супчик с сюрпризом

Как похудеть на борще и снять похмелье буйабесом

Лиза
5 вопросов о сердце и стрессе 5 вопросов о сердце и стрессе

Можно ли предотвратить влияние стресса на организм? Отвечает эксперт

Здоровье
Кто создает в России магазины приложений на замену App Store и Google Play Кто создает в России магазины приложений на замену App Store и Google Play

Кто создает NashStore и RuStore и с какими проблемами они уже столкнулись?

Forbes
300-сильные масл-траки из ЗИЛов: безумный тюнинг времен СССР 300-сильные масл-траки из ЗИЛов: безумный тюнинг времен СССР

Зачем в СССР прокачивали грузовые ЗИЛы?

ТехИнсайдер
Модестова ушла, умер в 40: трагическая судьба Модестова ушла, умер в 40: трагическая судьба

Как сложилась судьба звезды "Последнего героя" Сергея Сакина?

VOICE
Открыть в приложении