Отрывок из книги «Полный бред! Скептицизм в мире больших данных»

ForbesКультура

Бывает ли безвредный алкоголь, что такое зомби-статистика и когда можно верить числам

Фото Getty Images

«Числа идеально подходят для изложения чуши. Они кажутся объективными, но ими легко манипулировать, чтобы рассказывать нужную историю», — говорят главные в мире эксперты по чуши, которые придумали университетский курс о том, как противостоять фейкам и дезинформации. Кто и как использует числа, чтобы морочить нам голову и когда не надо верить процентам и статистике.

Доктор биологических наук Карл Бергстром борется с фейками и враньем на протяжение многих лет. Как ученый он специализируется на механизмах распространения информации в рамках биологических и социальных систем — от внутриклеточного контроля экспрессии генов до дезинформации в социальных сетях. В период пандемии он боролся с антиваксерами, а недавно осудил подход Илона Маска к подсчету фейковых аккаунтов в Twitter как ненаучный. По его словам, выборка из 100 подписчиков, на основе которой Маск намерен оценить пропорцию настоящих аккаунтов в соцсети, не может считаться репрезентативной — это влечет за собой систематическую ошибку отбора. Но по экспертной оценке Бергстрома, скорее всего, Маск всех троллит.

В Вашингтонском университете Бергстром вместе с другим биологом Джевином Уэстом ведет курс под названием Calling Bullshit («Как распознать вранье»), задача которого — научить студентов скептически относиться к информации и уметь оценивать ее правдивость или убедительно доказывать ее фейковость. Об этом актуальном и полезном навыке они написали одноименную с курсом книгу, которая мае выходит на русском языке под названием «Полный бред! Скептицизм в мире больших данных» в издательстве «Манн, Иванов и Фербер». Forbes публикует отрывок.

«Вера людей в числа невероятно сильна. Скептики заявляют, что они «просто хотят увидеть данные», или требуют, чтобы им показали «исходные данные», или настаивают на том, что «показатели должны говорить сами за себя». Нас убеждают, что «данные никогда не врут». Но эта точка зрения может быть опасной. Даже если величины или числа верны, их всё равно можно использовать, чтобы морочить голову. Чтобы числа были понятными, они должны находиться в уместном контексте. Их нужно демонстрировать так, чтобы нам было доступно честное сравнение.

Мы полагаемся на приблизительные оценки, когда рассматриваем такие показатели, как, например, рост взрослого человека в определенной стране. Мужчины из Нидерландов считаются самыми высокими в мире — в среднем 183 сантиметра. Но чтобы получить эти данные, не измеряли всех жителей страны и не вычисляли среднее всех полученных величин. Вместо этого исследователи использовали случайную выборку местных мужчин, измерили тех, кто в нее попал, и экстраполировали выводы на все население. Если бы кто-то измерил полдюжины мужчин и вычислил их средний рост, только по случайности результат мог бы получиться неверным. Предположим, среди них некоторые были необычайно высокими. Это называют ошибкой выборки. К счастью, обширная выборка, как правило, позволяет выровнять отклонения, так что такая ошибка минимально влияет на результат.

Проблемы могут возникнуть и с процедурой измерения. Допустим, исследователи попросили участников сообщить о своем росте, но мужчины склонны завышать цифры, причем мужчины маленького роста делают это чаще, чем высокие.

Другой источник ошибки — предвзятость самой выборки — еще опаснее. Предположим, вы решили определить рост людей, отправились на местную баскетбольную площадку и стали измерять игроков. Баскетболисты, как правило, выше среднего роста, так что ваша выборка будет нерепрезентативной для населения в целом и в итоге значение окажется слишком высоким.

Большинство ошибок такого рода не настолько очевидны. Есть много хитроумных подходов, из-за которых выборка перестает характеризовать популяцию. Сводная статистика может быть удобным способом обобщать информацию, но, если она некорректна, вы легко введете свою аудиторию в заблуждение.

В расчеты и факты, которые кажутся совершенно очевидными, ошибки закрадываются по разным причинам. Можно запутаться в числах. Можно использовать слишком маленькую выборку, которая некорректно отражает особенности всей группы. Некорректными могут оказаться методики, с помощью которых мы выводим числа из иной информации. И наконец, числа могут просто быть полной чушью, выдуманной с нуля в попытке придать убедительность жалким аргументам. Мы должны помнить об этом, когда нам что-то доказывают с помощью численных показателей. Говорят, что цифры никогда не лгут, но следует помнить, что они часто вводят в заблуждение.

Зловредные проценты

Двенадцатая глава книги Карла Сагана 1996 года «Мир, полный демонов» называется «Тонкое искусство снимать лапшу с ушей». В ней автор разносит мир рекламы, атакующий нас ошеломительными, но бессмысленными фактами и цифрами. Саган подчеркивает ту же проблему, которой мы касаемся в этой главе: числа легко сбивают людей с толку, и рекламодатели многие десятилетия пользуются этим, чтобы убеждать. «От вас не ждут вопросов, — пишет Саган. — Не думайте. Покупайте».

Печально известный заголовок Breitbart сходным образом лишил читателей возможности провести осмысленное сопоставление. В этом впечатляющем образце нагнетания паники сообщалось, что 2139 потенциальных бенефициаров законопроекта DREAM (The Development, Relief and Education for Alien Minors Act — законопроект, согласно которому дети нелегальных мигрантов, получившие высшее образование или отслужившие в армии США, могут получить вид на жительство в США) — взрослые, нелегально прибывшие в США в детском возрасте — были осуждены или обвинены в преступлениях, совершенных против американцев. Число кажется пугающим. Но, конечно, закон DREAM относился к большому числу людей: соответствующий статус имели одновременно около 700 000 человек и еще около 800 000 получили его в какой-то момент до отмены программы. Это означает, что только 0,3% получателей такого статуса — то есть менее одного из 300 — обвинялись в преступлениях против американцев.

Уже лучше, но как это число соотносится с аналогичными показателями, касающимися граждан Америки? Если 0,75% американцев сидят за решеткой, получается, что граждане США в два раза чаще оказываются заключенными или обвиненными в совершении преступления, чем дети нелегальных мигрантов, претендующие на гражданство? Около 8,6% американских граждан были обвинены в преступлении в какой-то момент свой жизни, так и тут потенциальные бенефициары программы DREAM выглядят неплохо.

Конечно, они моложе и в целом могли просто не успеть совершить преступление до получения статуса, потому что у них было на это меньше времени, чем у среднего американца. Но оказывается, что 30% граждан США за какие-нибудь правонарушения (не считая дорожно-транспортных) арестовывались уже к 23 годам. Даже если мы предположим, что числа Breitbart корректны, издание представило их без необходимой информации, которая нужна читателю, чтобы поместить их в контекст.

Таким образом, демонстрируя исходные числа, можно заставить сравнительно небольшое количество выглядеть большим. Мы помещаем число в контекст с помощью выражения его в процентах. Конечно, проценты являются ценным инструментом сравнения. Но существуют различные способы затруднять необходимые сравнения и в процентах. Например, проценты могут заставить крупные показатели выглядеть менее значительными.

В своем блоге вице-президент по поиску Google признал, что его компания сталкивается с проблемами фейковых новостей, дезинформации и другого неуместного контента: «Наши алгоритмы помогают выявлять надежные источники среди сотен миллиардов страниц в нашем поисковом индексе. Однако стало очевидным, что небольшая часть запросов в нашем повседневном трафике (около 0,25%) выдает непристойные или откровенно вводящие в заблуждение результаты, а это не то, что нужно людям». Тут можно отметить две вещи. В первую очередь нам демонстрируют огромное, но практически не имеющее к нам отношения число как бы в роли контекста. «Сотни миллиардов страниц в нашем поисковом индексе». Этому огромному числу противопоставлено крошечное 0,25%. Но сотни миллиардов не имеют к этому особого отношения: это количество проиндексированных страниц, а не число поисковых запросов. Неважно, проиндексированы десять тысяч или сотни миллиардов страниц. Если 0,25% запросов в Google ведут не туда, у вас один на четыре сотни шанс получить чушь в результате поиска.

Авторизуйтесь, чтобы продолжить чтение. Это быстро и бесплатно.

Регистрируясь, я принимаю условия использования

Рекомендуемые статьи

Конфликт как процесс изменения социальных ролей и нарушения личных границ Конфликт как процесс изменения социальных ролей и нарушения личных границ

Что такое конфликт и из чего он состоит?

Forbes
Поступки, которые нам кажутся умными, но на самом деле совсем нет Поступки, которые нам кажутся умными, но на самом деле совсем нет

Рано или поздно почти всем нам приходят в голову эти идеи

Maxim
Конкурс страшных рассказов: «Чуткая», Марина Бутусова Конкурс страшных рассказов: «Чуткая», Марина Бутусова

Рассказ о загадочных ночных превращениях мужа и странностях семейной жизни

VOICE
Что вырастить на огороде для продажи? Что вырастить на огороде для продажи?

Рассказываем о трех самых выгодных культурах, которые может вырастить любой

Maxim
История мира в шести стаканах История мира в шести стаканах

Как ваши любимые напитки изменили мир

kiozk originals
10 мощных российских тракторов: отечественная техника, за которую не стыдно 10 мощных российских тракторов: отечественная техника, за которую не стыдно

В России делаются свои трактора, причём на мировом уровне

ТехИнсайдер
География чтения: 5 книг о Северной Африке География чтения: 5 книг о Северной Африке

Книги о загадочном континенте, который манит авантюристов и путешественников

Вокруг света
Лучше научно-фантастические циклы с эпическим размахом, которых хватит надолго Лучше научно-фантастические циклы с эпическим размахом, которых хватит надолго

Лучшие фантастические циклы книг

ТехИнсайдер
Прочтешь, не отрываясь: 3 лучших романа Элизабет Гилберт Прочтешь, не отрываясь: 3 лучших романа Элизабет Гилберт

Каким книгам Элизабет Гилберт стоит уделить внимание?

VOICE
5 самых глубоких озер мира: невиданные красоты природы 5 самых глубоких озер мира: невиданные красоты природы

Глубочайшие озера, которые будоражат воображение

ТехИнсайдер
Ким Кардашьян, Джессика Альба и другие звезды, которые делали липосакцию Ким Кардашьян, Джессика Альба и другие звезды, которые делали липосакцию

Звезды, обратившиеся за помощью к пластическим хирургам

VOICE
Как выбрать хорошую мультиварку: подробная инструкция Как выбрать хорошую мультиварку: подробная инструкция

Кто не работает, тот не ест, но кто приготовит поесть, пока ты на работе?

CHIP
Путь к океану Путь к океану

Если вы хотите узнать Кению, надо проехать хотя бы полстраны

Вокруг света
Икра хариуса, галаган и конина: какие локальные продукты станут новыми деликатесами Икра хариуса, галаган и конина: какие локальные продукты станут новыми деликатесами

Какие локальные продукты заслужат звание новых российских деликатесов

Forbes
Уединение и сила: куда поехать, чтобы увидеть самую красивую природу в России Уединение и сила: куда поехать, чтобы увидеть самую красивую природу в России

Где увидеть самые красивые места России, чтобы уединиться на природе

Forbes
9 самых полезных продуктов для нашего тела — налегай на них этим летом! 9 самых полезных продуктов для нашего тела — налегай на них этим летом!

Какие продукты следует включить в свой рацион уже сегодня?

VOICE
10 лучших российских средств ПВО: сложные зенитно-ракетные системы и комплексы в действии 10 лучших российских средств ПВО: сложные зенитно-ракетные системы и комплексы в действии

Зенитно-ракетные системы и комплексы — самые сложные военные машины

ТехИнсайдер
Как развивать эмоциональный интеллект и быть жизнестойким Как развивать эмоциональный интеллект и быть жизнестойким

Что такое эмоциональный интеллект и как его развить

СНОБ
Сказка для взрослых, тайный книжный клуб и новая жизнь пчел: 5 воодушевляющих романов Сказка для взрослых, тайный книжный клуб и новая жизнь пчел: 5 воодушевляющих романов

Книги о том, как люди преодолевают любые невзгоды

СНОБ
Жоржу Браку — 130 лет. Как понимать работы одного из основоположников кубизма? Жоржу Браку — 130 лет. Как понимать работы одного из основоположников кубизма?

Жорж Брак — художник, который возглавил авангард в европейской живописи

Правила жизни
«Доктор, спасите»: как психотерапия помогла мне похудеть «Доктор, спасите»: как психотерапия помогла мне похудеть

Фитнес-тренер — о своём опыте лечения расстройства пищевого поведения

VOICE
Рак: как им заболевают, почему он так тяжело лечится и существует ли профилактика? Рак: как им заболевают, почему он так тяжело лечится и существует ли профилактика?

Что такое рак, как не допустить его развития и как ученые ищут лекарство?

ТехИнсайдер
Как экономить, если денег и так ни на что не хватает? Способы, которые работают Как экономить, если денег и так ни на что не хватает? Способы, которые работают

Как экономить еще сильнее, если ты уже экономишь?

VOICE
Отрывок из нового романа Алексея Сальникова «Оккульттрегер» Отрывок из нового романа Алексея Сальникова «Оккульттрегер»

Роман не теряет трезвый взгляд на российскую действительность

СНОБ
Михаил Турецкий: «Я там, где я нужен» Михаил Турецкий: «Я там, где я нужен»

Отец мой спрашивал: «Твои артисты довольны тем, как ты им платишь?»

Коллекция. Караван историй
Археологи обнаружили на Юкатане затерянный город майя с архитектурой в стиле пуук Археологи обнаружили на Юкатане затерянный город майя с архитектурой в стиле пуук

Археологи сообщили об обнаружении на Юкатане ранее неизвестного города Майя

N+1
Потерять, чтобы найти Потерять, чтобы найти

Как заполнить возникшую пустоту и разглядеть за ней новые возможности?

Psychologies
4 красных флага в ее сообщениях: мужчины о том, почему не зашли дальше переписки 4 красных флага в ее сообщениях: мужчины о том, почему не зашли дальше переписки

Красных флажки, которые могут стать препятствием встречи в реале

Psychologies
Как избавиться от постоянного чувства вины: план на 3 недели Как избавиться от постоянного чувства вины: план на 3 недели

Рассказываем, как избавиться от чувства вины и стать счастливее

Psychologies
Как получить стартап-визу в Европе: советы основателя сервиса Relocode Как получить стартап-визу в Европе: советы основателя сервиса Relocode

Главное из выпуска подкаста «Либо выйдет, либо нет»: получение стартап-визы

VC.RU
Открыть в приложении