Как лгать при помощи статистики

Книга написана полвека назад, но от этого изложенные идеи совершенно не теряют актуальности. В мире, где новостные заголовки и заявления рекламодателей насквозь пронизаны данными исследований важно разбираться в качестве озвучиваемых цифр. Например знали ли вы что «среднее значение» (средняя зарплата, средний размер семьи, средняя стоимость товаров) могут быть трех видов? Один и тот же массив данных можно подать разными способами:

- среднеарифметическое

• медиана
• мода

  Простой пример манипуляции средним значением:

  Руководитель предприятия при найме на работу менеджера по продажам может заявить, что его сотрудники зарабатывают в среднем больше 80 тыс. руб. в месяц, – ему выгодно назвать наиболее притягательную цифру. Если 10 сотрудников зарабатывает по 30 тыс., 5 по 80 тыс., а 2 руководителя группы зарабатывают по 350 тыс. руб – среднеарифметическое действительно будет больше 80 тыс., а вот мода и медиана будут равны 30 тыс. Налоговой службе такой руководитель вероятно назовет последнюю цифру.

Рекламодатели заявляя об ошеломительной эффективности продукта, относительно конкурентов, проводя исслеования предпочитают небольшие выборки. Если взятая для исследования группа, достаточно велика и правильно отобрана, то для большинства надобностей она будет вполне репрезентативной. В противном случае выборка даст вам значительно менее точное представление о целом, чем сколько-нибудь обоснованные прикидки, а ее единственным достоинством будет разве что иллюзорное впечатление научной точности.

Если простуду лечить, то она проходит за 7 дней...

Наш мозг так устроен, что все время пытается создавать причинно-следственные связи, а еще предпочитает простые ответы сложным – этим и пользуются различные любители манипуляций общественным мнением. Автор разбирает эту когнитивную ошибку на вере жителей островов Новые Гибриды в то, что вши приносят здоровью сплошную пользу – вшивость была нормальным состоянием всех членов племени. Когда же кто-то из членов племени заболевал лихорадкой, температура тела становилась слишком высокой для комфортного обитания вшей, и они покидали своего хозяина. Островитяне же считали, что человек заболевал вследствие покидания вшей. Это тот случай, когда причина и следствие поменялись местами, да еще и спутались.

Короткая и полезная книга, которая побуждает задавать больше вопросов при столкновении с результатами каких-то исследований и докапываться до сути.

Если бы я училась в университете, я бы хотела, чтобы статистику мне преподавал такой профессор как Дарелл Хафф. Книжка, даже не смотря на то, что относится к разделу non-fiction, читается на одном дыхании. Ты словно зашел в лекционный зал, отсидел сдвоенную пару введения в статистику и, с одной стороны, вроде бы и насмеялся вдоволь, а с другой - и знаний чуток приобрел. Я люблю математику и всегда с трепетом отношусь к людям, которые не равнодушны к цифрам. То, с какой легкостью Хафф говорит о вещах, связанных со счетом и подсчетом, сдабривая теорию яркими примерами из истории и толикой саркастического юмора, просто не может оставить равнодушным. Эта книга была написана почти пол века назад, и некоторые доводы с появлением Интернета уже несколько утратили свою актуальность, но бОльшая часть все еще применяется на практике и маркетологами, и статистиками и многими другими специалистами, которые предоставляют на наше обозрение красивые графики, серьезные циферки и железобетонные выводы, за которыми может крыться пустота. Любознательно, познавательно и очень увлекательно. Я бы сказала, что это книга про жуликов в мире цифр (или для жуликов в мире цифр, тут уж все зависит от уровня честности и сознательности каждого индивидуального читателя).

Понятным языком и с яркими примерами (и потрясающими картинками) Дарелл Хафф более полувека назад рассказал, как можно "обоснованно" получить любую бессмыслицу. И даже в наше время большинство примеров, приведенных в книге можно встретить в газетах, на баннерах и в сети. Д. Хафф на примерах показывает, почему так важно правильно составить выборку (например, для опроса общественного мнения), или выбрать верный показатель среднего, который может хоть что-то сообщить об оцениваемом параметре, или адекватно определить базовый период, с которым и будет производиться дальнейшее сравнение, а также почему графики, построенные на довольно точных оценках, все равно могут лгать и многое другое.

Книга проста для понимания, но в тоже время позволяет выработать критический взгляд на представляемые нам результаты статистических расчетов, а также задавать простые вопросы, ответы на которые могут как показать качество исследований, так и полную их непригодность для хоть каких-нибудь обоснованных выводов. Дело остается за малым: применять полученные знания и критически подходить представляемым нам слоганам, только делать это зачастую лень, да и ответы на возникающие вопросы найти иногда довольно сложно.

Как известно, существуют три вида лжи: ложь, наглая ложь и статистика. И если первые два вида зачастую бывает легко распознать, то с лживой статистикой не так все просто.
Для того чтобы уметь ее распознать, необходимо понимать, как проводятся статистические исследования, какие существует методы, позволяющие исказить или даже сфальсифицировать выводы в одну или другую сторону.
Книга Дарелла Хаффа с говорящим названием «Как лгать при помощи статистики» проливает свет на эти вопросы и позволяет отличить хорошую статистику от плохой.

Книга была написана Хаффом в 1954 году и за это время стала одной из самых популярных книг, посвященных статистике. Даже надпись на обложке говорит о том, что по данным статистики в мире было продано свыше 7 миллиардов экземпляров данной книги. Так что с самого начала она настраивает на позитивный лад.
На первый взгляд может показаться, что книга не актуальна, ведь во время ее написания не было современных информационных систем, интернета, больших данных, но все совершенно наоборот.
Сегодня каждый день различные СМИ, компании, государственные учреждения и различные другие организации публикуют статистические данные. И сегодня как никогда нужно уметь оценивать эту информацию.

Хафф описывает множество примеров, иллюстрирующих различные способы манипуляций статистическими данными. Чувствуется, что автор искренне переживает из-за недобросовестного применения статистики и стремится рассказать все возможные способы манипуляций. Поэтому он подает информацию наглядно, без сложных формул и заумных слов и с большой долей иронии. Так что складывается ощущение, будто автор лично рассказывает вам обо всех забавных и не очень примерах.
В конце книги автор рассказывает, как поставить статистика на место, а именно дает читателю пять вопросов, ответив на которые можно оградить себя от массы сведений, которые не содержат и крупицы правды.

Несмотря на то, что эта книга была написана несколько десятилетий назад и состоит всего из 163 страниц, она стоит прочтения. Во-первых, яркие примеры и ироничный слог автора читаются легко и приятно. А, во-вторых, книга учит критическому мышлению и показывает, что к числам стоит относиться не как к «сакральному знанию», а как к инструменту, с помощью которого осуществляется манипулирование нашим мнением.
А этого нам в современном информационном мире, в котором числа встречаются практически везде, ой как не хватает.
Чуть более подробно рассказываю о книге в видео.

Хотите узнать, как нас обманывают продавцы недвижимости, почему нельзя доверять клиническим исследованиям, какие уловки используют СМИ и главное действительно ли все человечество страдает неврастенией? Если да, то вам определенно придется по вкусу эта маленькая (всего 161 страница) книжечка.

Все лгут, ну ладно не все, но статистики точно). Несколько манипуляций с цифрами и вот мы уже видим очередное громкое заявление -- с нашей зубной пастой образование кариеса снижается на 23% или цены по сравнению с прошлым годом выросли на 50%. Но можно ли доверять этой информации? По сути статистика не очень точная наука. В какой-то мере все зависит от случая и воли статистика.

При опросе охватили не все группы населения и уважаемый журнал, чьим прогнозам доверяла вся страна, ошибается в новом президенте. Неверно интерпретированы данные и вместо больших, вместительных домов, возводятся крошечные домики, на которые совсем нет спроса. Все это скорее примеры случайных ошибок, которые в первую очередь навредили самим специалистам. Но вот в попытках намеренного манипулирования нашим мнением статисты не знают себе равных. Одним из самых ярких примеров не постоянства статистики является информационная война, развернувшаяся в 40-х годах прошлого века между профсоюзами и заводами. Оперируя одними и теми же цифрами каждая сторона так ловко их интерпретировала в свою пользу, что журналу Time в обзорной статье пришлось накладывать полученные данные друг на друга, чтобы не принимать чью-либо сторону и показать что те и другие в общем-то правы. Если даже в таком серьезном деле, как распределение прибыли, можно перетянуть цифры на свою сторону, то что уж говорить о манипуляциях в рекламе. Маленькие выборки, небольшие случайности и в прессе уже появляются провокационные заголовки о менее вредных сигаретах и абсолютно не потеющих дамах.

Автор собрал большинство уловок, которые используют недобросовестные статистики и конечно же способы, как вывести их на чистую воду (одна из глав так и называется: как поставить статистика на место). Что примечательно, этот труд был написан еще в 50-х годах прошлого века, но свою актуальность не потерял до сих пор. В целом книга оставила только приятные впечатления: нет воды, простой язык, масса забавных примеров и иллюстраций и самое главное совсем не обязательно знать что такое мода, медиана, выборка, чтобы получить от нее удовольствие.

Кстати, по данным статистики, в мире продано 7 299 792 458 экземпляров этой книги. Как вы думаете, каким способом была получена эта информация?

"Книга Даррелла Хаффа хороша не выводами и даже не огромным числом примеров, а тем, что она учит критическому мышлению, она учит отношению к цифрам не как к "сакральному знанию", а как к инструменту, с помощью которого осуществляется манипулирование нашим мнением."

"Книгу Даррелла Хаффа можно порекомендовать как тем, кто хочет докопаться до правды, так и тем, кто ищет способы ее скрыть или осознанно исказить. Она – подспорье для всех, кто часто участвует в дискуссиях о достоверности цифр. Она поможет и тем, кто ищет способ придать недостоверным данным больше "легальности".

"Я рекомендую эту книгу не только тем, кто хочет разбираться в статистике, но и тем, кто интересуется правдой и ложью, а также логикой, на которой они могут быть построены. Книгу, без сомнения, стоит прочитать журналистам, пишущим об экономике и любой отрасли, где важны цифры и оценки, сотрудникам пресс-служб и всем, кто работает со статистикой в любой форме."

"Даррелл Хафф не только помогает читателю разобраться в прошлых обманах, но и дает ему инструмент проверки на будущее."

Выдержки из Вступления "К читателю" Ивана Бегтина

Дарелл Хафф большую часть своей жизни был журналистом и писателем, при этом мировую известность обрёл как знаток статистики. А всё благодаря своей самой успешной книге «Как лгать при помощи статистики», написанной аж в 1954 году, но в целом не утратившей актуальности и по сей день. Во всяком случае издатели с успехом переиздают её и переиздают.

Весь тон книги можно выразить самым первым эпиграфом из неё, где приведены слова Бенджамена Дизраели: «Существуют три вида лжи: ложь, наглая ложь и статистика».

Нет, автор не пытается выставить статистику как ужасную или бесполезную науку. Однако же он в лёгкой и ироничной форме пытается объяснить то, что многими людьми воспринимается как адская математическая заумь. А также показывает, как при помощи цифр можно манипулировать мнением и восприятием информации.

Формально книга разделена на тематические главы, где автор раскрывает более подробно тот или иной аспект: что такое случайная выборка, какие бывают виды среднего, как можно манипулировать восприятием при помощи «правильного» графического представления результата. О чём обычно не договаривают в выводах, как погрешности могут существенно изменить картинку, или как подменяют причину и следствие (или вовсе находят связь там, где её нет). И всё это автор описывает на конкретных примерах из жизни (что, разумеется, намного лучше позволяет понять его мысль, чем если бы это было чисто академическое повествование). Но я говорю «формально» — потому что на самом деле жизненные примеры — это не искусственные тесты, и часто в одном и том же «статистическом исследовании» обнаруживаются сразу несколько проблем, о которых автор и упоминает то тут, то там, порой повторяясь. Ну и как говорит он сам говорит, статистика — это «не только наука, но и искусство». И потому часто одни и те же данные можно подавать с разной окраской, в зависимости от того, какой результат требуется самому статистику или его заказчику. Тут Дарелл Хофф сравнивает статистиков даже с авторами рекламных текстов:

В условиях коммерческой практики статистик настолько же не склонен выбирать неблагоприятный метод подачи данных, насколько автор рекламного текста не склонен описывать товар как «хлипкий и дешевый», когда он может назвать его «не оттягивающим руку и предназначенным бережливым хозяйкам».

Крое того, говоря, что книга не утратила актуальности, я немного лукавлю. Но лишь отчасти. Трюки по-прежнему существуют и даже используются. Но просто они уже не являются «открытием века» (конечно, если эту книгу уже 70 лет издают!) Потому что часть описанных хитростей — это как азбука любого уважающего себя аналитика, при этом действительно профессиональные аналитики даже считают ниже своего достоинства использовать подобные низкопробные методы в работе (например, часть указанных «трюков» описывает в своей книге «Игра в цифры» как жульнические и Василий Сабиров).

Книга довольно короткая, главы — как самостоятельные статьи (иногда слегка повторяющие друг друга, как я уже говорил). Но читается легко, содержит небольшую долю юмора, и уж наверняка будет полезно всем, чтобы лучше понимать «статистические выводы» и уметь их критически оценивать, а не верить любому «умнику-аналитику».

При этом я ожидал от неё всё же более структурного подхода и более глубокой проработки темы, а книга оказалась больше развлекательным памфлетом, чем полноценным научпопом. Вероятно, именно это несоответствие ожиданиям и вылилось у меня в итоговую среднюю оценку.