лекция-презентация с картинками Преодолеваем предвзятость

1. Преодолеваем предвзятость

2. Что мы узнаем?

• Когда важно НЕ доверять интуиции
• Как не быть обманутым случайными событиями
• Как не ограничиваться оценкой событий по результатам
• Как не переоценивать предсказуемость событий
• Когда можно доверять интуиции

3. 3 типа ошибок, порождающих когнитивные искажения

• 1. Мы переоцениваем случайные события или совпадения
• 2. мы недооцениваем непроизошедшие события
• 3. считаем явления более простыми и предсказуемыми, чем они
есть на самом деле

4. Переоценка значимости случайных событий

• Закон малых чисел
• Возвращение к среднему
Фундаментальные ошибки атрибуции

5. Закон малых чисел

• Попробуйте осмыслить информацию «в результате исследования начальных школ
страны, обнаружено, что по сравнению с учебными заведениями средней величины
маленькие демонстрируют значительно более слабые результаты. Худшие школы в
стране относятся к категории «маленькие и очень маленькие учебные заведения».
(Рассмотрите различные варианты объяснений – почему так случилось?)
• А теперь оцените это «в ходе исследования в начальных школах страны, мы
обнаружили, что по сравнению с учебными заведениями средней величины
маленькие демонстрируют значительно более впечатляющие результаты.
Выраженное большинство лучших школ в стране относятся к категории «маленькие
и очень маленькие» учебные заведения». (возможным объяснениям опят-таки нет
числа)

6. Так что же там со школами?

• Думаю, мы сбиты с толку. Разве могут эти два отчета быть истинными? Возможно ли, чтобы
маленькие школы преобладали и среди лучших, и среди худших учебных заведений в
стране?
• Внимание! Разрыв шаблона – представьте себе, да!
• Для получения реалистичных результатов важно использовать выборку большого объема,
т.к. отклонения от среднего при маленькой выборке становятся значительно более
выраженными. (например, в стране есть десяток «супершкол», рассчитанных на 1000 и
более учащихся. Даже если бы несколько очень одаренных детей посещали одну из таких
школ, то при большом объеме учащихся, их присутствие практически не повлияло бы на
успеваемость в среднем ). И наоборот… множество маленьких школ с парой сотен
учеников. Несколько очень талантливых детей в одной школе значительно меняют
среднюю успеваемость.

7. Закон больших и малых чисел

• При любой выборке, включающей большие и малые группы,
малые будут чрезмерно представлены на обоих полюсах шкалы
результатов (так как такие группы намного легче смещаются в
крайние состояния под действием любых влияний). Так ведут
себя числа в реальном мире. Крупные выборки демонстрируют
меньше крайних вариаций, чем мелкие.

8. Формулируем закон

• Закон больших чисел «чем больше объем выборки
(чем чаще проводятся измерения какого-либо
параметра), тем выше вероятность, что результаты
окажутся близки к ожидаемым»
• Закон малых чисел «чем меньше объем выборки (чем
реже проводятся измерения какого-либо параметра),
тем выше вероятность отклонения результатов от
ожидаемых»

9. Обучение с умом: три принципа работы с малыми числами

• Работая с данными, помните, что для малых
выборок естественная большая вариативность,
чем для крупных.
• Обнаружив исключительный результат
(например, очень успешную или очень
неуспешную организацию) – обязательно
рассмотрите возможность того, что здесь
задействованы очень малые числа.
• Не пытайтесь объяснить то, что не нуждается в
объяснениях. По возможности сосредоточьтесь
на более крупных и долгосрочных тенденциях и
больших массивах данных, чтобы можно было
рассчитывать на действительно значимые
результаты

10. Возвращение к среднему

• Еще одна статистическая иллюзия, способная ввести
в заблуждение.
• «С удовольствие сообщаем, что наше исследование
увенчалось впечатляющими практическими
результатами. Мы изучили успеваемость 2000
учащихся по различным предметам и предложили 50
слабейшим студентам пройти наш тренинг по
овладению навыками обучения. Когда они освоили
программу, мы снова оценили их успеваемость в
следующем семестре и с радостью отметили, что
произошли существенные и значимые улучшения»
• Результаты тренинга должны восхитить нас или
настроить на скептический лад?
• Увы, второе. Преимущества программы сомнительны
из-за явления «возвращение к среднему»

11. Коварство «возвращения к среднему»

• После достижения исключительных результатов
следует ожидать заурядных.
• Закон «возвращения к среднему» статистическая тенденция, заключающаяся в том,
что неординарные или выдающиеся результаты
стремятся возвратиться к средним величинам.
• (вспомните себя – если на одной неделе мы
получили наивысшие баллы, то на следующей,
скорее всего, блистать не будем. После худшего в
жизни провала можно быть уверенным, что след.
неделя будет более благополучной)
• Т.е. возвращение к среднему – средний уровень,
вокруг которого показатель колеблется с
течением времени. Сделав замер и получив
чрезвычайно высокий и низкий результат, знайте,
что в следующий раз он приблизится к среднему.

12. Лайфхак-как не поддаться иллюзии

???
• Случайным образом разделите 100 человек (например, студентов, анонимных
алкоголиков и т.д.) на две группы (контрольную (не получающую терапии, не
обучающуюся по новационной методике) и экспериментальную (получающую
терапию и новую методику). Если в экспериментальной группе наблюдаются
существенные улучшения по сравнению с контрольной, то это – убедительное
свидетельство наличия каузальности.

13. Обучение с умом: не забывайте о возвращении к среднему

• Помните, что за выдающимися (в + и - смысле) результатами естественным
образом следует рядовой (той же направленности)
• Помните, что любым выдающимся результатам обычно предшествуют заурядные
• При любой оценке учитывайте возвращение к среднему: по возможности
используйте контрольные группы или охватывайте весь спектр изучаемых
предметов и явлений

14. Фундаментальные ошибки атрибуции

• ФОА – тенденция считать непропорционально большое число событий
результатом сознательных действий и намерений, а не следствием
обстоятельств.
• («я плетусь за этим водителем уже пять минут! Разве можно так ползти?
Наверное, блондинка за рулем, водить не умеет!» … «Ах вот оно что! Перед
ним группа велосипедистов, обогнать их на этом серпантине практически
нереально»).
• Мы считаем мир более упорядоченным и последовательным, вотчиной
однозначных причин и событий, где на человека можно возложить
ответственность за каждое его действие.

15. Прочти …и смирись!

• Как бы соблазнительно не было
заклеймить людей на дурных,
слабых, глупых – в отличие от нас,
факт остается фактом: когда дело
касается нашей собственной жизни
и поступков, мы оказываемся
гораздо менее независимыми и
мудрыми, чем привыкли считать.

16. Моральная удача

• Философы Томас Нагель и Бернард Уильямс –
авторы термина «моральная удача» - мы
выносим суровый нравственный приговор
человеку за нечто, ему неподвластное, в то же
время соглашаясь с мыслью, что
ответственность возможна только за то, что
ты контролируешь.
• «Моральная удача» - термин, отражающий
парадоксальное наблюдение, что на практике
мы часто оцениваем людей по результатам
удачного или неудачного стечения
обстоятельств, хотя теоретически должны
судить их только за то, над чем они властны.
• Вопрос вам – можете ли вы привести пример
ФОА из своей жизни? Есть ли нечто, над чем
вы имеете лишь иллюзорный контроль?

17. Недооценка значимости событий, которые так и не произошли

• Альтернативные истории и предвзятость результатов
• Ошибка выжившего
• Ретроспективное искажение и публикационная
ошибка

18. Альтернативные истории и предвзятость результата

• Мы склонны оценивать любые решения по конечному
результату, отбрасывая открывавшиеся по ходу дела
возможности. (пример – русская рулетка, эксцентричный
миллионер и ваш выбор)
• Альтернативные истории – совокупность всех прочих вероятностей,
которые на самом деле не реализовались, но могли быть реализованы
вместо событий, наблюдавшихся в действительности.
• Сосредоточившись на впечатляющих результатах, а не на процессе
(горстка разбогатевших и множество могил) мы рискуем не только
терпимо отнестись к столь же нерациональным стратегиям, но и начать
им следовать.

19. Предвзятость результата

• Когда результат известен, мы склонны воспринимать прошлое
как повествование, неизбежно ведущее к этому исходу, упуская
из виду неопределенности и возможности, имевшиеся в то
время. Однако качество решения зависит не только от конечного
результата, но и учета сопутствующих ему обстоятельств.

20. Задачка…

Какое решение лучше?
Капитан Алекс оценил превосходство сил противника и подал сигнал к
отступлению: лучше выжить и продолжить борьбу завтра, чем сегодня
сложить головы в стычке, от которой ничего не зависит.
Капитан Боб в тех же обстоятельствах, кипя непримиримой ненавистью
к врагу, призвал к героизму, поднял своих людей в решительное
наступление.
Рассмотрим последствия…
Получив сигнал к отступлению, войска Алекса с минимальными
потерями покинули поле боя и воссоединились с основными силами
Солдаты Бога с яростью кинулись в атаку, прорвали оборону,
почти все погибли, но им удалось перерезать линии снабжения
вражеской передовой. За храбрость Боб посмертно удостоен
высшей воинской награды.

21. Ошибка выжившего

• ОВ – тенденция обращать внимание только на истории успеха, создающая искаженную картину,
игнорирующую неудачников и выбывших.
• Оцените примеры:
• 1. наша корпорация поставила все на агрессивное поглощение, риск окупился сторицей. Следование
смелой стратегии агрессивных поглощений – рецепт успеха на данный момент, мы должны и впредь
ее придерживаться.
• 2. очевидно, что активные занятия греблей обеспечивают превосходное и гармоничное физическое
развитие. Вспомните гребцов на реке в 6 утра? Все – атлеты. Хочешь иметь великолепное тело –
хватайся за весла.
• 3. военные инженеры-эксперты осмотрели множество бомбардировщиков, вернувшихся с боевых
вылетов. Исходя их повреждений, они разработали план защиты самолетов: усиление брони в зонах,
постоянно несущих самый тяжелый урон от сил противовоздушной обороны.

22. Ретроспективное искажение

• РИ – тенденция ретроспективно воспринимать прошлое как более предсказуемое, чем это было в
действительности, и считать непредугаданные события прогнозируемыми.
• Чем опасны ретроспективные искажения? Мы не можем корректировать свои первоначальные ожидания
задним числом. (при ретроспективном искажении жизнь погибшей знаменитости превращается в
исследование душевного расстройства, депрессии и зависимостей, которые в итоге ее и погубили )
• Мы должны научиться честно признавать, что не заметили приближающегося события.
• Как быть? Вести объективную и исчерпывающую хронику событий и отказываться играть в уверенность
задним числом (но..делать точные и детальные записи очень трудно, даже в области научных
исследований).

23. Публикационная ошибка

• Примерчик: «более 1000 медицинских исследований посвящены взаимосвязи
рациона питания и сердечно-сосудистых заболеваний. В одном популярном
эксперименте умеренное ежедневное употребление темного шоколада
оказалось связано со значительным улучшением показателей по целому ряду
факторов развития болезней сердца у участников экспериментальной группы
по сравнению с контрольной. Многообещающее новое направление ждет
дальнейших исследований!!!»
• Реальность… шоколад полезен для сердца? Может быть…но …вы не забыли о
законе больших чисел?

24. Публикационная ошибка и выборочное представление

• Активная разработка любой темы обязательно
приносит несколько фантастических
положительных результатов – чисто случайных.
Однако вместо дальнейшего изучения проблемы
их начинают активно тиражировать и
популяризировать, тогда как исследования ,
не выявившие значимых эффектов,
гораздо
реже публикуются и обсуждаются.
• ПО – склонность научных журналов
отдавать предпочтение исследованиям,
увенчавшимся + или сенсационным
результатам, перед столь же валидными,
но не имеющими подобных результатов.

25. Выборочное представление фактов

• Преднамеренный отбор из обширного
материала немногих впечатляющих
результатов или сильных зависимостей
и замалчивание остальных, что
приводит к искаженной картине
исследования. (казалось бы философы
и исследователи должны уметь
избегать подобных ошибок. Однако,
во многих областях знаний достижение
определенных результатов связано со слишком сильными
стимулами. А вообще – ученые должны стремиться к полной и
открытой публикации описания своих методов и всех (!), а не
только удачных результатов)

26. Обучение с умом: 3 принципа использования опыта событий, которые так и не произошли

• Придавая чрезмерное значение следствиям и +
результатам, мы часто упускаем ценный опыт почерпнуть
ценный опыт из неслучившихся событий, игнорируем
значимость альтернативных историй. Качество решений и
стратегий необходимо оценивать независимо от их
результата.
• Ошибка выжившего и естественный для нас интерес к
исключительным случаям мешают заметить большинство
рядовых случаев, не приведших к успеху или
поразительному результату. Важно быть как можно более
внимательным к отрицательным результатам и
объективно оценивать уровень провалов в своей сфере
деятельности.
• В краткосрочной перспективе результат часто зависит от
удачи и случайного стечения обстоятельств, тогда как в
долгосрочной – рациональные стратегии и умения дают
больше шансов на успех. Только изучение долгосрочных и
масштабных тенденций позволяет выявить значимые
паттерны.

27. Переоценка простоты и предсказуемости явлений

• Вернемся к понятию «среднее
значение». Среднее – это сумма всех
результатов, разделенное на их
количество.
• Иногда это полезный и обоснованный
показатель: средний вес взрослого
самца восточноевропейской овчарки
составляет от 30 до 40 кг.
• Но.. В некоторых случаях, он лишен
всякого смысла:
• Средняя температура по больнице 36,4
%. Ура, все здоровы…

28. Давайте разбираться с показателями (распределение Гаусса)

Средний рост взрослого россиянина мужского пола 175 см.
Если вы россиянин, имеете рост 175 см., то примерно
половина мужчин России выше вас, и примерно половина –
ниже. Можно догадаться, что людей, приблизительно
одного с вами роста больше, чем любого другого: очень
высокие и совсем уж низенькие – редкость.
Это объясняется тем, что рост – природная
закономерность с нормальным
распределением (ее иногда называют
колоколообразной кривой или распределением
Гаусса). Это непрерывное распределение с
пиком в центре и симметричными боковыми
сторонами.

29. Разбираемся дальше

• Представьте, что вам предлагают работу аналитика в элитной финансовой
компании, штат которой – 15 человек. Мы знаем, что средняя зп – 60 тыс.руб.
и вы начнете карьеру со средней ступени иерархии (т.е. 7 сотрудников будут
занимать должность выше вашей, 7 – ниже вашей) Означает ли это, что вы
будете получать 60 тыс.? И другие получают примерно столько же?
• Нет!
• Финансовые распределения очень далеки от естественных.

30. Штатное расписание гипотетической компании

Название должности
Количество
сотрудников
Размер
оклада
Исследователь
5
25 тыс.
Офис-менеджер
1
30 тыс.
Аналитик
2
35 тыс.
Старший аналитик
2
40 тыс.
Руководитель отдела маркетинга
1
50 тыс.
Технический директор
1
75 тыс.
Финансовый директор
1
100 тыс.
Исполнительный директор
1
100 тыс.
Генеральный директор
1
270 тыс.

31. Три разных средних величины

• «Среднее» - совокупный заработок, разделенный
на количество работников (60 тыс. – при этом
подходе только 4 человека из 15 получают больше
среднего, их оклады настолько велики, что тянут
значение среднего вверх)
• «медиана» - зарплата, по сравнению с которой
ровно половина сотрудников относительно вас
(7 человек) зарабатывают больше, а еще 7 человек
– меньше. Медиана составляет 35 тыс.
• «мода» - самый распространенный показатель
данной выборки, т.е. зарплата 5 исследователей,
составляет 25 тыс. В нашем случае самая
распространеная ставка оказывается и самой
низкой.

32. Дефинируем средние величины

• Среднее: в традиционном понимании
сумма всех результатов, разделенная
на их количество.
• Медиана: число, характеризующее
выборку; если все элементы выборки
различны, то медиана имеет такое
значение, что ровно половина
элементов оказывается больше его, а
другая половина – меньше.
• Мода : одна из характеристик
распределения; значение переменной
величины, которое встречается
наиболее часто.

33. Хитрая риторика гендиректора

• Представьте, гендиректор обращается к трем разным
аудиториям с разными сообщениями:
• 1. я хочу опровергнуть обвинения, что мы недоплачиваем
сотрудникам, средняя зп в нашей маленькой фирме – 60 тыс.!
• 2. хочу заверить инвесторов, что мы не тратим лишних средств на
оплату труда сотрудников. Если вы наугад выберете работника
нашей компании, то скорее всего, окажется, что он получает 25
тыс.
• 3. наша цель – справедливая оплата труда: не чрезмерная
и не скудная, примерно на уровне обоснованной медианы в 35
тыс.
( заметьте, ни одна из сумм
.
даже не приближается к 270 тыс.
.
зп гендиректора !!!)

34. Эффект крайностей

• Если какой-то параметр примерно соответствует нормальной кривой (рост, интеллект,
причины естественной смерти) – то можно сделать обоснованные прикидки
отклонений и рисков.
• Если же нечастые и непредсказуемые события значительно перевешивают любое
число «нормальных» своими долгосрочными последствиями, то у нас гораздо меньше
возможностей как спрогнозировать их, так и нейтрализовать их потенциальный риск.
(одно рекордное наводнение может обернуться миллиардами ущерба; всего один
день экстремальной температуры (слишком высокой или низкой) уничтожит весь
урожай )

35. Иллюзия предсказуемости

• ИП – обманчивое представление о
том, что наблюдаемый паттерн
обязательно повторится или что
нынешнее представление о норме
сохраниться в будущем.
• Нам присущи слабости- безоглядное
доверие трендам, слишком узкий
горизонт планирования,
неспособность понять, что мир может
радикально и совершенно
неожиданно измениться.
• Все, что мы принимаем как должное:
благополучие, безопасность, прогресс,
технологические достижения, сама
жизнь – в какой-то момент будет
сметено непредсказуемым случаем.

36. Обдумайте несколько вопросов

• 1. почему экономика в некоторых странах растет, и будет ли этот рост
вечным?
• 2. будут ли компьютеры становиться все быстрее?
• 3. какими возможностями будут обладать машины через 10, 20, 50 лет?
• 4. будут ли продолжаться процессы увеличения мирового . . .
.
богатства и поступательного развития общества?
5. каким будет самый разрушительный конфликт XXI
.
века?
На эти вопросы нельзя дать уверенных ответов, . . .
.
это принципиальный момент.

37. Обучение с умом: как избавиться от близорукого мышления

• Готовьтесь к неожиданностям, а не к постоянству.
Не надейтесь, что знаете, какие результаты
принесет исследование или что любая тенденция
сохраниться навеки.
• Помните, что единичные экстремальные события
зачастую более значимы, чем тысячи заурядных.
• Средние значения и нормальные распределения интуитивно
понятны, но они неточно описывают большую часть процессов,
имеющих место в сложных системах.
• Чем дольше длился процесс, тем вероятнее, что он продолжится: он
уже благополучно перенес множество потрясений и неожиданностей.
Вечно актуальные уроки на будущее следует искать глубоко в
прошлом.

38. Людям легко дается общение, и плохо-цифры

• Мы прекрасно приспособлены к оценке
мелкомасштабных ситуаций социального
взаимодействия и делаем это быстро и точно,
если знаем, какими нормами они
управляются.
• Мы относительно мало приспособлены к
оценке крупномасштабных комплексных
проблем с элементами статистики, и интуиция
в отношении их часто вводит нас в
заблуждение.
• Главная рекомендация: столкнувшись с
ситуацией, когда есть основания не доверять
интуиции, остановитесь, не суетитесь и
пересмотрите эту презентацию )))