История может поведать нам о множестве абсурдных предсказаний, прозвучавших когда-либо из уст профессионалов своего дела. Так, Гарри Уорнер, один из основателей кинокомпании Warner Brothers, объявил в 1927 году, в эпоху немых фильмов: "Какой дурак захочет слушать, что там говорит актер?" Томас Уотсон из IBM 1943 году пророчил: "Полагаю, мировой рынок нуждается примерно в пяти компьютерах". Такие оплошности можно называть забавными недоразумениями и оправдывать их тем, что любому человеку простительна глупость. Но что никак нельзя списать со счетов, так это убийственно низкую эффективность большинства экспертов в принятии решений.
В период между 1984 и 1999 годами почти 90% компаний, управляющих взаимными фондами, не вошли в индекс Уилшир-5000, что является относительно низким показателем. Показатель компаний, управляющих инвестиционными фондами, аналогичен: за последние пять лет более 95% из них не выполнили рыночную норму. После изучения экспертных прогнозов и анализа данных по широкому спектру отраслей Дж. Скотт Армстронг, профессор Уортонского коммерческого колледжа Пенсильванского университета, писал: "Я не нашел ссылок ни на одно исследование, которое подтверждало бы преимущество опыта". В некоторых случаях эксперты едва ли лучше справлялись с прогнозами, чем непрофессионалы (результаты целого ряда исследований подтвердили, например, что непсихологи на самом деле лучше предсказывали поведение людей, чем психологи), а на элементарном уровне, заключает Армстронг, "опыт и точность никак не связаны друг с другом".
Джеймс Шанто — один из ведущих в США исследователей природы профессионального опыта — посвятил немало времени тому, чтобы выработать унифицированный метод оценки компетентности. И даже он отмечал, что во многих случаях "эксперты генерируют некачественные решения". В своих работах Шанто приводит отчеты о серии исследований, согласно которым суждения нескольких профессионалов в одной области зачастую были совершенно противоречивыми, а решения отдельных экспертов шли вразрез с коллективным мнением группы, состоящей из наиболее компетентных индивидов. Например, уровень межэкспертной согласованности в целом ряде областей, включая формирование ресурсов и их оценку, а также клиническую психологию, оказался ниже 50%, что означает: эти мастера своего дела могут как соглашаться друг с другом, так и не соглашаться — с таким же успехом! Что пугает еще больше: одно из исследований показало, что согласованность суждений врачей-патологоанатомов составляет всего 50%, а это значит, что в одних и тех же обстоятельствах два прозектора в половине случаев будут приходить к различным заключениям. Эксперты также не сильны в том, что социологи называют "калибровкой" решений. Откалиброванность решений позволяет достоверно судить о том, насколько они правильны. И в этом профессионалы напоминают обычных людей: они, как правило, значительно переоценивают свою правоту. Исследование проблемы излишней самоуверенности, проведенное экономистом Террансом Одином, установило, что врачи, медсестры, юристы, инженеры, предприниматели и инвесторы — буквально все — полагали, что знают больше, чем это было на самом деле. Аналогичное исследование, участниками которого стали трейдеры валютной биржи, показало, что биржевики переоценивали точность своих валютных прогнозов в 70% случаев. Мало того, что они ошибались; они понятия не имели о масштабах своих оплошностей. Калибровка решений хорошо удается лишь профессиональным игрокам в бридж и синоптикам. Когда последние предсказывают 30%-ную вероятность дождя, он начинается в 30% случаев.
Армстронг, изучавший особенности профессионального опыта и способность к прогнозированию, сформулировал такой вывод: "Чтобы предсказать грядущие перемены и использовать информацию наиболее эффективным способом, как правило, обращаются к экспертам. Однако уровень осведомленности (в случае, если он выше элементарного) оказывается несущественным фактором для успеха прогнозирования изменений". Не нашлось также подтверждения тому, что, если большинство крупных знатоков своего дела не могли составить качественный прогноз, то несколько гигантов мысли справились с этим блестяще. Вместо этого, пишет Армстронг, "точных прогнозов практически не было". Эти положения легли в основу теории Армстронга о "пророках и простаках": "Сколько бы ни доказывали, что пророков на свете не бывает, простаки всегда будут расплачиваться за их мнимое существование".