Проверьте, насколько необходима новая методика. Выберите выборку разведывательных отчетов, включающих список индикаторов, и примените тест Indicators Validator™ к каждому индикатору из списка. Как часто этот тест выявляет индикаторы, которые были выдвинуты, несмотря на то, что они не имеют диагностической ценности?
Проведите сравнение "до и после". Выявите аналитиков, которые в ходе своей работы разработали набор индикаторов. Затем попросите их применить Indicators Validator™ в своей работе и посмотреть, насколько это изменит ситуацию.
13.4 РЕКОМЕНДУЕМАЯ ПРОГРАММА ИССЛЕДОВАНИЙ
Очевидна необходимость создания организационных подразделений в аналитическом сообществе с широкой ответственностью за исследования в области аналитического ремесла. Однако мы скептически относимся к преимуществам предложений о создании национального института8 или виртуального центра, управляемого консультантами.8 или виртуального центра, управляемого консультантами.9 История исследований, направленных на улучшение разведывательного анализа, говорит о том, что любой из этих вариантов, скорее всего, послужит магнитом для дорогостоящих контрактных предложений и окажет лишь незначительное влияние на то, как средний аналитик выполняет свою работу, если вообще окажет. А для того, чтобы результаты исследований были внедрены, необходимо задействовать талант работающих аналитиков.
Несколько лет назад Нэнси Диксон провела для Разведывательного управления Министерства обороны исследование "проблемы извлеченных уроков" во всем разведывательном сообществе США и конкретно в DIA. Это исследование подтвердило наличие разрыва между так называемыми извлеченными уроками и их реализацией. Диксон обнаружила, что "наиболее часто в разведывательном сообществе выражается озабоченность по поводу трудностей с реализацией уроков". Она объясняет это двумя основными факторами:
Во-первых, те, кто отвечает за разработку и проведение уроков, редко несут ответственность за применение полученных знаний. . . . При самых благоприятных обстоятельствах передать результаты исследований и отчетов в оперативное управление, как известно, очень сложно.
Во-вторых, в большинстве случаев в процессе извлечения уроков не удается изначально определить конкретную целевую аудиторию, которая будет использовать эти уроки. . . В отсутствие заранее определенной, взаимно согласованной целевой аудитории для использования уроков, в рекомендациях обязательно отсутствует контекст, который в противном случае сделал бы их применимыми.10
Если мы хотим, чтобы исследования, рекомендованные в этой главе, были проведены эффективно и оказали значительное влияние на то, как на самом деле проводится анализ, мы считаем, что они должны проводиться линейным компонентом разведывательного сообщества, который отвечает за внедрение их результатов, или в тесном сотрудничестве с ним.
1. Пол Бедард, "Шеф ЦРУ заявляет о прогрессе в реформировании разведки", U.S. News and World Report, 16 мая 2008 г., www.usnews.com/articles/news/2008/05/16/cia-chief-claims-progress-with-intelligence-reforms.html .
2. Одним из лучших примеров исследования, которое действительно отвечает этому стандарту сопоставимости, является книга мастер-сержанта Роберта Д. Фолкера-младшего "Анализ разведданных в объединенных разведывательных центрах на театре военных действий: An Experiment in Applying Structured Methods (Washington, DC: Joint Military Intelligence College, 2000).
3. Филип Тетлок, "Экспертное политическое суждение" (Принстон, Нью-Джерси: Издательство Принстонского университета, 2005), 190-202.
4. Эти суждения были высказаны в публичных заявлениях и в личных сообщениях авторам.
5. Merriam-Webster Online, www.m-w.com/dictionary/analysis .
6. Шарлан Дж. Немет и Брендан Немет-Браун, "Лучше, чем индивидуумы: Потенциальные преимущества несогласия и разнообразия для групповой креативности" в книге "Групповая креативность: Innovation through Collaboration, ed. Paul B. Paulus and Bernard A. Nijstad (New York: Oxford University Press, 2003), 63-64.
7. Эта информация была предоставлена высокопоставленным специалистом разведывательного сообщества в декабре 2006 года и впоследствии неоднократно подтверждалась в проектах, выполненных правительственными аналитиками.
8. Стивен Рибер и Нил Томасон, "Создание Национального института аналитических методов", Studies in Intelligence 49, no. 4 (2005).