Анализ конкурирующих гипотез
Анализ конкурирующих гипотез ( ACH ) — это методология оценки нескольких конкурирующих гипотез для наблюдаемых данных. Он был разработан Ричардсом (Диком) Дж. Хойером-младшим , ветераном ЦРУ с 45-летним стажем , в 1970-х годах для использования ЦРУ. [1] ACH используется аналитиками в различных областях, которые выносят суждения, влекущие за собой высокий риск ошибки в рассуждениях. Цель ACH – помочь аналитику преодолеть или, по крайней мере, свести к минимуму некоторые когнитивные ограничения, из-за которых анализ предвидения. так трудно осуществить [1]
ACH был шагом вперед в методологии анализа разведывательных данных , но сначала он был описан в относительно неформальных терминах. Получение наилучшей доступной информации на основе неопределенных данных остается целью исследователей, разработчиков инструментов и аналитиков в промышленности, научных кругах и правительстве. Их области включают интеллектуальный анализ данных , когнитивную психологию и визуализацию , вероятность и статистику и т. д. Абдуктивное мышление — более ранняя концепция, имеющая сходство с ACH.
Процесс [ править ]
Хойер довольно подробно описывает процесс ACH в своей книге «Психология анализа интеллекта» . [1] Он состоит из следующих шагов:
- Гипотеза. Первым шагом процесса является выявление всех потенциальных гипотез, желательно с использованием группы аналитиков с разными точками зрения для мозгового штурма возможностей. Этот процесс мешает аналитику выбирать одну «вероятную» гипотезу и использовать доказательства для доказательства ее точности. Когнитивная предвзятость сводится к минимуму, когда рассматриваются все возможные гипотезы. [1]
- Доказательства. Затем аналитик перечисляет доказательства и аргументы (включая предположения и логические выводы) за и против каждой гипотезы. [1]
- Диагностика. Используя матрицу , аналитик применяет доказательства против каждой гипотезы, пытаясь опровергнуть как можно больше теорий. Некоторые доказательства будут иметь большую «диагностичность», чем другие доказательства, то есть некоторые будут более полезны при оценке относительной вероятности альтернативных гипотез. По мнению Хойера, этот шаг является самым важным. Вместо того, чтобы рассматривать одну гипотезу и все доказательства («прорабатывать» матрицу), аналитику рекомендуется рассматривать по одному фрагменту свидетельства за раз и проверять его на соответствие всем возможным гипотезам («работать по матрице»). [1]
- Уточнение. Аналитик просматривает результаты, выявляет любые пробелы и собирает любые дополнительные доказательства, необходимые для опровержения как можно большего количества оставшихся гипотез. [1]
- Непоследовательность. Затем аналитик пытается сделать предварительные выводы об относительной вероятности каждой гипотезы. Меньшая последовательность подразумевает меньшую вероятность. Наименее непротиворечивые гипотезы отсеиваются. Хотя матрица генерирует окончательную математическую сумму для каждой гипотезы, аналитик должен использовать свое суждение, чтобы сделать окончательный вывод. Сам результат анализа ACH не должен отменять собственные суждения аналитиков.
- Чувствительность. Аналитик проверяет выводы с помощью анализа чувствительности , который оценивает, как повлияет на вывод, если ключевые доказательства или аргументы будут неверными, вводящими в заблуждение или подлежат различным интерпретациям. Достоверность ключевых доказательств и последовательность важных аргументов проверяются дважды, чтобы гарантировать обоснованность основных выводов и движущих сил. [1]
- Выводы и оценка. Наконец, аналитик предоставляет лицу, принимающему решения, свои выводы, а также краткое изложение альтернатив, которые рассматривались, и причин, по которым они были отклонены. Аналитик также определяет основные этапы процесса, которые могут служить индикаторами в будущих анализах. [1]
Сильные стороны [ править ]
Некоторые преимущества использования матрицы ACH:
- Это поддается аудиту.
- Широко распространено мнение, что оно помогает преодолеть когнитивные предубеждения , хотя убедительных эмпирических доказательств, подтверждающих это убеждение, недостаточно. [2]
- Поскольку ACH требует от аналитика построения матрицы, доказательства и гипотезы можно отследить . Это позволяет лицу, принимающему решения, или другим аналитикам видеть последовательность правил и данных, которые привели к такому выводу.
Слабые стороны [ править ]
К недостаткам использования матрицы ACH относятся:
- Процесс создания ACH занимает много времени.
- Матрица ACH может оказаться проблематичной при анализе сложного проекта.
- Аналитику может быть затруднительно управлять большой базой данных с множеством доказательств.
- Доказательства также представляют собой проблему, если они ненадежны.
- Доказательства, используемые в матрице, статичны и, следовательно, могут представлять собой моментальный снимок во времени.
Особенно в разведке, как правительственной, так и деловой, аналитики всегда должны осознавать, что оппонент(ы) умны и могут генерировать информацию, предназначенную для обмана . [3] [4] Поскольку обман часто является результатом когнитивной ловушки, Эльзессер и Штех используют распознавание иерархических планов на основе состояний (см. Абдуктивное рассуждение ) для создания причинных объяснений наблюдений. Полученные гипотезы преобразуются в динамическую байесовскую сеть , и ценность анализа информации используется для выделения предположений, неявных при оценке путей или выводов из конкретных гипотез. По мере того как наблюдаются доказательства в форме наблюдений за состояниями или предположениями, они могут стать предметом отдельной проверки. Если предположение или необходимое состояние отрицается, гипотезы, зависящие от него, отвергаются. Это форма анализа первопричин .
По мнению критиков социального конструктивизма, ACH также не в состоянии в достаточной степени подчеркнуть (или рассмотреть как метод) проблематичный характер первоначального формирования гипотез, используемых для создания его сетки. Например, имеется немало свидетельств того, что помимо любых бюрократических, психологических или политических предубеждений, которые могут повлиять на выработку гипотез, действуют также факторы культуры и идентичности. Эти социально сконструированные факторы могут ограничивать или предварительно проверять, какие гипотезы в конечном итоге будут рассматриваться, а затем усиливать предвзятость подтверждения среди выбранных. [5]
Философ и теоретик аргументации Тим ван Гелдер высказал следующую критику: [6]
- ACH требует, чтобы аналитик делал слишком много дискретных суждений, многие из которых практически не способствуют выявлению лучшей гипотезы.
- ACH неверно понимает природу взаимосвязи между доказательствами и гипотезами, предполагая, что доказательства сами по себе согласуются или несовместимы с гипотезами.
- ACH рассматривает набор гипотез как «плоский», то есть простой список, и поэтому не может связать доказательства с гипотезами на соответствующих уровнях абстракции.
- ACH не может представлять второстепенную аргументацию, то есть аргументацию, опирающуюся на какое-либо доказательство.
- Деятельность ACH в реалистичных масштабах оставляет аналитиков дезориентированными или сбитыми с толку.
Ван Гелдер предложил отображение гипотез (аналогично отображению аргументов ) в качестве альтернативы ACH. [7] [8]
конкурирующих Структурированный гипотез анализ
Структурированный анализ конкурирующих гипотез предлагает аналитикам улучшение по сравнению с ограничениями исходного ACH. [ обсуждать ] [9] SACH максимизирует возможные гипотезы, позволяя аналитику разделить одну гипотезу на две сложные.
Например, две проверяемые гипотезы могут заключаться в том, что у Ирака есть ОМУ или у Ирака нет ОМУ. Если бы доказательства показали, что в Ираке более вероятно наличие ОМУ, тогда можно было бы сформулировать две новые гипотезы: ОМП находится в Багдаде или ОМП находится в Мосуле. Или, возможно, аналитику необходимо знать, какой тип ОМП имеется в Ираке; новые гипотезы могут заключаться в том, что у Ирака есть биологическое оружие массового уничтожения, у Ирака есть химическое оружие массового уничтожения и у Ирака есть ядерное оружие массового уничтожения. Предоставляя структуру ACH, аналитик может дать детальную оценку. [10]
к формализму подходы Другие
Один метод, предложенный Валтортой и его коллегами, использует вероятностные методы и добавляет байесовский анализ к ACH. [11] Обобщение этой концепции на распределенное сообщество аналитиков привело к разработке CACHE (Collaborative ACH Environment), [12] который представил концепцию байесовского (или байесовского) сообщества. В работе Акрама и Ванга применяются парадигмы теории графов . [13]
Другая работа сосредоточена не столько на вероятностных методах, сколько на когнитивных и визуальных расширениях ACH, как обсуждали Мэдсен и Хикс. [14] DECIDE, обсуждаемый в разделе «Автоматизация» , ориентирован на визуализацию. [15]
В работах Поупа и Йосанга используется субъективная логика , формальная математическая методология, которая явно имеет дело с неопределенностью. [16] Эта методология лежит в основе технологии Sheba, которая используется в программном обеспечении Veriluma для оценки разведывательных данных.
Программное обеспечение [ править ]
 |
Несколько онлайновых и загружаемых программных инструментов помогают автоматизировать процесс ACH. Эти программы оставляют визуальный след доказательств и позволяют аналитику взвесить доказательства.
- ПАРК АХ 2.0 [17] [18] была разработана Исследовательским центром Пало-Альто (PARC) в сотрудничестве с Ричардсом Дж. Хойером-младшим. Это стандартная программа ACH, которая позволяет аналитикам вводить доказательства и оценивать их достоверность и актуальность.
- Программное обеспечение Decision Command было разработано Уиллардом Зангвиллом. [19]
- DECIDE был разработан аналитической исследовательской фирмой SSS Research, Inc. [15] [20] DECIDE не только позволяет аналитикам манипулировать ACH, но и предоставляет множество продуктов для визуализации. [21]
- Анализ конкурирующих гипотез (ACH) — это реализация ACH с открытым исходным кодом . [22]
- Шаблон ACH [23] — это лист Excel , в котором реализована методология оценки и взвешивания ACH, точнее, алгоритм взвешенного подсчета несоответствий.
См. также [ править ]
Примечания [ править ]
- ^ Jump up to: Перейти обратно: а б с д и ж г час я Хойер, Ричардс-младший, «Глава 8: Анализ конкурирующих гипотез», Психология анализа разведки , Центр изучения интеллекта, Центральное разведывательное управление , заархивировано из оригинала 13 июня 2007 г.
- ^ Томасон, Нил (2010), «Альтернативные конкурирующие гипотезы», Полевая оценка в контексте разведки и контрразведки: Резюме семинара , National Academies Press, doi : 10.17226/12854 , ISBN 978-0-309-15016-3
- ^ Эльзессер, Кристофер; Стеч, Фрэнк Дж. (2007), «Обнаружение обмана», Котт, Александр; Макини, Уильям (ред.), Состязательное рассуждение: вычислительные подходы к чтению мыслей оппонента , Chapman & Hall/CRC, стр. 101–124.
- ^ Стеч, Фрэнк Дж.; Эльзессер, Кристофер, Обнаружение обмана путем анализа конкурирующих гипотез (PDF) , MITRE Corporation , заархивировано из оригинала (PDF) 7 августа 2008 г. , получено 1 мая 2008 г. Исследовательский проект, спонсируемый MITRE 51MSR111, Поддержка принятия решений по борьбе с обманом
- ^ Главы с первой по четвертую, Джонс, Майло Л. и; Зильберзан, Филипп (2013). Конструирование Кассандры, переосмысление провала разведки ЦРУ, 1947–2001 гг . Издательство Стэнфордского университета. ISBN 978-0804793360 .
- ^ ван Гелдер, Тим (декабрь 2008 г.), «Можем ли мы добиться большего, чем ACH?» , AIPIO News (55), Австралийский институт профессиональных разведчиков
- ^ ван Гелдер, Тим (11 декабря 2012 г.). «Изучение новых направлений анализа разведывательной информации» . timvangelder.com . Проверено 30 сентября 2018 г.
- ^ Шевалье, Арно (2016). Стратегическое мышление в решении сложных проблем . Оксфорд; Нью-Йорк: Издательство Оксфордского университета . п. 113 . doi : 10.1093/acprof:oso/9780190463908.001.0001 . ISBN 9780190463908 . OCLC 940455195 .
- ^ Уитон, Кристан Дж. и др. (Ноябрь – декабрь 2006 г.), «Структурированный анализ конкурирующих гипотез: улучшение проверенной методологии разведки» (PDF) , журнал Competitive Intelligence Magazine , 9 (6): 12–15, заархивировано из оригинала (PDF) 28 сентября 2007 г. , получено 1 мая 2008 г.
- ^ Чидо, Дайан Э. и др. (2006), Структурный анализ конкурирующих гипотез: теория и применение , Издательство Института разведывательных исследований колледжа Мерсихерст , стр. 54
- ^ Валторта, Марко; и др. (Май 2005 г.), «Расширение метода анализа конкурирующих гипотез Хойера для поддержки комплексного анализа решений», Международная конференция по методам и инструментам интеллектуального анализа (PDF)
- ^ Шрагер, Дж. и др. (2009) Футбольная наука и сообщество Байеса: изучение когнитивных последствий современной научной коммуникации. Темы когнитивной науки, 2 (1), 53–72.
- ^ Акрам, Шейх Мухаммед; Ван, Цзясинь (23 августа 2006 г.), «Интеллектуальный анализ данных: соединить точки, чтобы разъединить их», Труды семинара по инструментам разведки 2006 г. (PDF) , стр. 28–34.
- ^ Мэдсен, Фредрик Х.; Хикс, Дэвид Л. (23 августа 2006 г.), «Исследование когнитивных эффектов инструментов экстернализации», Материалы семинара по разведывательным инструментам 2006 г. (PDF) , стр. 4–11.
- ^ Jump up to: Перейти обратно: а б Клакстон, Дайан; Эйк, Стивен Г., «Инструмент визуализации гипотез DECIDE», Международная конференция 2005 г. по анализу интеллекта (PDF) , заархивировано из оригинала (PDF) 7 августа 2008 г. , получено 1 мая 2008 г.
- ^ Папа, Саймон; Джосанг, Аудун (июнь 2005 г.), Анализ конкурирующих гипотез с использованием субъективной логики (ACH-SL) , Университет Квинсленда, Брисбен, Австралия, ADA463908, заархивировано из оригинала 8 апреля 2013 г.
- ^ Исследовательский центр Xerox в Пало-Альто и Ричардс Дж. Хойер, ACH2.0.3 Страница загрузки: Анализ конкурирующих гипотез (ACH) , заархивировано из оригинала 18 марта 2008 г. , получено 13 марта 2008 г.
- ^ «Загрузить ACH от PARC» . ach1.software.informer.com . Проверено 28 декабря 2020 г.
- ^ «Квантин | Согласование | Казнь» . 17 августа 2009 г. Архивировано из оригинала 17 августа 2009 г. Проверено 28 декабря 2020 г.
- ^ Ланкенау, Рассел А. и др. (июль 2006 г.), SSS Research, Inc. - DECIDE, конкурсная заявка VAST 2006 г.
- ^ SSS Research, DECIDE: from Complexity to Clarity , архивировано из оригинала 28 марта 2007 г.
- ^ Бертон, Мэтью (11 декабря 2020 г.), «Бертон/Анализ конкурирующих гипотез» , GitHub , получено 27 декабря 2020 г.
- ^ Стирпаро, Паскуале (10 декабря 2020 г.), "pstirparo/threatintel-resources" , GitHub , получено 28 декабря 2020 г.