Итак, мы уже указали на общий недостаток любых показателей эффективности — субъективность установления их семантики или порогового значения. При самом, что ни на есть, респектабельном виде десятиэтажная формула вычисления эффективности системы может оказаться всего лишь «яркой заплатой на драных штанах». Уважение к языку науки зачастую играет с людьми злую шутку: гипнотическое воздействие формул лишает способности думать даже весьма образованных людей.
Именно поэтому вопрос системного обоснования интегральных показателей эффективности занимает одно из центральных мест в аналитике. По существу, задача обоснования справедливости выбора интегрального показателя эффективности — это задача, сводящаяся к доказательству того, что объективно существует некоторое множество ограничений, позволяющих исключить из рассмотрения те или иные аспекты функционирования системы. А уж далее — решается задача доказательства того, что в данных конкретных условиях невозможно решить проблему иным, более экономным, способом. Таким образом, задача обоснования выбора показателей эффективности связана с ограничением свободы субъективного выбора.
Одним из путей ее решения является использование экспертных методов. При выборе такого подхода участникам экспертной группы предлагается совокупность показателей, значения которых неким образом сказываются на результативности деятельности. Семантика каждого показателя подробно раскрывается, а также привлекаются данные, полученные в результате проведения моделирования. На основе анализа этих показателей и их динамики эксперты дают оценку значимости тех или иных показателей, осуществляют их ранжирование. Методика опроса избирается в зависимости от того, каков состав экспертной группы, какими средствами и временными ресурсами располагает заказчик проводимой экспертизы. Более подробно вопросы, связанные с проведением коллективных экспертиз, мы рассматривали ранее, по этой причине мы не станем возвращаться к проблемам методологического и организационного плана. Заметим лишь, что решение коллектива экспертов может оказаться не более объективным, чем решение одного эксперта, хотя, при условии правильного подбора состава экспертной группы, вероятность того, что при проведении коллективной экспертизы будет учтено все многообразие вариантов, безусловно, выше.
Другой путь решения задачи обоснования выбора показателей (эффективности — это путь системного обоснования объективности выбора показателей с применением методик операционного анализа, в частности — анализа дерева целей и задач.
Для решения этой задачи также привлекается экспертная группа, но стратегия применения ее коллективного (гибридного) интеллекта — иная. В случае применения экспертных методов речь идет об исходно равноправных отношениях предпочтения, которые подвергаются ранжированию. Соответственно, задачей группы экспертов является синтез иерархии отношений предпочтения, основывающихся на некотором множестве частных показателей. В случае же использования методик операционного анализа стратегия является принципиально иной: речь идет не об упорядочивании частных показателей, а о разработке инвариантной упорядоченной структуры задач/процессов, на которой позже определяются частные показатели эффективности и задаются отношения предпочтения.
Для реализации подхода, основанного на использовании методик операционного анализа, крайне ответственным этапом является этап синтеза иерархии процессов и оценивания их роли и места в решении главной задачи. На начальном этапе этой процедуры задачей группы экспертов является конкретизация цели и ее декомпозиция на подчиненные задачи (сначала не ранжированные по значимости, а лишь упорядоченные по принципу согласования выхода «младшей» со входом «старшей»). Далее осуществляется параметризация задач (то есть декомпозиция должна осуществляться до того уровня, пока не станет возможным получение измеримого параметра, определяющего качество решения задачи, количество потребных ресурсов и так далее). На следующем этапе осуществляется привязка к полученному дереву целей и задач тех методов и технологий, которые нацелены на их решение. Здесь каждая задача снабжается одним или более методом ее решения, то есть методом реализации процесса, который может быть охарактеризован тем набором параметров, который был синтезирован на этапе параметризации. В результате может быть получена либо совокупность альтернативных деревьев, либо «сводное» дерево, на котором отображаются все возможные альтернативы.