Краткий обзор экспертных методов

Концепция мозговой атаки получила широкое распространение с начала 50–х годов как "метод систематической тренировки творческого мышления", направленный на "открытие новых идей и достижение согласия группы людей на основе интуитивного мышления". Методы этого типа известны также под названиями мозгового штурма, конференций идей, коллективной генерации идей (КГИ).

Обычно при проведении мозговой атаки, или сессий КГИ, стараются выполнить определенные правила, суть которых сводится к тому, чтобы обеспечить как можно большую свободу мышления участников КГИ и высказывания ими новых идей; для этого рекомендуется приветствовать любые идеи, даже если они вначале кажутся сомнительными или абсурдными (обсуждение и оценка идей проводится позднее), не допускается критика, не объявляется ложной идея и не прекращается обсуждение ни одной идеи. Требуется высказывать как можно больше идей (желательно нетривиальных), стараться создавать как бы цепные реакции идей.

В зависимости от принятых правил и жесткости их выполнения различают прямую мозговую атаку, метод обмена мнениями, методы типа комиссий, судов (когда одна группа вносит как можно больше предложений, а вторая — старается их максимально критиковать) и т.п. В последнее время иногда мозговую атаку проводят в форме деловой игры.

На практике подобием сессий КГИ являются разного рода совещания — конструктораты, заседания ученых и научных советов, специально создаваемых временных комиссий.

В реальных условиях достаточно трудно обеспечить жесткое выполнение требуемых правил, создать "атмосферу мозговой атаки", на конструкторатах и советах мешает влияние должностной структуры организации: трудно собрать специалистов на межведомственные комиссии. Поэтому желательно применять способы привлечения компетентных специалистов, не требующие обязательного их присутствия в конкретном месте и в конкретное время и устного высказывания своих мнений.

Методы типа "сценариев". Методы подготовки и согласования представлений о проблеме или анализируемом объекте, изложенных в письменном виде, получили название сценариев. Первоначально этот метод предполагал подготовку текста, содержащего логическую последовательность событий или возможные варианты решения проблемы, развернутые во времени. Однако позднее обязательное требование временных координат было снято, и сценарием стали называть любой документ, содержащий анализ рассматриваемой проблемы и предложения по ее решению или по развитию системы, независимо от того, в какой форме он представлен. Как правило, на практике предложения для подготовки подобных документов пишутся экспертами вначале индивидуально, а затем формируется согласованный текст.

Сценарий предусматривает не только содержательные рассуждения, помогающие не упустить детали, которые невозможно учесть в формальной модели (в этом собственно и заключается основная роль сценария), но и содержит, как правило, результаты количественного технико–экономического или статистического анализа с предварительными выводами. Группа экспертов, подготавливающая сценарий, пользуется обычно правом получения необходимых справок от предприятий и организаций, необходимых консультаций.

На практике по типу сценариев разрабатывались прогнозы в отраслях промышленности. Разновидностью сценариев можно считать комплексные программы научно–технического прогресса и его социально–экономических последствий.

Роль специалистов по системному анализу при подготовке сценария:

­ помочь привлекаемым ведущим специалистам соответствующих областей знаний выявить общие закономерности системы;

­ проанализировать внешние и внутренние факторы, влияющие на ее развитие и формирование целей;

­ определить источники этих факторов;

­ проанализировать высказывания ведущих специалистов в периодической печати, научных публикациях и других источниках научно–технической информации;

­ создать вспомогательные информационные фонды (лучше автоматизированные), способствующие решению соответствующей проблемы.

В последнее время понятие сценария все больше расширяется в направлении, как областей применения, так и форм представления и методов их разработки: в сценарий вводятся количественные параметры и устанавливаются их взаимозависимости, предлагаются методики подготовки сценария с использованием ЭВМ (машинных сценариев), методики целевого управления подготовкой сценария.

Сценарий позволяет создать предварительное представление о проблеме (системе) в ситуациях, когда не удается сразу отобразить ее формальной моделью.

Методы экспертных оценок. Изучению возможностей и особенностей применения экспертных оценок посвящено много работ. В них рассматриваются формы экспертного опроса (разные виды анкетирования, интервью), подходы к оцениванию (ранжирование, нормирование, различные виды упорядочения и т.д.), методы обработки результатов опроса, требования к экспертам и формированию экспертных групп, вопросы тренировки экспертов, оценки их компетентности (при обработке оценок вводятся и учитываются коэффициенты компетентности экспертов, достоверности их мнений), методики организации экспертных опросов.

Выбор форм и методов проведения экспертных опросов, подходов к обработке результатов опроса и т.д. зависит от конкретной задачи и условий проведения экспертизы.

Возможность использования экспертных оценок, обоснование их объективности обычно базируется на том, что неизвестная характеристика исследуемого явления трактуется как случайная величина, отражением закона распределения которой является индивидуальная оценка специалиста–эксперта о достоверности и значимости того или иного события. При этом предполагается, что истинное значение исследуемой характеристики находится внутри диапазона оценок, получаемых от группы экспертов, и что обобщенное коллективное мнение является достоверным.

Однако в некоторых теоретических исследованиях это предположение подвергается сомнению. Например, предлагается разделить проблемы, для решения которых применяются экспертные оценки, на два класса. К первому классу относятся проблемы, которые достаточно хорошо обеспечены информацией и для которых можно использовать принцип "хорошего измерителя", считая эксперта хранителем большого объема информации, а групповое мнение экспертов — близким к истинному. Ко второму классу относятся проблемы, в отношении которых знаний для уверенности в справедливости названных предположений недостаточно; Экспертов нельзя рассматривать как "хороших измерителей", и необходимо осторожно подходить к обработке результатов экспертизы, поскольку в этом случае мнение одного (единичного) эксперта, больше внимания уделяющего исследованию малоизученной проблемы, может оказаться наиболее значимым, а при формальной обработке оно будет утрачено. В связи с этим к задачам второго класса в основном должна применяться качественная обработка результатов.

Другая проблема, которую нужно иметь ввиду при проведении системного анализа, заключается в следующем: даже в случае решения проблем, относящихся к первому классу, нельзя забывать о том, что экспертные оценки несут в себе не только узкосубъективные черты, присущие отдельным экспертам, но и коллективно–субъективные черты, которые не исчезают при обработке результатов опроса (а при применении Дельфи–процедуры даже могут усиливаться). Иными словами, на экспертные оценки нужно смотреть как на некоторую "общественную точку зрения", зависящую от уровня научно–технических знаний общества относительно предмета исследования, которая может меняться по мере развития системы и наших представлений о ней. Следовательно, экспертный опрос — это не одноразовая процедура.

Следует обратить также внимание на то, что использование классического частотного подхода к оценке вероятности при организации проведения экспертных опросов бывает затруднительным, а иногда и невозможным (из–за невозможности доказать правомерность использования представительности выборки). Поэтому в настоящее время ведутся исследования характера вероятности экспертной оценки, базирующиеся на теории, размытых множеств, на представлении об экспертной оценке как степени подтверждения гипотезы или как вероятности достижения цели. Одной из разновидностей экспертного метода является метод изучения сильных и слабых сторон организации, возможностей и угроз ее деятельности — метод SWOT–анализа.

Методы типа "Дельфи". Метод "Дельфи", или метод "дельфийского оракула", первоначально был предложен О. Хелмером и его коллегами как итеративная процедура при проведении мозговой атаки, которая способствовала бы снижению влияния психологических факторов при повторении заседаний и повышении объективности результатов. Однако почти одновременно "Дельфи"–процедуры стали средством повышения объективности экспертных опросов с использованием количественных оценок при оценке "дерева цели" и при разработке "сценариев".

Основные средства повышения объективности результатов при применении "Дельфи"–метода — использование обратной связи, ознакомление экспертов с результатами предшествующего тура опроса и учет этих результатов при оценке значимости мнений экспертов.

В конкретных методиках, реализующих процедуру "Дельфи", это средство используется в разной степени. Так, в упрощенном виде организуется последовательность итеративных циклов мозговой атаки. В более сложном варианте разрабатывается программа последовательных индивидуальных опросов с помощью анкет–вопросников, исключающих контакты между экспертами, но предусматривающих ознакомление их с мнениями друг друга между турами. Вопросники от тура к туру могут уточняться. Для снижения таких факторов, как внушение или приспособление к мнению большинства иногда требуется, чтобы эксперты обосновали свою точку зрения, но это не всегда приводит к желаемому результату, а напротив, может усилить эффект приспособляемости. В наиболее развитых методиках экспертам присваивают весовые коэффициенты значимости их мнений, вычисляемые на основе предшествующих опросов, уточняемые от тура к туру и учитываемые при получении обобщенных результатов оценок.

В силу трудоемкости обработки результатов и значительных временных затрат первоначально предусматриваемые методики "Дельфи" не всегда удается реализовать на практике. В последнее время процедура "Дельфи" в той или иной форме обычно сопутствует любым другим методам моделирования систем — морфологическому, сетевому и т.д. В частности, весьма перспективная идея развития методов экспертных оценок, предложенная в свое время В.М. Глушковым, состоит в том, чтобы сочетать целенаправленный многоступенчатый опрос с "разверткой" проблемы во времени, что становится вполне реализуемым в условиях алгоритмизации такой (достаточно сложной) процедуры и использования компьютерной техники.

Для повышения результативности опросов и активизации экспертов иногда сочетают процедуру "Дельфи" с элементами деловой игры: эксперту предлагается проводить самооценку, ставя себя на место конструктора, которому реально поручено выполнять проект, или на место работника аппарата управления, руководителя соответствующего уровня системы организационного управления и т.д.

Идея метода дерева целей впервые была предложена У. Черменом в связи с проблемами принятия решений в промышленности.

Термин "дерево" подразумевает использование иерархической структуры, полученной путем разделения обшей цели на подцели, а их, в свою очередь, на более детальные составляющие, которые можно называть подцелями нижележащих уровней или, начиная с некоторого уровня — функциями. Как правило, термин "дерево целей" используется для иерархических структур, имеющих отношения строго древовидного порядка, но сам метод иногда применяется и в случае "слабых" иерархий. Поэтому в последнее время все большее распространение получает предложенный В.М. Глушковым термин "прогнозный граф", который может представляться и в виде древовидной иерархической структуры, и в форме структуры со "слабыми" связями.

Рис. 5.2. Схема дерева целей

Понятие «дерева» целей имеет ряд определений:

• граф, схема, показывающая деление общих (генеральных) це­лей плана или программы на подцели, последний — на подцели следующего уровня и т.д.;

• граф, т.е. схема, выражающая соподчинение и взаимосвязи элементов;

• графы, показывающие, как генеральная цель проекта разбива­ется на подцели следующего уровня и т.д. («дерево» — это связный граф, выражающий соподчинение и взаимосвязь, элементов — це­лей и подцелей);

Мы будем рассматривать «дерево» целей исследования СУ как структурированную по иерархическому принципу совокупность глав­ной цели и ее подчиненных подцелей системы 1-го, 2-го и после­дующих уровней («вершины» цели), соединенных между собой свя­зями (ребрами, ветвями «дерева» целей). В таком случае «дерево» целей позволяет описать количественные и качественные парамет­ры, сроки достижения определенных результатов и провести анализ иерархически распределенных взаимосвязанных и взаимообуслов­ленных целей СУ.

Структурированные цели системы чаще представляют графиче­ски в виде «дерева» целей, отображающего связи между ними и средства их достижения. Построенное на основе дедуктивной логи­ки с использованием эвристических процедур «дерева» состоит из целей нескольких уровней: генеральная цель — главная цель нуле­вого уровня, цели 1-го уровня, подцели 2-го уровня, субподцели 3-го уровня и так до требуемого уровня. При этом в понятие целей на различных уровнях «дерева» вкладывается различное содержание.

Для достижения генеральной цели необходимо реализовать главные цели (эти цели выступают по отношению вышележащей цели как средства); для достижения каждой из главных целей необ­ходимо реализовать более конкретные цели 2-го уровня и т.д. Обычно для построения «дерева» целей используют процедуры классификации, декомпозиции и ранжирования.

Подцели и связи между ними характеризуются количественно — коэффициентом относительной важности (КОВ) и коэффициентом взаимной полезности (КВП). Каждый уровень целей (подцелей) сле­дует формировать по определенному признаку декомпозиции про­цесса их достижения, а любую цель (подцель) желательно относить к организационно обособленному подразделению или исполнителю.

По своему виду «деревья» могут быть простыми и циклическими. В последних ветви взаимно переплетаются и сращиваются.

По существу, данный метод представляет собой инструмент ор­ганизации работы исполнителей исследования.

ПРАВИЛА СТРУКТУРИЗАЦИИ И ФОРМУЛИРОВАНИЯ ЦЕЛЕЙ, АНАЛИЗ ЦЕЛЕПОЛАГАНИЯ В СУ

Построение «дерева» целей осуществляется на основе логиче­ской дедукции с использованием интуитивного подхода. При этом следует выполнять определенные правила, в частности:

• декомпозиция каждой цели на подцели на том или ином ие­рархическом уровне проводится по одному избранному классифи­кационному признаку;

• каждая цель расчленяется не менее чем на две цели;

• каждая цель должна быть субординационна к другим;

• любая цель каждого иерархического уровня должна относиться только к отдельному относительно обособленному элементу (напри­мер, подсистеме, субподсистеме, подразделению — отделу, бюро, группе, рабочему месту) СУ, т.е. каждая цель должна быть адресной;

• для каждой цели на любом иерархическом уровне должно быть предусмотрено ресурсное обеспечение;

• количество целей на каждом уровне декомпозиции должно быть необходимо достаточным для достижения вышележащей цели, т.е. должна быть обеспечена полнота редукции цели;

• «дерево» целей не должно содержать изолированных вершин, т.е. не должно быть целей, не связанных с другими целями;

• декомпозиция целей проводится до того иерархического уровня, который позволяет определить ответственного исполнителя и состав мероприятий по достижению вышестоящей цели и в ко­нечном итоге главной цели;

• при наличии на иерархическом уровне структуризации более трех-четырех целей следует предусматривать построение «дерева» целей циклического вида.

Крайне важно при этом правильно формулировать цели каждо­го уровня, удовлетворив такие требования, как конкретность, дос­тижимость, измеримость, гибкость (возможность изменения при­оритетов, корректировки целей с течением времени и месту исполь­зования), согласованность и непротиворечивость.

При использовании метода "дерево целей" в качестве средства принятия решений часто вводят термин "дерево решений". При применении "дерева" для выявления и уточнения функций управления говорят о "дереве целей и функций". При структуризации тематики научно–исследовательской организации удобнее пользоваться термином "дерево проблемы", а при разработке прогнозов — термином "дерево направлений развития (или прогнозирования развития)" или упомянутым выше термином "прогнозный граф".

Метод "дерева целей" ориентирован на получение полной и относительно устойчивой структуры целей, проблем, направлений, т.е. такой структуры, которая на протяжении какого–то периода времени мало изменялась при неизбежных изменениях, происходящих в любой развивающейся системе. Для достижения этого при построении вариантов структуры следует учитывать закономерности целеобразования и использовать принципы и методики формирования иерархических структур целей и функций.

Термином "морфология" в биологии и языкознании определяется учение о внутренней структуре исследуемых систем (организмов, языков) или сама внутренняя структура этих систем.

Основная идея морфологического подхода — систематически находить наибольшее число, а в пределе — все возможные варианты решения поставленной проблемы или реализации системы путем комбинирования основных (выделенных исследователем) структурных элементов системы или их признаков. При этом система или проблема может разбиваться на части разными способами и рассматриваться в различных аспектах.

Отправными точками морфологического исследования Ф. Цвикки считает:

1) равный интерес ко всем объектам морфологического моделирования;

2) ликвидацию всех ограничений и оценок до тех пор, пока не будет получена полная структура исследуемой области;

3) максимально точную формулировку поставленной проблемы.

Кроме этих общих положений, Цвикки предложил ряд отдельных способов (методов) морфологического моделирования: метод систематического покрытия поля (МСПП), метод отрицания и конструирования (МОК), метод морфологического ящика (ММЯ), метод экстремальных ситуаций (МЭС); метод сопоставления совершенного с дефектным (МССД), метод обобщения (МО). Наибольшую известность получили три первых метода.

МСПП предполагает, что существует некоторое число так называемых "опорных пунктов" знания в любой исследуемой области. Этими пунктами могут быть теоретические положения, эмпирические факты, открытые законы, в соответствии с которыми протекают различные процессы, и т.д. Исходя из ограниченного числа опорных пунктов знания и достаточного числа принципов мышления, морфологическим методом покрытия поля ищут все возможные решения поставленной проблемы.

Наиболее эффективными методами овладения новыми знаниями, методами хозяйствования и управления, являются деловые игры. Деловые игры — метод имитации выработан для принятия управленческих решений в различных ситуациях путем игры по заданным правилам группы людей или человека и компьютера. Деловые игры позволяют с помощью моделирования и имитации процессов выйти на анализ, решение сложных практических задач, обеспечить формирование мыслительной культуры, управления, мастерства общения, принятия решений, инструментальное расширение управленческих навыков.

Деловые игры выступают как средства анализа систем управления и подготовки специалистов.

Разработку деловой игры необходимо начинать с четкой формулировки ее назначения. После этого можно приступать к формированию схемы игры и основных ее правил. В выбранной схеме функционирования надо предельно точно отразить опыт работы реальных систем, обратив особое внимание на структуру системы, целевые функции подсистем и системы в целом, на выбор управляющих воздействий и т.д. Одна из основных сложностей построения модели исследуемой ситуации заключается в том, что стремление к наиболее полному отражению исследуемой ситуации может привести к излишней детализации модели, которая в свою очередь повлечет за собой усложнение информационного обеспечения построенной модели. В результате этого увеличивается время, затрачиваемое на игру, затрудняется понимание происходящих процессов. Все это приводит к тому, что эффективность проведения игры снижается. Лучший способ избежать такого рода опасности заключается в том, чтобы постоянно помнить о конкретной цели проектируемой игры. Но при этом следует учитывать, что ситуации, анализируемые в игре, не должны быть упрошены до такой степени, что необходимое решение можно было бы найти непосредственно без глубокого анализа протекающих процессов, так как в этом случае результаты, полученные при анализе хозяйственной деятельности, будут носить поверхностный характер.