Характеристики методов экспертных оценок

Под экспертными оценками понимают комплекс логических и математических процедур, направленных на получение от специалистов информации, ее анализ и обобщение с целью подготовки и выработки рациональных решений.
Методы экспертных оценок можно разделить на две группы: методы коллективной работы экспертной группы и методы получения индивидуального мнения членов экспертной группы.
Методы коллективной работы экспертной группы предполагают получение общего мнения в ходе совместного обсуждения решаемой проблемы. Иногда эти методы называют методами прямого получения коллективного мнения. Основное преимущество этих методов заключается в возможности разностороннего анализа проблем. Недостатками методов является сложность процедуры получения информации, сложность формирования группового мнения по индивидуальным суждениям экспертов, возможность давления авторитетов в группе.
Методы коллективной работы включают методы "мозговой атаки", "сценариев", "деловых игр", "совещаний" и "суда".
Метод "мозговой атаки". Методы этого типа известны также под названием коллективной генерации идей, мозгового штурма, дискуссионных методов. Все эти методы основаны на свободном выдвижении идей, направленных на решение проблемы. Затем из этих идей отбираются наиболее ценные.
Достоинством метода "мозговой атаки" является высокая оперативность получения требуемого решения. Основным недостатком его - сложность организации экспертизы, так как иногда невозможно собрать вместе требуемых специалистов, создать непринужденную атмосферу и исключить влияние должностных взаимоотношений.
Метод "сценариев" представляет собой совокупность правил по изложению в письменном виде предложений специалистов по решаемой проблеме. Сценарий представляет собой документ, содержащий анализ проблемы и предложения по ее реализации. Предложения вначале пишут эксперты индивидуально, а затем они согласуются и излагаются в форме единого документа.
Основным преимуществом сценария является комплексный охват решаемой проблемы в доступной для восприятия форме. К недостаткам можно отнести возможные неоднозначность, нечеткость излагаемых вопросов и недостаточную обоснованности отдельных решения.
"Деловые игры" основаны на моделировании функционирования социальной системы управления при выполнения операций, направленных на достижение поставленной цели. В отличие от предыдущих методов, где экспертные оценки формируются в ходе коллективного обсуждения, деловые игры предполагают активную деятельность экспертной группы, за каждым членом которой закреплена определенная обязанность в соответствии с заранее составленными правилами и программой.
Основным достоинством деловых игр является возможность выработки решения в динамике с учетом всех этапов исследуемого процесса при взаимодействии всех элементов общественной системы управления. Недостаток заключается в сложности организации деловой игры в условиях, приближенных к реальной проблемной ситуации.
Метод "совещаний" ("комиссий", "круглого стола") - самый простой и традиционный. Он предполагает проведение совещания или дискуссии с целью выработки единого коллективного мнения по решаемой проблеме. В отличие от метода "мозговой атаки" каждый эксперт может не только высказывать свое мнение, но и критиковать предложения других. В результате такого тщательного обсуждения уменьшается возможность ошибок при выработке решения.
Достоинством метода является простота его реализации. Однако на совещании может быть принято ошибочное мнение одного из участников в силу его авторитета, служебного положения, настойчивости или ораторских способностей.
Метод "суда" является разновидностью метода "совещаний" и реализуется по аналогии с ведением судебного процесса. В роли "подсудимых" выступают выбираемые варианты решения; в роли "судей" - лица, принимающие решение; в роли "прокуроров" и "защитников" - члены экспертной группы. Роль "свидетелей" выполняют различные условия выбора и доводы экспертов. При ведении такого "судебного процесса" отклоняются или принимаются те или иные решения.
Метод "суда" целесообразно использовать при наличии нескольких групп экспертов, придерживающихся различных вариантов решения.
Методы получения индивидуального мнения членов экспертной группы основаны на предварительном получении информации от экспертов, опрашиваемых независимо друг от друга, с последующей обработкой полученных данных. К этим методам можно отнести методы анкетного опроса, интервью и методы "Дельфи". Основные преимущества метода индивидуального экспертного оценивания состоят в их оперативности, возможности в полной мере использовать индивидуальные способности эксперта, отсутствии давления со стороны авторитетов и в низких затратах на экспертизу. Главным их недостатком является высокая степень субъективности получаемых оценок из-за ограниченности знаний одного эксперта.
Метод "Дельфи", или метод "дельфийского оракула", представляет собой итеративную процедуру анкетного опроса. При этом соблюдается требование отсутствия личных контактов между экспертами и обеспечения их полной информацией по всем результатам оценок после каждого тура опроса с сохранением анонимности оценок, аргументации и критики.
Процедура метода включает несколько последовательных этапов опроса. На первом этапе производится индивидуальный опрос экспертов, обычно в форме анкет. Эксперты дают ответы, не аргументируя их. Затем результаты опроса обрабатываются и формируется коллективное мнение группы экспертов, выявляются и обобщаются аргументации в пользу различных суждений. На втором - вся информация сообщается экспертам и их просят пересмотреть оценки и объяснить причины своего несогласия с коллективным суждением. Новые оценки вновь обрабатываются и осуществляется переход к следующему этапу. Практика показывает, что после трех-четырех этапов ответы экспертов стабилизируются, и необходимо прекращать процедуру.
Достоинством метода "Дельфи" является использование обратной связи в ходе опроса, что значительно повышает объективность экспертных оценок. Однако данный метод требует значительного времени на реализацию всей многоэтапной процедуры.
Основные этапы процесса экспертного оценивания:

• формирование цели и задач экспертного оценивания;
• формирование группы управления и оформление решения на проведение экспертного оценивания;
• выбор метода получения экспертной информации и способов ее обработки;
• подбор экспертной группы и формирование при необходимости анкет опроса;
• опрос экспертов (экспертиза);
• обработка и анализ результатов экспертизы;
• интерпретация полученных результатов;
• составление отчета.

 

Основные понятия теории информационных систем в экономике

Информационная система - система, в которой ее элементы, цель, ресурсы, структура (организация) рассматриваются, в основном, на информационном уровне (хотя, естественно, имеются и другие уровни рассмотрения, например, энергетический уровень).

Любая информационная система имеет следующие типы основных подсистем:

1. подсистема информационного обеспечения (данных);
2. подсистема интеллектуального обеспечения (информации, знаний);
3. подсистема технического обеспечения (аппаратуры);
4. подсистема технологического обеспечения (технологии);
5. подсистема коммуникативного обеспечения (интерфейса);
6. подсистема анализа и проектирования;
7. подсистема оценки адекватности и качества, верификации;
8. подсистема организационного взаимодействия и управления персоналом;
9. подсистема логистики (планирования и движения товаров и услуг).

Информационная среда - это среда (т.е. система и ее окружение) из взаимодействующих информационных систем, включая и информацию, актуализируемую в этих системах.

Пример. Можно выделить три основных подхода к использованию информационного менеджмента в социально-экономических системах.

1. "Отношений с общественностью" (PR - Public Relations, Пиар), при котором разрабатываются и используются системы управления социально-экономической информацией с целью создания более адекватной и благоприятной среды (включая и все виды ресурсов), общественного сознания для реализации интересов государства, монополии и человека, согласования их интересов, подчас противоречивых. Широко используются при этом методы опроса населения, изучения общественного мнения, рекламирования, прогнозирования и моделирования (особенно для повышения устойчивости и регуляции систем).
2. "Объединения достижений НТР и человека", при котором разрабатываются и реализуются системы массового обучения достижениям НТР, новым информационным технологиям, делопроизводству и т.д. с целью адаптации человека к системам с возросшими техническими и технологическими возможностями, требованиями к качеству продукции и соотношению "качество - цена".
3. "Организационного гуманизма", при котором разрабатываются и реализуются системы помещения трудящихся в стимулирующие их работу культурно-образовательные, социально-психологические, гуманистические и материальные среды с целью раскрытия их потенциальных возможностей и способностей.

Пример. Технологический и социально-экономический отрыв стран Запада и СНГ определяется, в первую очередь, не отсутствием у нас квалифицированных рабочих, хорошей образовательной системы, ресурсов, а отсутствием адекватной им системы информационного и экономического управления, его регулирования, а не саморегулирования (самоорганизации), недостаточным вниманием к третьему подходу к информационному менеджменту. Реформы должны происходить не для обогащения небольшой группы населения, а для повышения благосостояния трудящейся массы (особенно среднего класса - базы любого государства), обеспечения его творческого и плодотворного труда. Это наиболее важно и в то же время трудно обеспечиваемо в условиях экономических реформ.

Информационная система управления - система, предназначенная для управления, - как другой системой, так и внутри системы (т.е. в качестве управляющей подсистемы).

Различают также основные 6 типов информационных систем управления (тип системы определяется целью, ресурсами, характером использования и предметной областью):

1. Диалоговая система обработки запросов (Transaction Processing System) - для реализации текущих, краткосрочных, тактического характера, часто рутинных и жестко структурируемых и формализуемых процедур, например, обработки накладных, ведомостей, бухгалтерских счетов, складских документов и т.д.
2. Система информационного обеспечения (Information Provision System) - для подготовки информационных сообщений краткосрочного (обычно) использования тактического или стратегического характера, например, с использованием данных из базы данных и структурированных, формализованных процедур.
3. Система поддержки принятия решений (Decision Support System) - для анализа (моделирования) реальной формализуемой ситуации, в которой менеджер должен принять некоторое решение, возможно, просчитав различные варианты потенциального поведения системы (варьируя ее параметры); такие системы используются как в краткосрочном, так и в долгосрочном управлении тактического или стратегического характера в автоматизированном режиме.
4. Интегрированная, программируемая система принятия решения (Programmed Decision System) предназначена для автоматического, в соответствии с программно реализованными в системе, структурированными и формализованными критериями оценки, отбора (выбора) решений; используются как в краткосрочном, так и в долгосрочном управлении тактического (стратегического) характера.
5. Экспертные системы (Expert System) - информационные консультирующие и (или) принимающие решения системы, которые основаны на структурированных, часто плохо формализуемых процедурах, использующих опыт и интуицию, т.е. поддерживающие и моделирующие работу экспертов, интеллектуальные особенности; системы используются как в долгосрочном, так и в краткосрочном оперативном прогнозировании, управлении.
6. Интеллектуальные системы, или системы, основанные на знаниях (Knowledge Based System) - поддерживают задачи принятия решения в сложных системах, где необходимо использование знаний в достаточно широком диапазоне, особенно в плохо формализуемых и плохо структурируемых системах, нечетких системах и при нечетких критериях принятия решения; эти системы наиболее эффективны и применяемы для сведения проблем долгосрочного, стратегического управления к проблемам тактического и краткосрочного характера, повышения управляемости, особенно в условиях многокритериальности. В отличие от экспертных систем, в системах, основанных на знаниях, следует по возможности избегать экспертных и эвристических процедур и прибегать к процедурам минимизации риска. Здесь более существенно влияние профессионализма персонала, ибо при разработке таких систем необходимо сотрудничество и взаимопонимание не только разработчиков, но и пользователей, менеджеров, а сам процесс разработки, как правило, происходит итерационно, итерационными улучшениями, постепенным переходом от процедурных знаний (как делать) - к непроцедурным (что делать).

Фундаментальная ошибка с неустранимыми последствиями в информационных системах - принятие неправильных стратегических решений и критериев оценки решений.

Пример. На заре компьютеризации школ многие регионы приняли решение: как можно быстрее оснастить школы компьютерами; в результате многие из них затем не могли освободиться от несовершенной, неприспособленной для задач обучения техники (КУВТ, УКНЦ, ДВК и т.п.) и получить современную технику, так как фактически техника у них была. Стратегически правильным подходом в этой ситуации был бы подход по принципу: "подождём, пока схлынет мутная вода, затем пойдет чистая".

При построении (выборе, адаптации) информационной системы можно использовать две основные концепции, два основных подхода (третья концепция - их комбинация):

• ориентация на проблемы, которые необходимо решать с помощью этой информационной системы, т.е. проблемно-ориентированный подход (или индуктивный подход);
• ориентация на технологию, которая доступна (актуализируема) в данной системе, среде, т.е. технологически-ориентированный подход (или дедуктивный подход).

Выбор концепции зависит от стратегических (тактических) и(или) долгосрочных (краткосрочных) критериев, проблем, ресурсов.

Если вначале изучаются возможности имеющейся технологии, а после определяются актуальные проблемы, которые можно решить с их помощью, то необходимо опираться на технологически-ориентированный подход.

Если же вначале определяются актуальные проблемы, а затем внедряется технология, достаточная для решения этих проблем, то необходимо опираться на проблемно-ориентированный подход.

Ошибки в выборе подхода (проблем, технологии) могут привести не только к ошибочным стратегиям и (или) тактике, но и к полному краху системы.

При этом обе концепции построения информационной системы зависят друг от друга: внедрение новых технологий изменяет решаемые проблемы, а изменение решаемых проблем - приводит к необходимости внедрения новых технологий; и то, и другое влияет на принимаемые решения.

Дороговизна, важность, актуальность информации определяют цели и важность (приоритеты) в управлении информационными системами (в информационных системах).

Системное проектирование (разработка) и использование информационной системы должно пройти следующий жизненный цикл информационной системы:

1. предпроектный анализ (опыт создания других аналогичных систем, прототипов, отличия и особенности разрабатываемой системы и др.), анализ внешних проявлений системы;
2. внутрисистемный анализ, внутренний анализ (анализ подсистем системы);
3. системное (морфологическое) описание (представление) системы (описание системной цели, системных отношений и связей с окружающей средой, другими системами и системных ресурсов - материальных, энергетических, информационных, организационных, людских, пространственных и временных);
4. определение критериев адекватности, эффективности и устойчивости (надежности);
5. функциональное описание подсистем системы (описание моделей, алгоритмов функционирования подсистем);
6. макетирование (макетное описание) системы, оценка взаимодействия подсистем системы (разработка макета - реализации подсистем с упрощенными функциональными описаниями, процедурами, и апробация взаимодействия этих макетов с целью удовлетворения системной цели), при этом возможно использование "макетов" критериев адекватности, устойчивости, эффективности;
7. "сборка" и тестирование системы - реализация полноценных функциональных подсистем и критериев, оценка модели по сформулированным критериям;
8. функционирование системы;
9. определение целей дальнейшего развития системы и ее приложений;
10. сопровождение системы - уточнение, модификация, расширение возможностей системы в режиме ее функционирования (с целью ее эволюционирования).

Эти этапы - основные для информационного реинжиниринга систем.

Пример. Для решения текущих задач ведения бизнеса с учетом разнородных корпоративных интересов используют специальные системы планирования ресурсов предприятия (ERP), как правило, на основе удаленного ("клиент-сервер") доступа к единой базе данных и единых, предопределенных бизнес-процессах, транзакциях, с открытой многоплатформенной архитектурой. Системы ERP позволяют различным организациям (география не имеет значения), с различными информационными системами создавать общую интегрированную информационную систему, используя для этого опыт и решения, разработанные фирмой-поставщиком ERP.

Пример. Особенно актуален реинжиниринг бизнес-процессов (BRP), т.е. процесс реинтеграции и рационализации производственных процессов. Реинжиниринг - это не только уменьшение размерности и сложности системы, не только реструктуризация, не только сокращение числа уровней управления, не только стремление к автоматизации, а фундаментальный, системный пересмотр всей системы (т.е. ее проблем и ресурсов), с целью существенного (например, порядкового) улучшения показателей ее эффективности, устойчивости, рентабельности, жизнеспособности (не только стратегического, но и тактического характера). Это веление времени, современного производства (товаров, услуг, знаний), так как проблемы часто (до реинжиниринга) необходимо разделить на сотни более мелких, коллективы - на сотни более мелких рабочих групп, знания необходимо привлекать как специализированные, так и более широкого диапазона, распределять ресурсы - например, географически. Все это нужно согласовывать по времени, по пространству, по структуре (организации), и число менеджеров при этом резко возрастает.

Пример. Глобализация (рынков, производства, конкуренции и др.) предъявляет свои требования по сближению национальных систем менеджмента. Появилась новая парадигма (т.е. система определяющих концепций, взглядов) глобального менеджмента (GMP) или глобального телекоммуникационного менеджмента. Ее можно назвать системой стратегического глобального реинжиниринга, основанной на знаниях, горизонтальных связях, корпоративной динамике (способность к гибкой онлайн-реакции компании) ориентированной на клиента (продукт, услуги).

Индустрия информационных систем опирается на следующие процессы:

1. повышение мультимедийности, гипермедийности;
2. повышение дружественности к пользователю;
3. интеграция;
4. повышение открытости;
5. распределенность;
6. объектно-ориентированный подход;
7. метабазирование данных и информационных систем;
8. мультиагентное рассмотрение и др.

В последнее время рассматриваются (проектируются, разрабатываются и используются) так называемые корпоративные информационные системы, т.е. информационные системы в масштабе корпорации, организации.

Примеры. Информационная система пенсионных выплат населению, информационная система здравоохранения региона, информационная система биржевой деятельности.

Для разработки корпоративной информационной системы необходимо осуществить следующие мероприятия:

1. информационное обследование корпорации с целью выяснения ее основных целей функционирования, элементов, структуры, направлений, приоритетов и задач деятельности, информационных потоков и технологий, эволюционных возможностей корпорации, критериев оценки эффективности системы (результат этого этапа - проект информационной системы);
2. выбрать одну из двух основных концепций разработки информационной системы - проблемно-ориентированную или технологически-ориентированную (результат этого этапа - архитектура информационной системы, например, архитектура "клиент-сервер" с удаленным сервером баз данных, а также инструментальное и другое обеспечение системы, например, ОС UNIX, ORACLE);
3. определить ключевые элементы, подсистемы, в частности, подсистему управления корпоративной базой данных, подсистему автоматизации делопроизводства, подсистему согласования, принятия и контроля решений, подсистему тренинга (результат этапа - структура системы и подсистем, например, с использованием Lotus Notes, Action Workflow, EDMS - Electronic Document Management Systems, CBR Express).

При разработке целей, определении ресурсов необходимо тесное взаимодействие управляющего, проектирующего, разрабатывающего и пользовательского звена системы. Здесь недопустимы ложные критерии конфиденциальности и защиты информации, всегда влияющие негативно на стратегическое и долгосрочное планирование и прогнозирование, а также непрофессионализм принятия решений в каждом звене.

Главный лозунг разработки информационных систем: "Разработка информационной системы осуществляется не для внедрения (использования) информационной системы, а для обеспечения эффективного управления, функционирования, планирования и прогнозирования, эволюции системы, которую она информационно поддерживает".