Экспертные методы исследования систем управления

МИНИСТЕРСТВО ОБРАЗОВАНИЯ И  НАУКИ РОССИЙСКОЙ ФЕДЕРАЦИИ

Федеральное государственное  бюджетное образовательное учреждение высшего профессионального образования

«Нижегородский государственный  национальный исследовательский университет им. Лобачевского»

 

ЭКОНОМИЧЕСКИЙ ФАКУЛЬТЕТ

Кафедра государственного и муниципального управления

 

 

 

Реферат

на тему:

Экспертные методы исследования систем управления

 

 

 

 

Выполнила:

Студентка 2 курса магистратуры , гр. 764м

Дневного отделения

Кулыгина Е.Н.

Научный руководитель:

Породина С.В.

 

 

Н.Новгород 2013г.

Развитие системного анализа  неразрывно связано с такими понятиями, как «мозговая атака», «сценарии», «дерево целей», морфологические  методы и т.п. Перечисленные термины  характеризуют тот или иной подход к активизации выявления и  обобщению мнений опытных специалистов-экспертов (термин «эксперт» в переводе с  латинского означает «опытный»). Иногда все эти методы называют «экспертными». Однако есть и особый класс методов, связанных непосредственно с опросом экспертов, так называемый метод экспертных оценок (так как при опросах принято проставлять оценки в баллах и рангах), поэтому названные и подобные им подходы иногда объединяют термином «качественные» (оговаривая условность этого названия, так как при обработке мнений, полученных от специалистов, могут использоваться и количественные методы). Этот термин (хотя и несколько громоздкий) в большей мере, чем другие отражает суть методов, к которым вынуждены прибегать специалисты, когда они не только не могут сразу описать рассматриваемую проблему аналитическими зависимостями, но и не видят какие из рассмотренных выше методов формализованного представления систем могли бы помочь получить модель для принятия решения.

Возникновение перечисленных  терминов, как правило, связано с  конкретными условиями проведения исследований, или даже с именем автора подхода. Однако варианты последующего применения методов настолько разнообразны, что сейчас трудно говорить об однозначности  использования приведенных терминов.

Дадим краткий обзор экспертных методов.

Концепция мозговой атаки  получила широкое распространение  с начала 50-х годов как «метод систематической тренировки творческого  мышления», направленный на «открытие  новых идей и достижение согласия группы людей на основе интуитивного мышления». Методы этого типа известны также под названиями мозгового  штурма, конференций идей, коллективной генерации идей (КГИ).

Обычно при проведении мозговой атаки, или сессий КГИ, стараются  выполнить определенные правила, суть которых сводится к тому, чтобы  обеспечить как можно большую  свободу мышления участников КГИ  и высказывания ими новых идей; для этого рекомендуется приветствовать любые идеи, даже если они вначале  кажутся сомнительными или абсурдными (обсуждение и оценка идей проводится позднее), не допускается критика, не объявляется ложной идея и не прекращается обсуждение ни одной идеи. Требуется  высказывать как можно больше идей (желательно нетривиальных), стараться  создавать как бы цепные реакции  идей.

В зависимости от принятых правил и жесткости их выполнения различают прямую мозговую атаку,  метод обмена мнениями,  методы типа комиссий, судов  (когда одна группа вносит как можно больше предложений, а вторая — старается их максимально  критиковать) и т.п. В последнее  время иногда мозговую атаку проводят в форме деловой игры.

На практике подобием сессий КГИ являются разного рода совещания  — конструктораты, заседания ученых и научных советов, специально создаваемых временных комиссий.

В реальных условиях достаточно трудно обеспечить жесткое выполнение требуемых правил, создать «атмосферу мозговой атаки», на конструкторатах и советах мешает влияние должностной структуры организации: трудно собрать специалистов на межведомственные комиссии. Поэтому желательно применять способы привлечения компетентных специалистов, не требующие обязательного их присутствия в конкретном месте и в конкретное время и устного высказывания своих мнений.

Методы типа «сценариев».  Методы подготовки и согласования представлений  о проблеме или анализируемом  объекте, изложенных в письменном виде, получили название сценариев.  Первоначально  этот метод предполагал подготовку текста, содержащего логическую последовательность событий или возможные варианты решения проблемы, развернутые во времени. Однако позднее обязательное требование временных координат  было снято, и сценарием стали называть любой документ, содержащий анализ рассматриваемой проблемы и предложения по ее решению или по развитию системы, независимо от того, в какой форме он представлен. Как правило, на практике предложения для подготовки подобных документов пишутся экспертами вначале индивидуально, а затем формируется согласованный текст.

Сценарий предусматривает  не только содержательные рассуждения, помогающие не упустить детали, которые  невозможно учесть в формальной модели (в этом собственно и заключается  основная роль сценария), но и содержит, как правило, результаты количественного  технико-экономического или статистического  анализа с предварительными выводами. Группа экспертов, подготавливающая сценарий, пользуется обычно правом получения  необходимых справок от предприятий  и организаций, необходимых консультаций.

На практике по типу сценариев  разрабатывались прогнозы в отраслях промышленности. Разновидностью сценариев  можно считать комплексные программы  научно-технического прогресса и  его социально-экономических последствий.

Роль специалистов по системному анализу при подготовке сценария — помочь привлекаемым ведущим специалистам соответствующих областей знаний выявить  общие закономерности системы; проанализировать внешние и внутренние факторы, влияющие на ее развитие и формирование целей; определить источники этих факторов; проанализировать высказывания ведущих  специалистов в периодической печати, научных публикациях и других источниках научно-технической информации; создать вспомогательные информационные фонды (лучше автоматизированные), способствующие решению соответствующей проблемы.

В последнее время понятие  сценария все больше расширяется  в направлении как областей применения, так и форм представления и методов их разработки: в сценарий вводятся количественные параметры и устанавливаются их взаимозависимости, предлагаются методики подготовки сценария с использованием ЭВМ (машинных сценариев), методики целевого управления подготовкой сценария.

Сценарий позволяет создать  предварительное представление  о проблеме (системе) в ситуациях, когда не удается сразу отобразить ее формальной моделью. Но все же сценарий — это текст со всеми вытекающими  последствиями (синонимия, омонимия, парадоксы), связанными с возможностью неоднозначного его толкования разными специалистами. Поэтому такой текст следует рассматривать как основу для разработки более формализованного представления о будущей системе или решаемой проблеме.

Методы экспертных оценок.  Изучению возможностей и особенностей применения экспертных оценок  посвящено  много работ. В них рассматриваются формы экспертного опроса (разные виды анкетирования, интервью), подходы к оцениванию (ранжирование, нормирование, различные виды упорядочения и т.д.), методы обработки результатов опроса, требования к экспертам и формированию экспертных групп, вопросы тренировки экспертов, оценки их компетентности (при обработке оценок вводятся и учитываются коэффициенты компетентности экспертов, достоверности их мнений), методики организации экспертных опросов.

Выбор форм и методов проведения экспертных опросов, подходов к обработке  результатов опроса и т.д. зависит  от конкретной задачи и условий проведения экспертизы. Однако существуют некоторые  общие проблемы, которые нужно  помнить специалисту по системному анализу. Остановимся на них подробнее.

Возможность использования  экспертных оценок, обоснование их объективности обычно базируется на том, что неизвестная характеристика исследуемого явления трактуется как  случайная величина, отражением закона распределения которой является индивидуальная оценка специалиста-эксперта о достоверности и значимости того или иного события. При этом предполагается, что истинное значение исследуемой характеристики находится  внутри диапазона оценок, получаемых от группы экспертов, и что обобщенное коллективное мнение является достоверным.

Однако в некоторых  теоретических исследованиях это  предположение подвергается сомнению. Например, предлагается разделить проблемы, для решения которых применяются  экспертные оценки, на два класса. К  первому классу  относятся проблемы, которые достаточно хорошо обеспечены информацией и для которых  можно использовать принцип «хорошего измерителя», считая эксперта хранителем большого объема информации, а групповое мнение экспертов — близким к истинному. Ко второму классу  относятся проблемы, в отношении которых знаний для уверенности в справедливости названных предположений недостаточно; экспертов нельзя рассматривать как «хороших измерителей», и необходимо осторожно подходить к обработке результатов экспертизы, поскольку в этом случае мнение одного (единичного) эксперта, больше внимания уделяющего исследованию малоизученной проблемы, может оказаться наиболее значимым, а при формальной обработке оно будет утрачено. В связи с этим к задачам второго класса в основном должна применяться качественная обработка результатов. Использование методов осреднения (справедливых для «хороших измерителей») в данном случае может привести к существенным ошибкам.

Задачи коллективного  принятия решений по формированию целей, совершенствованию методов и  форм управления обычно можно отнести  к первому классу. Однако при разработке прогнозов и перспективных планов целесообразно выявлять «редкие» мнения и подвергать их более тщательному  анализу.

Другая проблема, которую  нужно иметь ввиду при проведении системного анализа, заключается в  следующем: даже в случае решения  проблем, относящихся к первому  классу, нельзя забывать о том, что  экспертные оценки несут в себе не только узкосубъективные черты, присущие отдельным экспертам, но и коллективно-субъективные черты, которые не исчезают при обработке результатов опроса (а при применении Дельфи-процедуры даже могут усиливаться). Иными словами, на экспертные оценки нужно смотреть как на некоторую «общественную точку зрения», зависящую от уровня научно-технических знаний общества относительно предмета исследования, которая может меняться по мере развития системы и наших представлений о ней. Следовательно, экспертный опрос — это не одноразовая процедура. Такой способ получения информации о сложной проблеме, характеризующейся большой степенью неопределенности, должен стать своего рода «механизмом» в сложной системе, т.е. необходимо создать регулярную систему работы с экспертами.

Следует обратить также внимание на то, что использование классического  частотного подхода к оценке вероятности  при организации проведения экспертных опросов бывает затруднительным, а  иногда и невозможным (из-за невозможности  доказать правомерность использования  представительности выборки). Поэтому  в настоящее время ведутся  исследования характера вероятности  экспертной оценки, базирующиеся на теории, размытых множеств Заде, на представлении  об экспертной оценке как степени  подтверждения гипотезы или как  вероятности достижения цели. Одной  из разновидностей экспертного метода является метод изучения сильных  и слабых сторон организации, возможностей и угроз ее деятельности — метод SWOT-анализа.

Методы типа «Дельфи».  Метод «Дельфи», или метод «дельфийского оракула», первоначально был предложен О. Хелмером и его коллегами как итеративная процедура при проведении мозговой атаки, которая способствовала бы снижению влияния психологических факторов при повторении заседаний и повышении объективности результатов. Однако почти одновременно «Дельфи»-процедуры стали средством повышения объективности экспертных опросов с использованием количественных оценок при оценке «дерева цели» и при разработке «сценариев».

Основные средства повышения  объективности результатов при  применении «Дельфи»-метода — использование обратной связи, ознакомление экспертов с результатами предшествующего тура опроса и учет этих результатов при оценке значимости мнений экспертов.

В конкретных методиках, реализующих  процедуру «Дельфи», это средство используется в разной степени. Так, в упрощенном виде организуется последовательность итеративных циклов мозговой атаки. В более сложном варианте разрабатывается программа последовательных индивидуальных опросов с помощью анкет-вопросников, исключающих контакты между экспертами, но предусматривающих ознакомление их с мнениями друг друга между турами. Вопросники от тура к туру могут уточняться. Для снижения таких факторов, как внушение или приспособление к мнению большинства иногда требуется, чтобы эксперты обосновали свою точку зрения, но это не всегда приводит к желаемому результату, а напротив, может усилить эффект приспособляемости. В наиболее развитых методиках экспертам присваивают весовые коэффициенты значимости их мнений, вычисляемые на основе предшествующих опросов, уточняемые от тура к туру и учитываемые при получении обобщенных результатов оценок.

В силу трудоемкости обработки  результатов и значительных временных  затрат первоначально предусматриваемые  методики «Дельфи» не всегда удается реализовать на практике. В последнее время процедура «Дельфи» в той или иной форме обычно сопутствует любым другим методам моделирования систем — морфологическому, сетевому и т.д. В частности, весьма перспективная идея развития методов экспертных оценок, предложенная в свое время В.М. Глушковым, состоит в том, чтобы сочетать целенаправленный многоступенчатый опрос с «разверткой» проблемы во времени, что становится вполне реализуемым в условиях алгоритмизации такой (достаточно сложной) процедуры и использования компьютерной техники.