Характеристика методов экспертных оценок

При наличии в процессе исследования систем управления интуитивной информацией, преобразуемой воображением используют экспертные методы исследования. Эти методы особенно часто применяются в предшествующих прогнозных и плановых исследованиях систем управления.

Экспертные исследования могут иметь как самостоятель­ное значение, так и использоваться при проверке истинности (верификации) логических исследований и моделирования.

Прогнозные экспертные оценки отражают индивидуаль­ность суждения специалистов относительно эффективности, расхода ресурсов, безопасности, а также перспектив развития объекта и основаны на мобилизации профессионального опыта и интуиции.

Экспертные методы исследований используют для анализа, диагностики состояния, последующего прогнозирования вариантов развития:

1) объектов, развитие которых либо полностью, либо частично не поддается предметному описанию или математи­ческой формализации;

2) в условиях отсутствия достаточно представительной и достоверной статистики по характеристикам объекта;

3) в условиях большой неопределенности среды функционирования объекта, рыночной среды;

4) при средне- и долгосрочном прогнозировании новых рынков, объектов новых областей промышленности, подвер­женных сильному влиянию открытий в фундаментальных науках, (например, микробиологическая промышленность, квантовая электроника, атомное машиностроение);

5) в случаях, когда или время или средства, выделяемые на прогнозирование и принятие решений, не позволяют иссле­довать проблему с применением формальных моделей;

6) отсутствуют необходимые технические средства моде­лирования, например, вычислительная техника с соответствую­щими характеристиками;

7) в экстремальных ситуациях.

В настоящее время разработано значительное количество ме­тодов экспертных оценок, а также существуют различные подходы к их классификации. Мы будем придерживаться следующего подхода к классификации.

Методы экспертных оценок можно разделить на две группы:

методы коллективной работы экспертной группы и методы получе­ния индивидуального мнения членов экспертной группы (рис.1).

Методы коллективной работы экспертной группы предполагают получение общего мнения в ходе совместного обсуждения решаемой проблемы. Иногда эти методы называют методами прямого получения коллективного мнения. Основное преимущество этих методов заключается в возможности разностороннего анализа проблем. Недостатками методов является сложность процедуры получения информации, сложность формирования группового мнения по индивидуальным суждениям экспертов, возможность давления авторитетов в группе. Методы коллективной работы включают методы "мозговой атаки", сценариев, деловых игр, совещаний и "суда".

Рис. 3.5. Методы экспертных оценок

Метод "мозговой атаки" получил распространение как "метод систематической тренировки творческого мышления", нацеленный "на открытие новых идей и достижение согласия группы людей на основе интуитивного мышления". Методы этого типа извест­ны также под названием коллективной генерации идей, мозгового штурма, дискуссионные методы. Все эти методы основаны на сво­бодном выдвижении идей, направленных на решение проблемы. За­тем из этих идей отбираются наиболее ценные.

Возможны различные варианты реализации этих методов. Наи­более распространенным является следующий.

Создаются две группы: генераторов идей и аналитиков. В состав первой группы включаются люди с богатым воображением, как правило, специалисты из смежных областей. Организуется собрание группы, которым руководит ведущий. Основной задачей ведущего является всемерное поощрение инициативы и творчества, свободы выдвижения новых идей, даже на первый взгляд сомни­тельных или абсурдных, недопущение критики. Все выдвинутые идеи фиксируются и передаются группе аналитиков. Группа анали­тиков включает в основном специалистов по данной проблеме, анализирующих предложения и выбирающих среди них наиболее цен­ные.

Достоинством метода "мозговой атаки" является высокая оперативность получения требуемого решения. Основным недостат­ком его - сложность организации экспертизы, так как иногда не­возможно собрать вместе требуемых специалистов, создать непри­нужденную атмосферу и исключить влияние должностных взаимоот­ношений.

Метод сценариев представляет собой совокупность правил по изложению в письменном виде предложений специалистов по решае­мой проблеме. Сценарий представляет собой документ, содержащий анализ проблемы и предложения по ее реализации. Предложения вначале пишут эксперты индивидуально, а затем они согласуются и излагаются в форме единого документа.

Обычно сценарии разрабатываются для прогнозирования раз­вития различных систем, предварительной оценки эффективности и возможного хода выполнения сложной операции и включают описа­ние всех этапов жизненного цикла системы или операции. В даль­нейшем такое описание является основой для разработки формали­зованных моделей различных этапов развития системы. Иначе говоря, сценарий является своеобразной описательной моделью, с которой начинается исследование любой системы в соответствии с этапами моделирования.

Основным преимуществом сценария является комплексный ох­ват решаемой проблемы в доступной для восприятия форме. К не­достаткам можно отнести возможные неоднозначность, нечеткость излагаемых вопросов и недостаточную обоснованность отдельных решений.

Деловые игры основаны на моделировании функционирования социальной системы управления при выполнения операций, нап­равленных на достижение поставленной цели. В отличие от преды­дущих методов, где экспертные оценки формируются в ходе кол­лективного обсуждения, деловые игры предполагают активную дея­тельность экспертной группы, за каждым членом которой закреп­лена определенная обязанность в соответствии с заранее состав­ленными правилами и программой.

Деловые игры широко используются для принятия решений при управлении промышленными предприятиями и другими организациями и направлены также на исследование поведения и обучение специалистов в заданной обс­тановке.

Основным достоинством деловых игр является возможность выработки решения в динамике с учетом всех этапов исследуемого процесса при взаимодействии всех элементов общественной систе­мы управления. Недостаток заключается в сложности организации деловой игры в условиях, приближенных к реальной проблемной ситуации.

Метод совещаний (комиссий, круглого стола) - самый простой и традицион­ный. Он предполагает проведение совещания или дискуссии с целью выработки единого коллективного мнения по решаемой проб­леме. В отличие от метода "мозговой атаки" каждый эксперт мо­жет не только высказывать свое мнение, но и критиковать пред­ложения других. В результате такого тщательного обсуждения уменьшается возможность ошибок при выработке решения.

Достоинством метода является простота его реализации. Од­нако на совещании может быть принято ошибочное мнение одного из участников в силу его авторитета, служебного положения, настойчивости или ораторских способностей.

Метод "суда" является разновидностью метода совещаний и реализуется по аналогии с ведением судебного процесса. В роли "подсудимых" выступают выбираемые варианты решения; в роли "судей" - лица, принимающие решение; в роли "прокуроров" и "защитников" - члены экспертной группы. Роль "свидетелей" вы­полняют различные условия выбора и доводы экспертов. При веде­нии такого "судебного процесса" отклоняются или принимаются те или иные решения.

Метод "суда" целесообразно использовать при наличии нес­кольких групп экспертов, придерживающихся различных вариантов решения.

Методы получения индивидуального мнения членов экспертной группы основаны на предварительном сборе информации от экспер­тов, опрашиваемых независимо друг от друга, с последующей об­работкой полученных данных. К этим методам можно отнести мето­ды анкетного опроса, интервью и методы Дельфи. Основные преимущества метода индивидуального экспертного оценивания состоят в их оперативности, возможности в полной мере использовать индивидуальные способности эксперта, отсутствие давления авторитетов и в низких затратах на экспертизу. Главным их недостатком является высокая степень субъективности получаемых оценок из-за ограниченности знаний одного эксперта.

Метод анкетного опроса предполагает разработку специаль­ных анкет, содержащих перечень вопросов по решаемой задаче. Анкеты размножаются по количеству экспертов и направляются по соответствующим адресам. В процессе заполнения анкет необходи­мо выполнить следующие требования: обеспечить взаимную незави­симость суждений экспертов; при необходимости проверить одноз­начное понимание экспертами вопросов анкеты; не допускать за­полнение одной анкеты несколькими экспертами; анкету заполнять и отправлять в заданные сроки.

Анкеты собирает руководитель экспертизы; обрабатываются они с использованием статистических методов обработки эксперт­ной информации.

Основными достоинствами метода анкетного опроса являются возможность сбора большого объема информации за достаточно ко­роткий срок и независимость суждений экспертов. К недостаткам следует отнести сложность разработки эффективной анкеты, со­держащей обоснованный перечень вопросов.

Метод интервью предполагает беседу руководителя эксперти­зы с экспертом, в ходе которой перед ним по заранее разрабо­танной программе ставятся сформулированные вопросы. Особен­ностью метода интервью является то, что руководитель и эксперт находятся в непосредственном контакте.

Условно выделяют три формы интервью: свободная беседа, когда дополнительные вопросы формируются в ходе интервью; бе­седа по типу "вопрос - ответ", когда определен ограниченный круг вопросов и на них необходимо дать чёткий ответ; перекрестный опрос, когда эксперта спрашивают несколько исследователей.

Достоинством метода интервью является возможность получить сведения, малодоступные анкетному опросу. Однако на результаты опроса может оказать влияние личность руководителя, способность эксперта к контакту, быстрота его мышления и другие факторы.

Метод Дельфи, или метод дельфийского оракула, представляет собой итеративную процедуру анкетного опроса. При этом соблюдается требование отсутствия личных контактов между экспертами и обеспечения их полной информацией по всем результатам оценок после каждого тура опроса с сохранением анонимности оценок, аргументации и критики.

Процедура метода включает несколько последовательных этапов (туров) опроса. На первом этапе производится индивидуальный опрос экспертов, обычно в форме анкет. Эксперты дают ответы, не аргументируя их. Затем результаты опроса обрабатываются и формируется коллективное мнение группы экспертов, выявляются и обобщаются аргументации и пользу различных суждений. Навтором - вся информации сообщается экспертам и, их просят пересмотреть оценки и объяснить причины своего несогласия с коллективным суждением. Новые оценки вновь обрабатываются и. осуществляется переход к следующему этапу. Практика показывает, что после трех-четырёх этапов ответы экспертов стабилизируются и необходимо прекращать процедуру.

Достоинством метода Дельфи является использование обратной связи в ходе опроса, что значительно повышает объективность экспертных оценок. Однако данный метод требует значительного времени на реализацию всей многоэтапной процедуры.

Дата добавления: 2014-01-15