Д. Анализ и обработка экспертных оценок

Г. Работа с экспертами

В зависимости от характера исследуемого объекта, от степени его формализации и возможности привлечения необходимых экспертов порядок работы с ними может быть различным, но в основном он содержит следующие три этапа.

На первом этапе эксперты привлекаются в индивидуальном порядке с целью уточнить модель объекта, ее параметры и показатели, подлежащие экспертной оценке; уточнить формулировки вопросов и терминологию в анкетах; согласовать целесообразность представления таблиц экспертных оценок в той или иной форме; уточнить состав группы экспертов.

На втором этапе экспертам направляются анкеты с пояснительным письмом, в котором описывается цель работы, структура и порядок заполнения анкет с примерами.

Когда имеется возможность собрать экспертов вместе, особенно если удается их сгруппировать в соответствии с какими-либо признаками, существенно важными для данного опроса, например эксперты из одной организации, только сотрудники сбытовых служб, то цели и задачи анкетирования, а также все вопросы, связанные с анкетированием, могут быть доложены устно. Обязательное условие такой формы экспертного опроса — последующее самостоятельное заполнение анкет при соблюдении всех правил анкетирования.

Третий этап работы с экспертами осуществляется после получения результатов опроса и изучения исследуемого объекта другими методами в процессе обработки и анализа полученных результатов. На этом этапе от экспертов в форме консультаций обычно получают всю недостающую информацию, которая требуется для уточнения полученных данных и их окончательного анализа.

При проведении анализа собранных экспертных данных в соответствии с целями исследования и принятыми моделями необходимо определить согласованность действий экспертов и достоверность экспертных оценок.

Пусть для каждого события C I на основании оценок a ij, заданных группой из Р экспертов, образована матрица рангов важности — , где i =1, 2,..., m — число событий, j =1, 2,..., p — число экспертов. Матрица получается из матрицы путем определения, исходя из коэффициентов относительной важности событий a_ij, рангов важности этих событий, т.е. событиям присваиваются номера 1, 2, 3,..., m натурального ряда чисел.

Таким образом, при ранжировании события располагаются в порядке возрастания или убывания какого-либо признака X, количественно неизмеримого. Ранг a i указывает то место, которое занимает i -е событие среди других m событий, ранжированных в соответствии с признаком X.

Ранжирование применяется, когда события располагаются согласно неизмеримому и неподсчитываемому качеству (например, потребительские свойства товара, направления совершенствования товара и т. д.) или рассматриваются только относительно взаимного расположения во времени или пространстве. Ранжирование может являться менее точным выражением упорядоченной связи событий относительно какого-либо измеримого или подсчитываемого качества как замена переменной порядковым номером в прикидочных расчетах в целях экономии времени и уменьшения трудоемкости вычислений.

При использовании рангов важности для сравнения результатов (событий) нельзя установить, насколько один результат лучше другого, можно только определить ряд предпочтения рассматриваемых результатов. Иными словами, числа, характеризующие порядковую меру предпочтительности результатов, при сравнении, предположим, событий А и Б нельзя делить или вычитать, пытаясь узнать, насколько первый результат лучше второго (см. раздел 4.10.1).

Будем рассматривать упорядоченную последовательность суммарных рангов m событий, которую представим в виде

α₁ < α₂ < … < α_i < …α_m <

где α_i находится из матрицы

В табл. 5.2 приводится условный пример определения рангов важности событий исходя из их коэффициентов относительной важности. (Более важное событие имеет меньший ранг важности.)

Таблица 5.2

Определение рангов важности

		События С
Оценки экспертов αij	Эксперт I = 1	0,5	0,2	0,3
Эксперт I = 2	0,3	0,6	0,1
Ранги важности αij	Эксперт I = 2
Эксперт I = 2
Суммарный ранг важности αij

Среднее значение для суммарных рангов рассматриваемого ряда

равно

Суммарное квадратическое отклонение 5 суммарных событий от среднего значения а есть

Величина S достигает максимального значения в случае, если все р экспертов дадут одинаковые оценки каждому С i событию.

Тогда рассматриваемый ряд суммарных рангов будет иметь вид р, 2р,..., m р.

Вычтем из этого ряда среднее значение:

Сумма квадратов этого ряда равняется

Очевидно, что в качестве меры согласованности экспертов можно принять отношение

называемое коэффициентом конкордации. Величина W изменяется в пределах от 0 до 1. При W = 0 согласованности совершенно нет, т.е. связь между оценками различных экспертов отсутствует. Наоборот, при W = 1 согласованность мнений экспертов полная.

В том случае, если последовательность (5.2) кроме строгих неравенств имеет равенства, т.е. существует совпадение рангов, то формула для вычисления коэффициента конкордации имеет вид

где

Когда ранги повторяются, то для получения нормальной ранжировки, имеющей среднее значение ранга, равное

необходимо приписать событиям, имеющим одинаковые ранги, ранг, равный среднему значению мест, которые эти события поделили между собой.

Например, получена следующая ранжировка событий:

События i
Ранги α i

События 2 и 5 поделили между собой второе и третье места. Значит, им приписывается ранг

события 3, 4 и 6 поделили между собой четвертое, пятое, шестое места, и им приписывается ранг

Таким образом, получаем нормальную ранжировку:

События i
Ранги α i		2,5			2,5

Пример. Рассмотрим ранжирование m = 10 событий р = 3 экспертами: N, Q, R. Результаты расчетов представлены в табл. 5.3.

Таблица 5.3

Расчет коэффициента конкордации

N		4½		4½		7½			7½
Q			2½	4½	4½			6½		6½
R				4½	4½	4½
	5½	½		13½				23½	25½	26½	α= 16½
	- 11	- 10	-7½	- 3	- 4½	3½	6½
d^2			56,25		20,25	12,25	42,25

Таким образом,

Для крайних значений коэффициента конкордации могут быть высказаны следующие предположения. Если W = 0, то согласованности в оценках нет, поэтому для получения достоверных оценок следует уточнить исходные данные о событиях и (либо) изменить состав группы экспертов. При W = 1 далеко не всегда можно считать полученные оценки объективными, поскольку иногда оказывается, что все члены экспертной группы заранее сговорились, защищая свои общие интересы.

Необходимо, чтобы найденное значение W было больше заданного значения W_з (W > W_з). Можно принять W_з = 0,5, т.е. при W > 0.5 действия экспертов в большей степени согласованы, чем не согласованы. При W < 0,5 полученные оценки нельзя считать достоверными, и поэтому следует повторить опрос заново. Жесткость данного утверждения определяется важностью проводимого исследования и возможностью повторной экспертизы. Практика показывает, что очень часто этим требованием пренебрегают.

Расчет коэффициента W при учете компетентности экспертов приводится в работе [13].

6. Прикладные вопросы маркетинговых исследований

6.1. Исследование внешней предпринимательской среды

Наибольший интерес при проведении маркетинговых исследований представляет изучение следующих групп факторов, характеризующих со­стояние внешней предпринимательской среды: политических, экономи­ческих, правовых, социально-демографических, культурных, научно-тех­нических и экологических. Часто каждую такую группу факторов назы­вают отдельным видом внешней предпринимательской среды. При этом в зависимости от исследуемой маркетинговой проблемы могут исследовать­ся только отдельные группы факторов. Внешняя предпринимательская среда может рассматриваться в международном, страновом и региональ­ном аспектах.

Для сбора и анализа маркетинговой информации в зависимости от специфики рассматриваемой проблемы используются те или иные мето­ды из ранее рассмотренных. Используются первичная и вторичная ин­формация, маркетинговые исследования и маркетинговая разведка. Обычно основой для сбора информации служат вопросники (ниже, а также в конце разделов, приводятся перечни вопросов, из числа которых могут формироваться анкеты для проведения конкретных маркетинговых исследований).

Сведения, характеризующие внешнюю среду, полезны для прора­ботки альтернативных сценариев развития рынка и спроса.

Вопросник для изучения внешней предпринимательской среды

Дата добавления: 2014-11-29