Технология экспертной оценки

Лекция 7

1 Основные термины и задачи экспертной оценки;

2 Этапы экспертного оценивания;

3 Понятие балльной шкалы.

1 Такое название методов обусловлено тем, что они основываются на использовании сведений и мнений экспертов.

Эксперт по качеству продукции (эксперт) - квалифицированный специалист, отвечающий требованиям профессиональной и квалиметрической компетентности, заинтересованности в участии и работе экспертной комиссии, деловитости и объективности.

Суждение эксперта о качестве продукции (суждение эксперта) - ответ эксперта на поставленный вопрос о качестве продукции, выраженный в количественной или качественной форме.

Экспертная оценка качества продукции - характеристика качества продукции, полученная с использованием экспертных методов оценивания качества продукции.

Экспертные методы совместно с методами, основанныминаизмерениях или расчетах, и самостоятельно применяются для решения следующих задач:

1) оценивание показателей с помощью органов чувств (органолептически);

2) определение номенклатуры показателей качества;

3) определение коэффициентов весомости показателей;

4) выбор базовых образцов для оценки уровня качества.

Экспертное оценивание осуществляют экспертные комиссии, включающие в себя рабочие группы.

Экспертная комиссия по оцениванию качества продукции - совокупность специалистов, организованных для экспертного оценивания качества продукции.

Рабочая группа по оцениванию качества продукции (рабочая группа) - часть экспертной комиссии по оцениванию качества продукции, которая состоит из специалистов, организующих деятельность экспертной группы и обрабатывающих суждения экспертов о качестве продукции.

2 Экспертное оценивание качества продукции осуществляется в четыре этапа.

На первом, подготовительном этапе осуществляется формулирование целей оценки и формирование рабочей и экспертной групп.

Цель оценивания качества продукции формулируется лицом, принимающим решение (ЛПР), до начала формирования экспертной группы.

Лицо, принимающее решение (ЛПР) - это руководитель работы, эффективность которой зависит от результата оценивания качества. Таким лицом может быть главный инженер разработки, менеджер по продажам, кредитор разработки или промышленного освоения продукции.

Цель оценивания качества может быть постоянной на весь период работы рабочей группы или корректируемой в период ее деятельности.

Рабочая группа осуществляет подготовку и проведение экспертного оценивания качества продукции и анализ получаемых результатов. В состав рабочей группы входят организатор, консультант по оцениваемой продукции, технические работники.

Эксперты, входящие в состав экспертной группы, должны одинаково понимать цели и задачи оценивания качества продукции, удовлетворять требованиям к ним.

Компетентность эксперта означает компетентность по оцениваемой продукции (профессиональная компетентность)и по методологии оценивания (квалиметрическая компетентность).

Заинтересованность эксперта в участии в работе экспертной комиссии зависит от его индивидуальных особенностей, загруженности основной работой, возможностей использования ее результатов в своей практической деятельности.

Деловитость эксперта означает, в частности, собранность, оперативность в работе, обоснованность суждений.

Объективность эксперта означает возможность вынесенияимнепредвзятых суждений. Необъективность эксперта - завышение или занижение значений показателей свойств продукции по причинам, не имеющим отношения к ее качеству.

Кроме того, к эксперту могут предъявляться специфические требования, определяемые целями оценивания качества и особенностями оцениваемой продукции, например, в пищевой промышленности - определенный уровень психофизиологических возможностей и хорошее состояние здоровья.

На втором этапе работы осуществляется выбор методов, способов и процедур оценивания. Он выполняется рабочей группой, которая учитывает особенности оцениваемой продукции, установленные сроки выполнения работы, ее трудоемкость, области возможного использования полученных результатов. Определение перечня операций, которые должны быть выполнены экспертами, осуществляется рабочей группой, исходя из целей оценивания, имеющейся информации, выбранных методов, способов и процедур оценивания, сроков и условий выполнения оценивания.

Для получения суждений экспертов используются методы опроса.

Опрос эксперта по качеству продукции (опрос) - процесс выявления экспертных суждений по качеству продукции.

Методы опроса экспертов делятся на групповой и индивидуальный. При групповом совместно опрашивается вся группа или ее часть. При индивидуальном осуществляется опрос каждого эксперта отдельно.

Процедуры опроса экспертов включают интервьюирование, анкетирование и смешанное анкетирование.

При интервьюировании суждение эксперта выявляется в процессе свободной беседы в рамках определенного плана. Интервьюирование применяется при опросах, когда порядок вопросов и их содержание зависят от характера ответов на предыдущие вопросы.

При анкетировании эксперт заполняет карту опроса, отвечая на содержащиеся в ней вопросы. Анкетирование применяется при заочном способе индивидуального опроса.

При смешанном анкетировании эксперт заполняет карту опроса, получая все необходимые разъяснения от лица, проводящего опрос.

Для проведения опроса экспертов методом анкетирования рабочая группа составляет анкету, которая состоит из пояснительной записки и карты опроса. В пояснительной записке излагается цель и процедура анкетирования, на конкретном примере показывается, как следует заполнять графы карты опроса, при необходимости описываются требования потребителей и классификационные группы продукции, приводится другая информация. В карте опроса приводится определенным образом организованный набор вопросов, для каждогоиз которых предусматривается определенный характер ответа.

Третий этап работы осуществляется экспертной группой, члены которой выражают свои суждения в соответствии с установленными на втором этапе методами, способами и процедурами.

На четвертом, заключительном этапе работы экспертной комиссии осуществляется обработка экспертных суждений и оформляется экспертное заключение.

Задача органолептического оценивания показателей качества возникает тогда, когда нужно оценить сенсорно воспринимаемые свойства продукции, такие как вкус продукта питания, цвет ткани, различимость шрифта, соответствие моде одежды- В этом случае задача заключается в создании шкалы порядка, в которой может быть осуществлена оценка. Обычно роль такой шкалы выполняет балльная шкала оценок.

3 Балльная шкала служит для назначения оцениваемому свойству количественных характеристик, являющихся мерой этого свойства.

Основной характеристикой балльной шкалы является диапазон - количество градаций, которое включает шкала, то есть количество оценочных точек. В то же время масштаб, то есть разность между баллами, соответствующими двум соседним градациям, не имеет значения. Например, шкала с высшей оценкой в 5 баллов с градациями через 0, 5 балла имеет тот же диапазон, что и шкала с высшей оценкой в 10 баллов с градациями через 1 балл и шкала с высшей оценкой в 100 баллов с градациями через 10 баллов. Если в этих шкалах не используется 0, то все они являются 10-балльными.

Число градаций применяемой шкалы определяется, исходя из характера решаемой задачи с учетом опыта по оценке качества аналогичной продукции, количества участвующих в работе экспертов, требуемой точности результата и возможностей качественного описания количественных градаций.

Для экспертного оценивания качества продукции как правило используются шкалы с нечетным числом градаций, в которых имеется средний уровень. Наиболее предпочтительными являются шкалы с пятью и семью градациями качества по оцениваемому свойству, причем количество градаций может совпадать (вариант 1) или не совпадать (вариант 2) с количеством баллов.

Вариант 1 Вариант 2

Градация	Баллы	Качеств. оценка	Градация	Баллы	Качеств оценка
		Отличное качество			Очень высокое качество
		Хорошее качество			Высокое качество
		Среднее качество			Выше среднего качество
		Плохое качество			Среднее качество
		Очень плохое кач.			Ниже среднего качество
					Низкое качество
					Очень низкое качество

Выбор одного из двух приведенных вариантов или иного варианта шкалы оценки осуществляется рабочей группой на втором этапе работы экспертной комиссии. На третьем этапе эксперты дают свою балльную оценку качества продукции. На четвертом этапе рабочая группа обрабатывает экспертные оценки.

Одним из наиболеечасто применяемых результатов обработки является средний балл, определяемый по формуле:

a_i - бальная оценка оцениваемого свойства i -м экспертом,

п - количество экспертов, участвующих в оценке качества продукции.

Дата добавления: 2014-01-03