Логико-интуитивные методы исследования систем управления 165

ПРАВИЛА КОНСТРУИРОВАНИЯ И ФОРМУЛИРОВАНИЯ ТЕСТОВ

Для проведения работ по тестированию необходимо:

• четко определять цели, задачи, правила, условия, требуемые результаты, начало и конец, отразив все эти данные в соответст­вующем плане;

• установить возможные последствия тестирования;

• определить необходимый объем информации, и методы ее сбора, обработки и использования; разработать сценарии действий всех участников;

• сформулировать методику проведения оценки результатов тестирования;

• определить направления и варианты использования результатов.

Независимо от вида и разработанного порядка тестирования боль­шое значение для получения объективных результатов имеет конст­руирование и формулирование тестов. Конструктивно тесты в зави­симости от их предназначения могут быть заданы и спроектирова­ны в различной форме. В общем случае тест может рассматриваться в рамках:

1) искусственно созданного воздействия испытательного характера;

2) ответной реакции объекта испытания.

Так, для социального тестирования ответная реакция на тест может конструироваться в виде высказываний:

• «да», «нет»;

• «согласен», «не согласен»;

• «правильно», «неправильно»;

• «совершенно верно», «верно», «скорее верно, чем неверно», «труд­но сказать», «скорее неверно, чем верно», «неверно», «совсем неверно».

Высказывания могут быть даны также в виде оценок, например:

• «очень высокая», «высокая», «выше среднего», «средняя», «ниже среднего», «низкая», «очень низкая»;

• от 1 до 10 баллов;

• от 0 до 1 балла.

Желательно, чтобы конструктивно ответная реакция на тест по­зволяла обрабатывать результаты тестирования математико-статис-тическими методами.

К основным правшам формулирования искусственно созданных воздействий испытательного характера (например, для тестов соци­ально-экономических СУ) следует отнести:

• целенаправленность;

• однозначность понимания;

Глава 5

• логичность;

• краткость (желательно не более одного придаточного предложения);

• информативность;

• простота, понятность и доступность;

• нейтральность;

• позитивность и негативность высказываемых суждений

• альтернативность (с числом возможных суждений не менее четырех и не более десяти, причем как позитивного, так негативно­го характера);

• отсутствие намека на ожидаемый ответ;

• сбалансированность;

• наличие ключа к каждому тесту для обработки полученной информации в соответствии с целями тестирования.

К ответным реакциям, отражаемым в виде высказываний или оценок, практически во многом предъявляется требования, анало­гичные тем, которые предъявляются непосредственно к воздействи­ям, при этом дополнительно включаются требования односложно­сти и точности.

Каждый тест, включая социально-экономические, должен обла­дать определенными свойствами, в частности свойствами назначе­ния, безопасности, экологичности, этичности, экономичности, ва-лидности и надежности.

Свойства безопасности и экологичности относятся только к воз­действиям технического характера.

Этичность теста характеризует его с точки зрения морали, нравственности и корректности

Валидность теста — свойство, обеспечивающее (в зависимости от цели исследования) измерение состояния исследуемого объекта, позволяющее проверять результаты измерения на основе анализа оценки или другими способами, сравнивая полученные данные.

Надежность теста определяется его качеством, и прежде всего точностью измерения. Требования к надежности устанавливаются в зависимости целей и задач тестирования. Проверка надежности осу­ществляется, как правило, параллельным или повторным тестирова­нием объекта исследования. Кроме того, надежность может опреде­ляться методами корреляционного (на основе корреляции высказы­ваний), дисперсионного и факторный анализов.

Характеристики остальных свойств тестов достаточно очевидны.

Пример тестов приведен в Приложении 1.

Дата добавления: 2015-04-29