Требования к построению и проверке методик

Усвоение этого дает возможность отличить психодиагностическую методику от всех остальных.
Критерии оценки качества психодиагностических методик:
1. по содержательным параметрам
2. из всех методик самую лучшую по качеству
Стандартизация, проверка на надежность и на валидность относится только к строгоформализованным методикам.
Стандартизация.
Методика предназначена для практических психологов и должна быть передана в руки других людей. Психодиагностическая методика должна быть разработана и описана так, чтобы любой психодиагност получил такие же данные, что и ее автор.
Надежность и валидность - это те критерии, по которым можно определить качество и высокую эффективность психодиагностической методики.
Надежность.
Надежность - это первое, на что проверяется методика.
Надежность - это относительное постоянство, устойчивость, согласованность результатов методики при ее проведении на одних и тех же испытуемых.
Надежность - это критерий, говорящий о точности психодиагностических измерений. Надежность зависит от множества причин:
- от степени соблюдения стандартизации процедуры проведения методики (меняющаяся ситуация обследования, колебания в физическом состоянии испытуемого, нечеткость инструкции, указаний, особенности манеры поведения психодиагноста)
- от правильности подбора выборки стандартизации (она должна быть репрезентативна) Если на ней получен небольшой разброс показателей, то коэффициент надежности будет искусственно завышен (или занижен)
- выборка стандартизации должна состоять из таких людей, на которых она рассчитана.
- Валидность.
Другим ключевым критерием оценки качества методик является валидность. Вопрос о валидности методик решается лишь после того, как установлена достаточная ее надежность, поскольку ненадежная методика без знания ее валидности является практически бесполезной.
Валидность – это комплексная характеристика, включающая, с одной стороны, сведения о том, пригодна ли методика для измерения того,для чего она была создана, а с другой стороны, какова ее действенность, эффективность.
Не существует какого-то единого универсального подхода к определению валидности. В зависимости от того, какую сторону валидности хочет рассмотреть исследователь, используются и разные способы доказательства. Другими словами, понятие валидности
включает в себя разные ее виды, имеющие свой особый смысл. Проверка валидности методики называется валидизацией.
Существует несколько видов валидности, называются чаще всего следующие:
1. Валидность “по содержанию”. Этот прием используется в основном в тестах достижений. Обычно в тесты достижений включается не весь материал, который прошли учащиеся, а какая-то его небольшая часть (3–4 вопроса). Можно ли быть уверенным в том,
что правильные ответы на эти немногие вопросы свидетельствуют об усвоении всего материала? На это и должна ответить проверка валидности по содержанию. Для этого проводится сопоставление успешности по тесту с экспертными оценками учителей (по данному материалу). Валидность “по содержанию” также подходит к критериально-ориентированным тестам. Иногда этот прием называют логической валидностью.

2. Валидность “по одновременности”, или текущая валидность, определяется с помощью внешнего критерия, по которому информация собирается одновременно с экспериментами по проверяемой методике. Другими словами, собираются данные,
относящиеся к настоящему времени: успеваемость в период испытания, производительность в этот же период и т.д. С ним коррелируют результаты успешности по тесту.
3. “Предсказывающая” валидность (другое название – “прогностическая” валидность). Определяется также по достаточно надежному внешнему критерию, но информация по нему собирается некоторое время спустя после испытания. Внешним критерием обычно бывает выраженная в каких-нибудь оценках способность человека к тому виду деятельности, для которой он отбирался по результатам диагностических испытаний. Хотя этот прием наиболее соответствует задаче диагностических методик – предсказанию будущей успешности, применять его очень трудно. Точность прогноза
находится в обратной зависимости от времени, заданного для такого прогнозирования.
Чем больше проходит времени после измерения, тем большее количество факторов требуется учитывать при оценке прогностической значимости методики. Однако учесть все факторы, влияющие на предсказание, практически невозможно.
4. “Ретроспективная” валидность. Она определяется на основе критерия, отражающего события или состояние качества в прошлом. Может быть использована для быстрого получения сведений о предсказательных возможностях методики. Так, для
проверки того, в какой мере хорошие результаты теста способностей соответствуют быстрому обучению, можно сопоставить прошлые оценки успеваемости, прошлые экспертные заключения и т.д. у лиц с высокими и низкими на данный момент диагностическими показателями.

Для вычисления количественного показателя – коэффициента валидности – сопоставляются результаты, полученные при применении диагностической методики, с данными, полученными по внешнему критерию, тех же лиц. Используются разные виды линейной корреляции (по Спирмену, по Пирсону).

Дата добавления: 2015-06-04