Тестирование в образовании 4 страница

Характеризуя диагностический метод, недостаточно ограничиться указанием на его измерительно-испытательную направленность. В противном случае приоритет объяснения отдается экспериментальному методу. В действительности диагностическое исследование в своем законченном виде должно включать элементы объяснения, раскрытия причин, наконец выработку соответствующих рекомендаций (подробнее об этом см. ниже).

Психодиагностический метод конкретизируется в трех основных диагностических подходах, которые практически исчерпывают множество известных методик (тестов). Эти подходы могут быть условно обозначены как "объективный", "субъективный" и "проективный".

Суммировать сказанное мы можем в виде иерархической лестницы системы средств познания в психологии (рис. 2.1).

Как видно из рисунка, на вершине находятся принципы психологического исследования. Ниже располагаются исследовательские методы: неэкспериментальный (описательный), экспериментальный и психодиагностический. На еще более низком уровне размещаются соответствующие каждому из названных методов подходы. В нижней части рисунка располагаются конкретные методики, образуемые в рамках тех или иных подходов. На диагностических подходах необходимо остановиться подробнее.

Рис. 2.1. Иерархическая лестница средств познания в психологии

Объективный подход - диагностика осуществляется на основе успешности (результативности) и/или способа (особенностей) выполнения деятельности.

Субъективный подход - диагностика осуществляется на основе сведений, сообщаемых о себе, самоописания (самооценивания) особенностей личности, состояния, поведения в тех или иных ситуациях.

Проективный подход - диагностика осуществляется на основе анализа особенностей взаимодействия с внешне нейтральным, как бы безличным материалом, становящимся в силу его известной неопределенности (слабоструктурности) объектом проекции.

Для читателей, которые привыкли противопоставлять объективное и субъективное, сразу укажем на то, что в данном контексте субъективность не означает ложности, а объективность - истинности. Дальнейшее рассмотрение тех тестов или методик, которые соотносятся с обозначенными подходами, легко позволяет убедиться в справедливости этого положения.

Объективный подход к диагностике проявлений человеческой индивидуальности образует в основном два типа методик, разделение которых стало традиционным. Это методики для диагностики собственно личностных особенностей и тесты интеллекта. Первые направлены на "измерение" неинтеллектуальных

особенностей личности, вторые - на установление уровня ее интеллектуального развития.

Разумеется, такое "обособление" сферы личностных (характерологических) проявлений и сферы интеллекта имеет ограниченный, но тем не менее важный для психодиагностики смысл. С. Л. Рубинштейн в свое время очень точно указал на то, что психические свойства человека образуют две основные группы: характерологические свойства и способности. Первая группа свойств связана с побудительной (мотивационной) регуляцией поведения, а вторая обеспечивает организацию и исполнение. Сохранение за личностными проявлениями, с одной стороны, и интеллектом - с другой, относительной самостоятельности позволяет более глубоко проникнуть в сущность этих психических образований. Наконец, известно, что акцентирование их функционального своеобразия способствовало разработке диагностических методик, практическая ценность которых неоспорима.

Диагностика уровня интеллектуального развития представлена многочисленными тестами интеллекта (тесты общих способностей). Личностные методики, выделяемые в границах объективного подхода, можно условно подразделить на "тесты действия" ("целевые личностные тесты") и "ситуационные тесты". Наиболее распространенные целевые личностные тесты - это разнообразные перцептивные тесты, например обнаружения замаскированных фигур. В ситуационных тестах испытуемый помещается в ситуацию, подобную/схожую с той, какая может возникнуть в жизни. Наконец, в объективном подходе образуются еще две значительные группы тестов: тесты специальных способностей, предназначенные для измерения уровня развития отдельных сторон интеллекта и психомоторных функций, обеспечивающих эффективность в конкретных, достаточно узких областях деятельности, и тесты достижений ¹, которые выявляют степень владения определенными знаниями, умениями, навыками.

Субъективный подход представлен многочисленными опросниками. Эти распространенные диагностические инструменты в самом общем виде могут быть подразделены на личностные опросники, опросники состояния и настроения, а также опросники мнений и опросники-анкеты. Три последние группы опросников предназначены для получения об обследуемом информации, не имеющей, как правило, непосредственного отношения к тем или иным его личностным особенностям, правда, опросники мнений, которые обычны в социологических, социально-психологических исследованиях и конструируются под многообразные конкретные задачи, могут в известной мере отражать и личностные особенности респондентов.

Для методик, созданных в рамках проективного подхода, предлагались различные классификации (подробнее см. гл. 6). Наиболее простым и достаточно удобным является их деление на: моторно-экспрессивные, перцептивно-структурные и апперцептивно-динамические (С. Розенцвейг, 1964).

Описанные выше диагностические подходы выполняют не только классификационную функцию. Эти подходы представлены как бы в виде шкалы "податливости к измеримости" тех индивидуально-психологических особенностей, на

Рис. 2.2. Система "Психодиагностический метод - подход - методика (группы методик)"

раскрытие которых они направлены (последовательно ограничиваются возможности приложения основных психометрических требований, предъявляемых к образованным этими подходами методикам), шкалы, соответствующей в то же время степени структурированности используемого стимульного материала. Сказанное наиболее очевидно при сравнении, например, тестов интеллекта и проективных методик. Для психометрической оценки валидности и надежности последних и сегодня отсутствует адекватный математико-статистический аппарат.

Обсуждаемая нами система "метод - подход - методика" применительно к диагностическому методу, представлена на рис. 2.2.

Внутри каждого из подходов могут быть выделены группы однородных, близких друг к другу методик. Конечно, предложенная классификация не единственно возможная и, как любая другая, имеет определенные недостатки. Понятно, что некоторые конкретные психодиагностические методики трудно отнести к одному из трех выделенных подходов, они будут занимать как бы промежуточное положение. Между различными диагностическими подходами нет и не может быть "непроходимых" границ. Цель нашей классификации не пополнение списка уже существующих, а желание найти простую и логически обоснованную схему изложения тех проблем психологической диагностики, которые представляются нам наиболее важными, актуальными на данном этапе развития психологического знания.

¹ В той или иной степени эти требования распространяются на любой исследовательский метод, однако свою наиболее последовательную и полную реализацию получают в психодиагностическом методе.

² Подробнее об этом см. гл. 3.

¹ Как уже отмечалось, строго говоря, эти тесты нельзя назвать собственно психологическими, однако история их появления и развития тесно связана с психодиагностикой.

2.5. Тест как основной инструмент психодиагностики

Вряд ли кто-либо будет отрицать то, что тест был, есть и остается основным инструментом психологической диагностики. Тест - это modus operandi психодиагностики с момента ее зарождения и по настоящее время. Тест - это инструмент,

с которым непосредственно работает психолог, решающий диагностическую задачу. Сказанное, разумеется, не исключает существования в этой области психологии внетестовой диагностики (оценки), о которой речь шла ранее. В этом разделе необходимо остановиться на понятии теста, его разновидностях, а также на проблемах, возникающих в связи с компьютеризацией тестирования.

2.5.1. Понятие теста. Виды тестов

Под тестом (англ, test - проба, испытание, проверка) понимается ансамбль стандартизированных, стимулирующих определенную форму активности, часто ограниченных по времени выполнения заданий, результаты которых поддаются количественной (и качественной) оценке и позволяют установить индивидуально-психологические особенности личности.

Термин "тест", получивший чрезвычайно широкое распространение в различных областях знания в смысле испытания, проверки, имеет давнюю историю. По Р. Пэнто и М. Гравитц (1972), слово "тест" происходит из старофранцузского языка и является синонимом слова "чашка" (лат. testa - ваза из глины). Этим словом обозначали небольшие сосуды из обожженной глины, использовавшиеся алхимиками для проведения опытов. В русском языке слово "тест" долгое время имело два значения:

1. испытательная присяга, религиозная английская клятва, которую каждый вступающий в общественную должность должен давать, чтобы доказать, что он не тайный католик;
2. плоский плавильный сосуд или сосуд из выщелоченной золы для выделения олова из золота или серебра¹.

Близкое современному содержание термин "тест" как термин психологический получает в конце XIX в. В психодиагностике известны разнообразные классификации тестов. Они могут подразделяться по особенностям используемых тестовых заданий на тесты вербальные и тесты практические, по форме процедуры обследования - на тесты групповые и индивидуальные, по направленности - на тесты способностей, тесты личности и тесты отдельных психических функций, а в зависимости от наличия или отсутствия временных ограничений - на тесты скорости и тесты результативности. Так же тесты могут различаться по принципам их конструирования. За последние десятилетия многие известные тесты были приспособлены к среде компьютера (предъявление, обработка данных и др.), их можно обозначить как тесты компьютеризированные. Активно разрабатываются тесты компьютерные, изначально конструируемые с учетом возможностей современной вычислительной техники. Предложенная нами классификация (см. выше) опирается на реализуемый в тестах диагностический подход.

На страницах этой книги термин "тест" используется наряду с другим термином - методика (иногда - техника). Имеет ли этот термин содержание, отличное от термина "тест"? Для того чтобы ответить на этот вопрос, необходимо вспомнить о становлении советской психодиагностики в 1970-е гг. Слово "тест" в это время имело по известным причинам дополнительное негативное значение,

обозначая не только инструмент исследования, но и его "буржуазное происхождение". Поэтому все используемые тесты были переименованы в методики. Сегодня нет оснований отказываться от термина-понятия, с которым связана вся история и нынешний день психодиагностики. Термин "методика" целесообразно сохранить за нестандартизованными диагностическими инструментами, а также теми из них, которые, как правило, в силу претензий на глобальную диагностику личности, скорее не измеряют ее, а оценивают. К таким диагностическим инструментам в первую очередь относятся проективные методики. Следует также учитывать сложившуюся в русскоязычной литературе традицию употребления термина "опросник". Опросниками (носящий искусственный характер термин "тест-опросник" постепенно вышел из употребления) называют такие психодиагностические инструменты, которые, в отличие от других тестов, направлены на субъективную оценку обследуемым самого себя или других людей.

Тесту, как и любому другому инструменту познания, присущи особенности, которые в конкретных обстоятельствах исследования могут рассматриваться в качестве его достоинств или недостатков. Эффективное использование тестов зависит от учета многих факторов, из которых к важнейшим относятся: теоретическая концепция, на которой базируется тот или иной тест; область применения; весь комплекс сведений, обусловленных стандартными требованиями к психологическим тестам, их психометрическим характеристикам. Распространенные представления о "простоте" и доступности тестов не соответствуют действительности. Являясь средством исследования сложнейших психических явлений, тест не может толковаться упрощенно как предложение задания (заданий) и регистрация его решения. Научное использование тестов возможно лишь при условии опоры на общепсихологические знания, компетентность в области теории и практики соответствующих психодиагностических исследований. Не менее существенно следование этическим нормам психодиагностики.

¹ Русский энциклопедический словарь. 1877.

2.5.2. Компьютеризированные и компьютерные тесты

На современном этапе развития психодиагностики компьютер стал неотъемлемым элементом диагностической деятельности психолога. Внедрение компьютеров в психодиагностику имеет свою историю. На начальном этапе развития информационных технологий (начало 1960-х гг.) функции компьютера были весьма ограничены и сводились в основном к предъявлению достаточно простых стимулов, фиксации элементарных реакций и статистической обработке данных. Компьютер выступает в роли вспомогательного инструмента исследователя, на него возлагаются наиболее трудоемкие, рутинные операции. Однако уже в это время начинает развиваться машинная интерпретация тестов.

Собственно появление так называемой компьютерной психодиагностики за рубежом происходит в период второго этапа развития информационных технологий (1960-е гг.). В первую очередь были автоматизированы все трудоемкие процедуры обработки диагностической информации (подсчет "сырых" баллов, накопление базы данных, расчет норм теста, перевод первичных данных в стандартные показатели и т. д.). Определенное развитие в этот период получили и системы многомерного анализа данных.

Успехи в развитии электроники привели к быстрому снижению стоимости машинных ресурсов, тогда как расходы на математическое обеспечение возросли. Концепция этого этапа развития информационной технологии может быть сформулирована следующим образом: "Все, что может быть запрограммировано, должны делать машины; люди должны делать только то, на что они пока не в состоянии написать программы" (Громов, 1985). Именно к этому периоду относятся основные достижения западной компьютерной психодиагностики. Ко времени возникновения новой машинной технологии обработки информации психодиагностика обладала значительным арсеналом стандартизированных методик. Некоторые выборки обследованных насчитывали миллионы. Благодаря потребности в оперативном анализе массивов данных, быстро развиваются компьютерные средства сбора психодиагностической информации, разрабатываются средства специального программного обеспечения. Компьютер все чаще выступает в роли "экспериментатора".

Третий этап развития информационной технологии (начиная с 1970-х гг.) создал условия для возникновения нового поколения компьютерных психодиагностических систем на базе ПЭВМ, ускорил процесс внедрения в практику автоматизированных тестовых методик, создал основу для последующей формализации и автоматизации процесса сбора и обработки психодиагностической информации. Меняется процедура обследования, общение испытуемого с ЭВМ приобретает форму "диалога". Введение обратной связи позволяет изменять стратегию исследования в зависимости от предшествующих результатов. Именно в этот период появляются первые собственно компьютерные тесты, тесты специально созданные для компьютерной среды. Развитие этих тестов создает предпосылки адаптивного тестирования, связанного в первую очередь с приспособлением заданий к особенностям ответов испытуемого. Отсюда целесообразно разделение тестов на компьютеризированные, или приспособленные к условиям компьютера, и компьютерные.

В последнее десятилетие XX в. компьютеры становятся доступными не только институтам и лабораториям, но и каждому исследователю. В настоящее время сложные психодиагностические исследования реализуются на базе мощных персональных компьютеров, обладающих большим быстродействием и разнообразным набором периферийных устройств.

Отечественная компьютерная психодиагностика как направление исследований оформляется к середине 1980-х гг., и ее развитие не столь непосредственно связано с совершенствованием информационной технологии, как это происходило за рубежом. Психологическая наука вообще занимает далеко не первое место в ряду активных потребителей современной информационной технологии. Любопытно, что только в конце 1960-х гг. советским психологам предлагают овладеть простейшими способами факторного анализа при осуществлении расчетов вручную (!), тогда как за рубежом данный математико-статистический метод, реализуемый с помощью ЭВМ, достаточно широко использовался уже в 1930-е гг.¹.

Появление компьютерных версий тестов в бывшем СССР, а более-менее доступными они становятся ближе к концу 1980-х гг., приветствуется далеко не всеми. Проведенное в начале 1990-х гг. московскими психологами исследование (О. К. Тихомиров и др.) отношения различных социальных групп к компьютеризованному тестированию показало, что с наибольшим энтузиазмом к нему относятся руководители высшего уровня, психодиагносты-разработчики и те лица, которые имеют навыки общения с компьютером и мотивированы на самопознание. Негативное отношение наблюдалось у руководителей среднего звена, непосредственно работающих с подчиненными и знающих их в течение длительного времени. Такое отношение также свойственно психодиагностам-пользователям (правда, у них иногда встречается и некритическое сверхдоверие, возникающее как результат слабой теоретической и практической подготовки в области психодиагностики) и лицам, усматривающим зависимость благополучия в профессиональной деятельности, карьере и т. п. от результатов тестирования.

К достоинствам современных компьютеризированных методик психодиагностики, сравнительно с традиционными, следует отнести:

• неизменность реализуемой программы обеспечивает постоянство условий тестирования, что труднодостижимо при немашинном предъявлении заданий;
• обеспечивается точность и однозначность регистрации множества возможных реакций испытуемого;
• имеется возможность восстановить и проследить последовательность действий испытуемого;
• сравнительно легко образуются единые банки психодиагностических данных, а тем самым устанавливаются эмпирически обоснованные тестовые нормы для разных групп обследуемых;
• создаются возможности для автоматизированного конструирования тестов;
• психолог освобождается от рутинной, трудоемкой работы, как при проведении обследования, так и при конструировании (адаптации) тестов;
• обеспечивается возможность расширения практики группового тестирования и тиражирования методик;
• расширяются возможности применения мощного математико-статистического аппарата анализа данных, упрощается разработка новых процедур анализа;
• облегчается сохранение конфиденциальности результатов тестирования;
• упрощается хранение диагностических данных (на магнитных носителях), снижается себестоимость обследования;
• создаются благоприятные условия для применения экспресс-методик, т. е. тех, проведение которых позволяет быстро получить результаты, что в некоторых случаях (например, в профессиональной психодиагностике) может иметь решающее значение;
• компьютерная процедура предъявления тестовых заданий минимизирует негативные воздействия, нередко возникающие в ситуации межличностного взаимодействия между экспериментатором и испытуемым (снижение действия защитных механизмов у испытуемого, облегчение диагностики индивидуально присущих субъекту особенностей деятельности и мотивации);

• появляется возможность актуализации "игровой" мотивации у испытуемых (оформление теста в виде игры), что делает процесс тестирования более привлекательным и повышает достоверность результатов;
• намечаются пути решения давней проблемы, возникающей как результат несовместимости концептуальных схем интерпретации различных методик (например, создание словаря-тезауруса терминов-названий психических свойств, используемых в научной, литературной и бытовой лексике);
• становится возможным проведение анализа поведения испытуемого непосредственно в ходе обследования, учета многих параметров складывающихся ситуаций, организации диалога в реальном режиме времени (адаптивное тестирование);
• испытуемый при необходимости обеспечивается быстрой интерпретирующей обратной связью по результатам тестирования;
• средства компьютерной графики позволяют предъявлять испытуемому динамические объекты (динамическая стимульная среда), становится возможным использование полимодальных стимулов;
• появляются условия как для индивидуализации психодиагностического исследования, так и проведения быстрых массовых обследований;
• обеспечивается тесная связь с решением практических задач.

Оценить степень вовлеченности компьютера в психодиагностическое исследование можно руководствуясь шкалой, предложенной Хартманом (1986) (рис. 2.3)

Наряду с преимуществами, которые дает использование компьютера, принципиальное значение приобретают вопросы, связанные с появлением новообразований, вносимых компьютером в традиционно сложившуюся в психодиагностике систему взаимодействия "экспериментатор - тест - испытуемый". Отсутствие непосредственного наблюдения и живого контакта с испытуемым вносит примерно те же трудности и ограничения, с которыми приходилось и ранее сталкиваться в групповом тестировании. Кроме того, примерно у 30 % обследованных обнаруживался "феномен компьютерной тревожности" (О. В. Доронина, 1993), причем в 5 % случаев регистрировалось состояние, схожее с фобией¹.

Некоторые тесты в принципе не могут быть переведены в компьютерный режим, для других это ведет к существенному изменению их диагностических качеств, прежде всего валидности и надежности. Автоматизированная версия уже известной психодиагностической методики нуждается в специальной проверке -

Рис. 2.3. Шкала Хартмана

ревалидизации. Также требуется повторное обоснование надежности компьютерного варианта методики, ее рестандартизации на соответствующих выборках. Приведем некоторые примеры.

Изучение влияния компьютеризации исследования на валидность психодиагностических методик показало, что происходит изменение их содержательной валидности. Так, при работе с компьютерной версией теста Равена было обнаружено, что испытуемые дают значимо более низкие показатели, нежели в обычных условиях обследования. Самого пристального внимания заслуживает сравнительно недавно обнаруженный и еще не до конца изученный феномен, суть которого в том, что при компьютерном предъявлении опросника (ММРI) заметно усиливается тенденция давать неопределенные ответы. Стабильность результатов, являющаяся характеристикой надежности диагностической методики, в случае изменения формы предъявления теста существенно снижается, превышая этот показатель при традиционном тестировании.

Обобщенный анализ психологических последствий компьютеризации психодиагностики позволил выявить существенные изменения структурных компонентов деятельности (ее мотивов, целей и операций) по сравнению с традиционными формами (Тихомиров и Гурьева, 1989; и др.). В упомянутом исследовании авторами разработаны критерии дифференцированной оценки психологических последствий, показан их противоречивый характер по отношению к основному критерию - значимости последствий для повышения продуктивности деятельности. Последствия подразделяются на реальные и потенциальные, позитивные и негативные, управляемые и неуправляемые (в этом исследовании изучались: мотивация, целеобразование и операционный состав компьютеризованной психодиагностической деятельности). Были выделены детерминанты (социальный заказ, развитие научного знания, специфика составления алгоритмов и программирования деятельности, техническое обеспечение работы компьютеров, организация деятельности, личностные особенности психодиагностов и обследуемых), которые регулируют соотношение позитивных и негативных последствий компьютеризации психодиагностической деятельности. При этом изменение детерминант выступает как принцип управления последствиями компьютеризации.

Появление и распространение доступных систем психологического тестирования на основе персональных компьютеров, как это ни парадоксально на первый

взгляд, отнюдь не способствует преодолению сложившегося в психодиагностике известного разрыва между теорией и практикой. Напротив, теоретические проблемы психодиагностики, в первую очередь связанные с пониманием природы индивидуально-психологических различий, как бы загоняются внутрь, тормозится разработка интенсивных исследовательских процедур, которая подменяется экстенсивным развитием известных формализованных методик.

Эффект автоматизации интерпретации полученных в психодиагностическом обследовании данных двоякий. С одной стороны, это существенно облегчает работу психологов-практиков, с другой - "навязанные" алгоритмы интерпретаций при их слепом воспроизведении на различных выборках испытуемых способствуют появлению составленных с помощью компьютера псевдозаключений. Заметим, что за рубежом в последнее время, особенно среди высококвалифицированных профессионалов, ориентированных на индивидуальную диагностику, все более отчетливо проявляется тенденция неприятия чужих алгоритмов интерпретации тестовых результатов.

Интерпретационные алгоритмы некоторых популярных тестов выдают пользователю заключения, состоящие из общих, стереотипных утверждений, без труда принимаемых большинством людей как истинные, что сближает их с гороскопом и астрологическими календарями. Сказанное в первую очередь относится к психодиагностическим методикам, претендующим на "глобальный" диагноз личности. Сошлемся лишь на одно из многих зарубежных исследований. Эксперты-психиатры оценивали по 100-балльной шкале точность компьютеризованного тестирования больных с различными диагнозами по методике Роршаха и составленного с помощью компьютера псевдозаключения. Точность реальных компьютерных заключений составила в среднем 65,42 балла, а псевдозаключений - 60,42 балла. Таким образом, компьютеризированная система тестирования по Роршаху обладает только 5 %(!) различительной способностью.

К сожалению, бывает и так, что профессиональные инструменты психодиагностов, совершенно незащищенные от неконтролируемого распространения, попадают в руки горе-энтузиастов или просто предприимчивых людей. Сегодня существуют широкие возможности несанкционированного распространения и применения тестов. В первую очередь этому способствует отсутствие (или их откровенная декларативность в случае наличия) документов, регламентирующих профессиональные и этические аспекты деятельности разработчиков и пользователей психологических тестов. Такое положение дел приводит к тому, что валидность известных и достаточно эффективных диагностических методик резко снижается, они фактически выводятся из профессионального оборота. В то же время выпавшая из поля зрения профессионалов практика компьютерной "аутодиагностики" приводит пользователя не только к заблуждениям, но зачастую наносит значительный ущерб его психике.

В странах СНГ компьютерная психодиагностика на нынешнем уровне ее развития выполняет функцию экстенсивного воспроизводства диагностических методик при почти полном отсутствии профессионально-этического контроля за этим процессом. Определенные успехи адаптивного тестирования за рубежом относятся в основном к диагностике специальных способностей, тогда как

диагностика личностных особенностей в режиме диалога между компьютером и обследуемым остается проблематичной. Необходимость внедрения современной информационной технологии в науки о человеке очевидна, однако эта "технизация" должна сочетаться с углубленным психологическим анализом последствий компьютеризации психодиагностической деятельности. В этом направлении пока сделаны первые шаги. В то же время есть все основания полагать, что синтез современного психологического знания и еще далеко не реализованных возможностей новейших информационных технологий позволит успешно решать многие вопросы теории и практики психологической диагностики.

¹ Теплов Б. М. Простейшие способы факторного анализа // Типологические особенности высшей нервной деятельности человека. - М.: Просвещение, 1967.

Дата добавления: 2015-06-04