Студопедия

КАТЕГОРИИ:


Архитектура-(3434)Астрономия-(809)Биология-(7483)Биотехнологии-(1457)Военное дело-(14632)Высокие технологии-(1363)География-(913)Геология-(1438)Государство-(451)Демография-(1065)Дом-(47672)Журналистика и СМИ-(912)Изобретательство-(14524)Иностранные языки-(4268)Информатика-(17799)Искусство-(1338)История-(13644)Компьютеры-(11121)Косметика-(55)Кулинария-(373)Культура-(8427)Лингвистика-(374)Литература-(1642)Маркетинг-(23702)Математика-(16968)Машиностроение-(1700)Медицина-(12668)Менеджмент-(24684)Механика-(15423)Науковедение-(506)Образование-(11852)Охрана труда-(3308)Педагогика-(5571)Полиграфия-(1312)Политика-(7869)Право-(5454)Приборостроение-(1369)Программирование-(2801)Производство-(97182)Промышленность-(8706)Психология-(18388)Религия-(3217)Связь-(10668)Сельское хозяйство-(299)Социология-(6455)Спорт-(42831)Строительство-(4793)Торговля-(5050)Транспорт-(2929)Туризм-(1568)Физика-(3942)Философия-(17015)Финансы-(26596)Химия-(22929)Экология-(12095)Экономика-(9961)Электроника-(8441)Электротехника-(4623)Энергетика-(12629)Юриспруденция-(1492)Ядерная техника-(1748)

Значение Коэффициента Кронбаха для выделенных факторов




Выделенные факторы и вопросы, их определяющие

Фактор Вопросы с ключевыми ответами a Вопросы с ключевыми ответами b
1. Тревожность - эмоциональная стабильность 18, 32, 35, 43, 49, 61, 74, 85, 86, 94, 99, 118, 123, 124, 145, 149, 154, 161, 164, 170, 174 25, 44, 62, 93, 100, 179
2. Энергичность, активность- пассивность 10, 33, 97, 110, 111, 113, 135, 156, 180, 182, 184, 186 27, 35, 61, 72, 82, 106
3. Настойчивость, уверенность в себе - покорность, подверженность влиянию 5, 15, 20, 23, 47, 65, 90, 107, 119, 131, 142, 160, 173 4,17,41,45,59, 81, 172, 175
4. Сила Сверх-Я - Слабость Сверх-Я 12, 40, 48, 63, 68, 73, 75, 98, 144, 169, 176, 185 9, 84
5. Обособленность- зависимость от группы 56, 71, 79, 88, 121, 146, 171 34, 122
6. Рациональность, практичность- мечтательность 11, 26, 62, 72, 87, 157, 158, 185 23, 36, 37, 58, 83, 84, 112, 116, 132, 135, 138, 163
7. Импульсивность- сдержанность 7, 24, 29, 47, 66, 67, 69, 80, 133, 136, 154, 183 37, 104, 138, 139

Вопросы, "работающие" на выделенные факторы, были подвергнуты статистической обработке с последующим анализом полученных показателей внутренней согласованности. Результаты представлены в табл. 3.8.

Таблица 3.8

  Фактор α
1. Тревожность - эмоциональная стабильность 0,7878
2. Энергичность, активность - пассивность 0,7535
3. Настойчивость, уверенность в себе - покорность, подверженность влиянию 0,8117
4. Сила "Сверх-Я" - Слабость "Сверх-Я" 0,7203
5. Обособленность - зависимость от группы 0,6726
6. Рациональность, практичность - мечтательность 0,7769
7. Импульсивность - сдержанность 0,6797

Нетрудно убедиться, что значения коэффициента надежности - согласованности Кронбаха достаточно велики для выделенных факторов, а это свидетельствует об однородности построенных шкал. Поскольку не существует формальных способов проверки гипотезы о равенстве нулю коэффициента Кронбаха, в своей работе мы использовали его лишь в качестве дескриптивной меры согласованности заданий исходных и полученных с помощью факторного анализа шкал. Напомним, что для шкал опросников наиболее характерны значения коэффициента Кронбаха в диапазоне 0,6-0,8.

На завершающем этапе исследования нами были рассчитаны среднее и стандартное отклонения для новых и оригинальных ключей1 (табл. 3.9, 3.10).

Таблица 3.9

Нормативные данные для выборки из 227 испытуемых (новые "ключи")

Название фактора Среднее отклонение Стандартное отклонение
Тревожность - эмоциональная стабильность 2,1507 0,8355
Энергичность, активность - пассивность 1,5707 0,7552
Настойчивость, уверенность в себе - покорность, подверженность влиянию 1,6391 0,8400
Сила "Сверх-Я" - Слабость "Сверх-Я" 1,4560 0,7097
Обособленность - зависимость от группы 2,0528 0,8491
Рациональность, практичность - мечтательность 2,1188 0,8375
Импульсивность - сдержанность 2,1360 0,8490

Таблица 3.10

Нормативные данные для выборки из 227 испытуемых (оригинальные "ключи")

Фактор Среднее отклонение Стандартное отклонение
А 1,5606 0,7704
В 1,6828 0,6108
С 1,8137 0,7763
E 1,9089 0,7897
F 1,9121 0,8106
G 1,5845 0,7426
H 1,6498 0,7799
I 1,7908 0,8645
L 2,0663 0,7904
M 2,0976 0,8572
N 1,9311 0,8333
O 2,1389 0,8401
Q1 1,9105 0,8567
Q2 2,0923 0,8941
Q3 1,6092 0,7500
Q4 2,1361 0,8414

Результаты проведенного исследования позволили ответить на вопрос о том, насколько мы точны в измерении факторов, постулированных Кеттеллом. Предварительные

нормативные данные могут служить ориентиром для заключений об относительной степени выраженности у испытуемого некоторых личностных черт. Памятуя об ограниченности выборки, отметим, что новые "ключи" и нормы следует использовать с известной осторожностью.

1 См., напр., Бурлачук Л. Ф., Морозов С. М. Словарь-справочник по психодиагностике. - СПб.: Питер, 1999, а также Гласе Дж., Стэнли Дж. Статистические методы в педагогике и психологии / Пер. с англ. - М.: Прогресс, 1976.

1 Автор выражает свою признательность за участие в этой работе своему бывшему аспиранту Виталию Духневичу.

1 Для получения стандартного показателя из "сырого" балла вычитается среднее и делится на стандартное отклонение по шкале. Этот показатель в будущем будет использоваться для того, чтобы привести полученные данные к стандартной шкале. В нашем случае это шкала стенов (от 1 до 10, со средним 5,5 и стандартным отклонением 2).

Заключение

Подводя итоги вышеприведенного, достаточно краткого рассмотрения психометрических основ психодиагностики, хотелось бы подчеркнуть, что измерение человеческого поведения - необычайно сложная задача. Основная проблема заключается в том, что речь идет об измерениях во внефизической сфере, сфере гуманитарной науки, а используемый математико-статистический аппарат призван обслуживать (и успешно обслуживает) прежде всего измерение физических явлений. Вполне понятно желание многих исследователей предельно объективировать психологическое измерение, задавая такие требования к тестам, как надежность, дискриминативность, валидность. Соответствие этим требованиям зачастую представляется как условие точности и объективности наших измерений. В то же время зачастую не учитывается, что гуманитарные науки накладывают на процесс измерения множество ограничений. Формализация и количественные методики, математические модели в психодиагностике никогда не смогут заменить разработку теоретических конструктов, фундаментальных принципов исследования. Достаточно четко это прослеживается в развитии понятия валидности теста - его важнейшей характеристике как исследовательского инструмента. Понятие конструктной валидности, вобравшее в себя все подходы к определению валидности, - яркий пример того, что в конструировании тестов нельзя ограничиться математическими расчетами, как бы достоверны и убедительны они ни были. Без полного, насколько это возможно, психологического описания переменной (конструкта), для измерения которой предназначается тест, без формулирования гипотез о его результатах в свете того, что нам известно об этой переменной, процесс создания теста становится упражнением из математической статистики. Разработка тестов - творческий акт исследователя, и именно поэтому известных и завоевавших популярность методик, несмотря на множество изобилующих рецептами "кулинарных" книг по их изготовлению, не так уж и много, что хорошо известно любому психологу-практику.

Глава 4

Измерение интеллекта

Люди отличаются от других животных интеллектом. Человеческий интеллект отличается от интеллекта машин. Интеллект детей отличается от интеллекта взрослых. Также есть отличия в интеллекте человеческих существ одного и того же возраста...

Энциклопедия психологии

Психологическая диагностика располагает огромным арсеналом разнообразных методик (тестов), позволяющих установить индивидуальные различия между людьми по тем или иным психологическим признакам. Особую группу этих методик составляют те, которые созданы для измерения уровня интеллектуального развития.

Проблема измерения интеллекта, как уже говорилось в главе 1, - одна из наиболее дискуссионных, волнующих не только психологов, но и широкую общественность. Применение тестов интеллекта, раскрывающих индивидуальные различия в способностях, а тем самым дифференцирующих людей на более и менее способных, имеет серьезные социальные последствия и сопряжено со значительными этическими проблемами.

В нашей стране тесты интеллекта широко применялись в 1920-1930-е гг. (по данным А. Шуберт, 1930, в период 1920-1930-х гг. в стране использовалось 25 отечественных и 17 зарубежных тестов, значительная часть которых предназначалась для диагностики интеллекта). Это были годы массового применения тестов в народном образовании, профориентации и профотборе. Прекращение тестирования по идеологическим соображениям в середине 1930-х гг. (см. гл. 1) лишило психологию инструментов измерения уровня интеллектуального развития. "Второе пришествие" тестов измерения интеллекта в СССР, напомним,

происходит в 1970-е гг.1 Это были в основном американские тесты, многие из которых имели длительную историю развития, опыт работы с ними передавался от одного поколения зарубежных психологов к другому. За тестами, естественно, потянулся и шлейф всех тех проблем, которые возникают при измерении интеллекта, проблем, во многом остающихся новыми или малоизвестными для нас и по сегодняшний день.

Предполагается, что эти тесты предназначены для измерения интеллекта. Энциклопедии и справочники по психологии дают различные определения этого понятия. Так какой же интеллект измеряют тесты? В зарубежной психодиагностике сформировалась психометрическая модель интеллекта, которая обычно признается традиционной. Эта модель базируется на следующих положениях.

  1. Допускается существование единой всепроницающей способности, названной общим интеллектом, или G (см. подробнее в главе 1 раздел, посвященный исследованиям Ч. Спирмена).
  2. Общий интеллект имеет биологическую основу, а в соответствии с этим высоко коррелирует с наследственностью (h) и различными психофизиологическими показателями.
  3. Тесты интеллекта измеряют биологический интеллект.

Психометрическая модель интеллекта постоянно развивается и уточняется многочисленными исследованиями, в которых устанавливаются связи между /Q и скоростью передачи нервного сигнала, временем реакции, параметрами вызванных потенциалов и т. д. и т. п. Только лишь обзоры этих исследований занимают многие сотни страниц в современной зарубежной психологической литературе. Насколько правомерна традиционная психометрическая модель интеллекта? Возможны ли иные представления о его природе, а тем самым о том, что измеряется тестами интеллекта? Каковы причины индивидуальных различий в уровне развития интеллекта? Ответам на эти вопросы и будет посвящена данная глава.

1 Сопротивление тестам со стороны академической психологии было настолько сильным, что даже в 1981 г. К. М. Гуревич писал о том, что печать направленности на "обслуживание потребностей капиталистической системы в той или иной степени несут самые известные батареи тестов - шкала А. Бине, тесты Д. Векслера, Р. Кеттелла".

4.1. Подходы к определению интеллекта

В 1921 г. семнадцати ведущим американским психологам задали три следующих вопроса.

  1. Что такое интеллект?
  2. Насколько хорошо он может быть измерен групповыми тестами?
  3. Каким должен быть следующий шаг в его изучении?

В итоге не было получено и двух совпадающих ответов. Нельзя сказать, что эта ситуация повторится и сегодня, однако можно быть вполне уверенным в том, что при попытке задать эти вопросы нынешним психологам мы вряд ли получим много совпадающих ответов.

Таким образом, сегодня, как и вчера, в попытке определить интеллект мы сталкиваемся со значительными трудностями. Можно выделить следующие основные подходы1.

  • Интеллект — это то, что измеряется тестами интеллекта.
  • Интеллект — это обобщенная способность к обучению.
  • Интеллект — это способность к отвлеченному, абстрактному мышлению.
  • Интеллект — это то, что обеспечивает эффективность адаптации, поведения в сложной среде.

Рассмотрим эти определения подробнее. Вероятно, первым определение интеллекта как того, что измеряют тесты, предложил Эдвин Боринг (Boring, 1923). Данная точка зрения свидетельствовала об отсутствии единой позиции в понимании интеллекта. Хотя определение интеллекта через средство измерения и воспринимается как отказ от его содержательного анализа, тем не менее за таким определением интеллекта стоит нечто большее, нежели вульгарная тавтология, подобная "маслу масляному". Определяя интеллект подобным образом, исследователи, вероятно, стремились выразить то, что речь идет не об интеллекте в обыденном значении этого слова, а интеллекте, определенном на основе успешности решения разного рода задач, приближенных к тем, которые человек решает в повседневной жизни. Прав Г. Айзенк, отмечавший:"Определение интеллекта на основании психометрических свойств, выявляемых с помощью IQ тестов, проще, а потому удобнее в пользовании.... На первый взгляд оно кажется тавтологическим и тривиальным, однако это не так. Тесты интеллекта не составляются как Бог на душу положит: они основываются на определенных и хорошо известных природных закономерностях, таких как принцип позитивного многообразия, т. е. тот факт, что любые корреляции между когнитивными заданиями, как бы ни была различна их природа, оказываются положительными при условии тестирования достаточно разнообразных сторон способностей испытуемых. В данное определение также укладывается то обстоятельство, что матрицы взаимных корреляций между тестами, как правило, имеют ранг, близкий к единице, что предполагает наличие очень сильного общего фактора" (Айзенк, 1995).

Наиболее очевидным, а поэтому и имеющим давние традиции, является понимание интеллекта как способности к обучению. Однако, понимая интеллект как способность к обучению, мы, желаем того или нет, "привязываем" его к задачам только лишь одного вида деятельности. Есть и иные причины, не позволяющие принять это определение интеллекта. Рассматривая данное понимание интеллекта, Анастази задает вопрос: обучению чему? И, отвечая на этот вопрос, подчеркивает, что в "нашей культуре интеллект традиционно связывался со школьным обучением".

Действительно, во многих работах показано, что данные, полученные с помощью тестов интеллекта, значимо коррелируют с успешностью обучения (коэффициент корреляции равен примерно 0,50, причем зависимость более высока

в начальных классах школы, а затем несколько снижается). Но оценки успеваемости отражают не процесс обучения, а его результат, сами же корреляции объясняются тем, что большинство тестов интеллекта измеряют, насколько присущи индивиду интеллектуальные навыки, которыми овладевают в школе (известно, что в качестве внешнего критерия валидности тестов для измерения интеллекта выступает школьная успеваемость). Ни тесты интеллекта, ни школьные оценки не дают возможности предсказать, как человек будет справляться со многими жизненными ситуациями.

Наконец, обучаемость различным навыкам, операциям, действиям в немалой степени зависит от их специфичности, тогда как в нашем случае речь идет о вполне определенных, прежде всего мыслительных навыках. И по этой причине нельзя отождествлять интеллект с обобщенной способностью к обучению.

Представление об интеллекте как способности к абстрактному мышлению, эффективному использованию схем и символов в конечном счете также сужает не только понятие интеллекта, но и сферу его проявлений. Наиболее отчетливо это выступает в когнитивной психологии, сосредоточившей свое внимание на процессуальных характеристиках интеллекта, сведенного к способности решения задач. Нетрудно представить, что если интеллект явно больше того, что измеряется интеллектуальными тестами, то тем более не исчерпывается способностями к концептуализации и абстрактному рассуждению.

Определение интеллекта через приспособительную деятельность находит все больше сторонников. Для Пиаже (Piaget, 1960) сущность интеллекта выступает в структурировании отношений между средой и организмом, а его развитие проявляется в более адекватной адаптации. Вернон (Vernon, 1960) отмечает, что интеллект соответствует общему уровню сложности и гибкости в схемах поведения личности, последовательно сформировавшихся в течение ее жизни.

Очевидно, невозможно определить интеллект вне многообразных форм взаимодействия индивида с окружающей средой. С позиций отечественной психологии это взаимодействие рассматривается как активное, действенное, а не просто приспособление, адаптация. "Понятие такого рода, как интеллект, раскрывается лишь в плане конкретных действенных взаимоотношений индивида с окружающей действительностью" (С. Л. Рубинштейн, 1940, с. 537).

Такое понимание интеллекта позволяет рассматривать его как процесс, а не результат, выступающий в виде способности к обучению, способности к абстрактному мышлению и т. д.

Обсуждаемые подходы к пониманию интеллекта — теоретические конструкты, имеющие обобщенный характер. Нас же прежде всего интересует интеллект измеренный, выраженный с помощью определенных количественных показателей. В течение многих лет развиваемый аппарат количественной оценки способностей дает возможность перейти от теоретических построений к практике, только через которую и осуществима содержательная конкретизация явления, фиксируемого понятием "интеллект".

Сколь ни очевидно ничтожна практическая и теоретическая цена измерительной шкалы Бине или других психотехнических испытаний, сколь ни плох сам по себе тест, как

идея, как методологический принцип, как задача, как перспектива это огромно. Сложнейшие противоречия психологической методологии переносятся на почву практики и только здесь могут получить свое разрешение (Выготский, 1982, т. 1, с. 388).

Итак, интеллект может быть измерен с помощью соответствующих тестов — тестов интеллекта. Что же они собой представляют в самом общем виде (здесь полезно вспомнить и о том, что мы уже знаем о тестах интеллекта из истории психодиагностики)?

1 В советской психологии долгие годы термин "интеллект" использовался преимущественно для обозначения высшего этапа психического развития животных, а психологические проблемы интеллекта человека, по сути, сводились к изучению мышления.

4.2. Тесты для измерения интеллекта, их виды

Сразу нужно отметить, что строгой классификации тестов для измерения ума или его отдельных особенностей не существует. Сегодня как в отечественной, так и в зарубежной литературе используются следующие термины: наиболее обобщенный и часто употребляемый - "тесты интеллекта" (intelligence tests) или его несколько устаревший вариант - "умственные тесты" (mental tests). Наряду с ними встречаем такие термины, как "тесты специальных способностей" (special abilities tests или attitudes tests), "тесты общего интеллекта" (general intelligence tests) или в качестве синонима "тесты общих способностей" (general abilities tests). В принципе исторически сложилось деление этих тестов на измеряющие общий интеллект и специальные способности, и сегодня вряд ли есть необходимость в новых классификациях, несмотря на все чаще употребляемый для обозначения тех и других термин "когнитивные тесты".

В зависимости от типа заданий тесты подразделяются на: вербальные (например, тест классификации слов) и невербальные (например, матрицы Равена). Помимо этого, тесты интеллекта делятся на: индивидуальные (например, шкалы Векслера) и групповые (например, армейский тест Альфа). Кроме названных разновидностей тестов, иногда выделяют тесты интеллекта для специфических популяций (А. Анастази). Эти тесты предназначены для обследования младенцев, лиц с физическими недостатками и людей, принадлежащих к разным культурам.

Компьютеризация психодиагностических исследований привела к появлению адаптивных тестов интеллекта, в которых, в зависимости от успешности решения ранее предложенных заданий, осуществляется выбор сложности последующих заданий.

Как уже нам известно из.истории психодиагностики, психометрический интеллект по настоящее время рассматривается с позиций двух школ - английской и американской или, иными словами: школы, признающей общие способности, и школы, их отрицающей. Об этом более подробный разговор пойдет ниже, а пока, в связи с существованием этих подходов в понимании интеллекта, мы можем говорить о тестах, в которых используется суммарная оценка выполнения разных видов заданий, и тестах, в которых интеллект предстает в виде успешности выполнения отдельных, не связанных друг с другом групп заданий. Укажем также на то, что в последние десятилетия на Западе весьма популярна теория, согласно которой интеллект подразделяется на текучий и кристаллизованный (в рамках школы, признающей общность всех способностей). Отсюда полагается и существование тестов, измеряющих тот или иной тип интеллекта.

4.3. Структура интеллекта

Как, очевидно, читатель помнит, первые исследования по структуре интеллекта начались на рубеже XIX и XX вв. В своих, ставших сегодня хрестоматийными работах Спирмен предполагает, что любая интеллектуальная деятельность содержит единый фактор, названный генеральным, и множество специфических факторов, присущих только одному виду деятельности. За вековой период развития теории интеллекта появилось много концепций, как тех, в которых развивались представления Спирмена, так и опровергавших теорию генерального фактора. О них и пойдет речь в данном разделе учебника.

4.3.1. Иерархические теории структуры интеллекта

Уже в работах Спирмена и его учеников было выдвинуто предположение о том, что группа различных показателей находится во взаимосвязи, определяя одну способность. Такие перекрывающие друг друга структуры корреляций ведут к так называемым групповым факторам, которые не содержатся во всех показателях способностей, а являются общими для более или менее ограниченных групп тестов. На этой основе развивается иерархическая теория интеллекта, в развитие которой значительный вклад был внесен английским психологом Верноном.

На вершине иерархии находится генеральный фактор, открытый Спирменом. Затем следуют достаточно широкие групповые факторы вербально-образовательного (v: ed) и практическо-механического (k: т) интеллекта. Они также могут подразделяться: например, вербально-образовательный фактор состоит из вербального и счетного субфакторов, а практическо-механический - из механико-информационного, пространственного и мануального субфакторов. На низшем уровне иерархии лежат специфические факторы (рис. 4.1).

Иерархический подход к структуре интеллекта в дальнейшем получает развитие в работах многих психологов, примыкающих к английской психологической школе, и по сей день в той ли иной форме сохраняет свое значение в исследованиях этой школы. Примером может служить современная теоретическая модель теста Стэнфорд-Бине (рис 4.2). Более того, иерархический подход был реализован и в описании личностных черт, что наиболее ярко представлено в известных работах Ганса Айзенка.


Рис. 4.1. Иерархическая модель факторов интеллекта


Рис. 4.2. Теоретическая модель теста Стэнфорда-Бине

4.3.2. Модель интеллекта по Терстоуну

Английский подход к структурированию способностей, базирующийся на признании главенствующей роли генерального фактора, объединяющего многообразные способности человека, не признается в работах американских психологов, сконцентрировавших свое внимание на групповых факторах. Путь к изучению разнообразных групповых факторов проложила публикация американского психолога Келли "Перекрестки человеческого разума" (Crossroads in the Mind of Man: A Study of Differentiable Mental Abilities - Kelly, 1928), в которой автор критически проанализировал методологию Спирмена. По мнению Келли, генеральный фактор имеет сравнительно небольшое значение и является следствием гетерогенности испытуемых и вербальной природы большинства тестов. Основные связи между тестами обеспечиваются групповыми факторами, к которым Келли относил: оперирование пространственными отношениями, операции с числами, оперирование вербальным материалом, память и скорость мышления. Одним из ведущих оппонентов теории генерального фактора Спирмена, продолжившим работы Келли, был Терстоун, внесший значительный вклад в развитие техники факторного анализа, создатель мультифакторной теории интеллекта.

Методы анализа Спирмена основывались на предположении о том, что только один фактор содержится в матрице корреляций между всеми возможными парами тестов. Терстоун разрабатывает статистический аппарат, позволяющий определить минимальное количество факторов в матрице, которое необходимо предположить для объяснения способности к выполнению заданий тестов. Он исходит из принципа "простой структуры", суть которого заключается в том, что матрица факторов подвергается ротации, с тем чтобы можно было получить максимально возможное число больших по абсолютной величине факторных весов и одновременно максимально возможное число нулевых или близких к нулю по величине факторных весов. В табл. 4.1 показана корреляция 9 тестов с 3 факторами, иллюстрирующая "простую структуру".

Таблица 4.1

Идеализированный случай "простой структуры"

Тест Фактор
А В С
  x    
  x    
  x    
    x  
    x  
    x  
      x
      x
      x

Терстоун так поясняет принцип "простой структуры": "Мы считаем само собой разумеющимся, что индивидуальные различия в остроте зрения не играют

роли при осуществлении шага, тем самым мы предполагаем, что те или иные функции (возможности) мозга необходимы индивидууму при решении не любых, а некоторых задач. В этом и заключается принцип простой структуры".

Таким образом, определенные умственные операции образуют группу и для нее есть так называемый первичный фактор (см. табл. 4.2). Из табл. 4.2 следует, что в тестах 1, 2, 4, 5 наблюдается влияние трех групповых факторов, а в тестах 3 и 6 - двух факторов.

Таблица 4.2




Поделиться с друзьями:


Дата добавления: 2015-06-04; Просмотров: 953; Нарушение авторских прав?; Мы поможем в написании вашей работы!


Нам важно ваше мнение! Был ли полезен опубликованный материал? Да | Нет



studopedia.su - Студопедия (2013 - 2024) год. Все материалы представленные на сайте исключительно с целью ознакомления читателями и не преследуют коммерческих целей или нарушение авторских прав! Последнее добавление




Генерация страницы за: 0.037 сек.