Классификация автоматизированных средств психодиагностики
Уровни автоматизации | Объект психологического измерения | ||||||||
Психофизиологические реакции | Когнитивная сфера | Характерологические качества | Социально-психологические качества и межличностные отношения | Деятельностная сфера | |||||
Объективные тесты | Объективные тесты | Субъективные тесты | Проективные тесты | Субъективные тесты | Проективные тесты | Объективные тесты | Субъективные тесты | ||
Обработка психологических данных (АОПД) | Статистические программы | ||||||||
Обработка и интерпретации данных (АОИПД) | + | + | + | + | + | ||||
«Компьютерные игры» на основе игры-диалога (АИД) | + | ||||||||
В настоящее время компьютерная психодиагностика располагает громадным арсеналом автоматизированных средств. Мы можем себе позволить привести примеры малой толики всей этой завораживающей палитры диагностических процедур. Этот перечень вряд ли удовлетворит наиболее любознательных пользователей, ибо в противовес ему существует богатейший выбор инструментария в Интернете.
Первая группа перечня психодиагностических компьютерных программ касается в основном исследования психофизиологических реакций испытуемых, хотя в их содержании можно обнаружить так называемые «интеллектуальные тесты»(IQ) и даже шкалы-опросники (САН).
Программа "АCTONICS" по времени реакции испытуемых на визуальный стимул формирует таблицу данных, показывающих среднее время реакции, текущую работоспособность, cтрессоустойчивость и т. д.
Программа "MAIN" содержит: тест оценки распределения внимания, объема внимания, методику САН, методику Спилбергера и методику "Реакция на движущийся объект" (РДО).
Программа "PFS_M" представляет собой прототип методики, заложенной в автоматизированном психодиагностическом комплексе "ФИЗИОЛОГ-М". Она содержит тест "Выбор", направленный на исследование внимания и скорости реакций на цветовые сигналы, и тест "Принятие решения", оценивающий устойчивость внимания, скорости мыслительных операций и подвижность психических процессов.
Программа "PSIHOMET" содержит десять субтестов: тест на восприятие времени; тест на восприятие движения; тест оценки зрительного анализатора, который заключается в сравнении геометрических фигур с эталоном; тест на зрительные иллюзии; методику исследования памяти на литеры; тест оценки памяти на графику; интеллектуальный тест; методику исследования психомоторики, состоящую из измерения простой реакции, реакции выбора, реакции на движение, координации движений и реакции на «цифру»; методику исследования внимания и психодиагностический тренажер «Модель аварийной ситуации с приборными досками».
Программа "REAC" состоит из шести субтестов. Это методика исследования памяти (слуховой, зрительной, на цифры, на буквы), тест оценки реакции (на звук, на цвет, на символы), тест исследования координации (на слуховой стимул, на визуальный, на смешанный), тест оценки восприятия временных интервалов, количества объектов, восприятия пространственного расположения объектов, тест на общий интеллект и исследование его структуры и методика расчета биоритмов.
Вторая группа перечня психодиагностических компьютерных программ предназначена для оценки когнитивных особенностей испытуемых. К ним в полной мере можно отнести программы "CFIT", "KORIFEY", "KOT", "PAMVNIM" и "RAVEN".
Программа "CFIT" представляет собой автоматизированный вариант теста интеллекта C.F.2A.
Программа "KORIFEY" — тест интеллекта на основе заданий Г. Айзенка (определение IQ относительно популяционной нормы).
Программа "KOT" есть автоматизированный вариант оценки интеллекта, основанной на адаптации теста Вандерлика (определение IQ относительно популяционной нормы).
Программа "PAMVNIM" представляет собой исследование при помощи компьютера зрительной памяти и концентрации внимания в процессе предъявления карточек с метками (точками), где через заданный интервал времени требуется воспроизвести их положение на карточках.
Программа "RAVEN" — компьютерная интерпретация матриц Дж. К. Равена.
К группе программ оценки характерологических особенностей относятся в основном автоматизированные опросники и технологии исследования характерологических признаков.
Программа "BIOGRAF" является методикой автобиографического изучения личности (авторы — Кроник А.А., Пажитнов А.Л.).
Программа "GRAFO" представляет собой методику графологического изучения личности (Borland, 1985), основанную на анализе особенностей почерка испытуемых.
Программа "ITT" — методика оцеки интегрированной тревожности, в основу которой положен известный метод Спилбергера — Ханина. Авторы компьютерной версии — А.П. Бизюк и др.
Программа "MOTIV1" представляет собой тест мотивации достижений.
Программа "OSGOOD" — автоматизированный вариант методики "Семантического дифференциала" Ч. Осгуда.
Программа "PDOL" — это опросник А. Д. Личко.
Программа "SZONDI" — популярная версия теста Сонди.
Программа "VSC" представляет собой тест-опросник волевого самоконтроля (ВСК). Автор — Е.В. Эйдман.
Существует по крайней мере пять вариантов программ "KETTEL", содержащих варианты автоматизированных опросников Р. Кэттелла с описанием этих опросников.
Программы "LUSHER" содержат более четырех вариантов автоматизированных тестов М. Люшера. Например, "LUSHER1" — программа-игрушка; "LUSHER2" — вариант программы Н.Н. Страхова и Б.В. Петрова; "LUSHER3" — программа Э.В. Пашковского и С.Е. Поддубного и др.
Программы "MMPI" содержат несколько вариантов автоматизации методики MMPI. Это наиболее распространенный комплексный тест общей профориентации MMPI (566 вопросов). Например, компьютерная версия Н.Н. Страхова полного MMPI выдает профиль по основным, а также данные по 144 дополнительным шкалам. Автоматизированный вариант "ACLIP" представляет собой версию опросника, разработанного Д.А. Ковригиным, С.В. Сенатовой, Т.А. Волоховой, К.Р. Червинской и О.Ю. Щелковой в лаборатории клинической психологии Психоневрологического института им. В.М. Бехтерева при программном обеспечении СПбГУ. В основу положен сокращенный вариант (383 вопроса) адаптированного Миннесотского многошкального личностного опросника MMPI, разработанного и адаптированного И.Н. Гильяшевой, Л.Н. Собчик и Т.Л. Федоровой в 1984.
Программа «Дерево» представляет собой частично автоматизированный вариант графического теста «Деревоа» К. Коха. Разработчики — И.Н. Носс и В.Ю. Костюченко. Адаптация методики для использования в целях диагностики акцентуаций характера была проведена И.Н. Носсом и В.Н. Игнаткиным в 1998 г.
Формализованный графический тест "Дерево" (ФГТД) составлен на основе теоретических разработок К. Коха (1949), изложенных в отечественной психологической литературе*. Его применение в нашей стране и за рубежом в комплекте с другими личностными тестами (MMPI и др.) позволяет сделать вывод о высокой концептуальной и эмпирической валидности данного типа методов в процессе диагностики характерологических черт личности. Проведенное авторами формализации исследование валидности* теста позволило выделить признаки, обязательно присутствующие в рисунках лиц, отнесенных к одной из трех групп лиц с акцентуациями характера — астенического типа (Pt), возбудимого типа (Pd), аутичного типа (Sch). Соответствующие обозначения (Pt, Pd, Sch) в методике проставлены сразу за номером признака.
Данная формализация позволяет повысить качество анализа рисунков и сократить время обработки и интерпретации полученных психологических данных. Предлагаемый вариант формализации позволяет выработать алгоритм работы с графическими тестами и значительно облегчить и упростить их автоматизацию.
Порядок работы. Испытуемому предлагается на листе бумаги (21х30) выполнить рисунок дерева, желательно не хвойного. Он может пользоваться карандашом любого цвета.
Графологический анализ рисунка производится по определенныи схемам, с помощью которых выбираются числа, обозначающие признаки по рисунку. Автоматизация касается процедуры выбора черт характера испытуемых, соответствующих ранее отобранным числам. Составляется обобщенная характеристика, достоверность которой может подтверждаться при помощи других личностных тестов.
Программа "TUF" представляет собой методику «Тест юмористических фраз», автоматизированную А.Г. Шмелевым и В.С. Бабиной в 1988 году. ТЮФ — это тест личностных особенностей, связанных с пониманием юмора. Он относится к тестам оценки юмора и может рассматриваться как проективная методика диагностики мотивационной сферы личности. Методика предложена А.Г. Шмелевым и В.С. Болдыревой в 1982 году.
Стимульный материал представляет собой 80 юмористических фраз (афоризмов), из которых 40 однозначно относятся к одной из 10 заданных тем (по 4 фразы на каждую), а остальные фразы являются многозначными. Испытуемые, исходя из собственной апперцепции, усматривают в них ту или иную тему из числа основных. Соответствие фраз основным темам проверено нормативными экспериментами. В предлагаемых фразах отражены темы: садизм, секс, пагубные пристрастия (пьянство), деньги, мода, карьера, семейные неурядицы, социальные неурядицы, бездарность в искусстве и человеческая глупость.
Процедура проведения теста достаточно проста. Испытуемому предлагается классифицировать набор карточек с фразами таким образом, чтобы в одной группе находились карточки с фразами на одну тему. Закончив классификацию, испытуемый дает названия выделенным им классам. По этим названиям экспериментатор определяет одну из 10 тем, которой соответствует выделенный испытуемым класс. Если испытуемый неясно формулирует интерпретируемые названия, то индентификация стандартной темы производится по однозначным фразам, попавшим в состав класса (так, если в выделенную группу карточек попадают три и более фраз, однозначно относящихся к основной теме, то к ней же относится и вся группа).
Проективный потенциал методики ТЮФ заключается в том, что субъект зачисляет в один класс как однозначные, так и многозначные стимулы. Составители методики полагают, что чем больше многозначных стимулов объединяет вокруг себя однозначный стимул, тем выше мотивационная значимость соответствующей темы. Появление сверхкрупного класса является свидетельством сверхзначимой (доминирующей) мотивации, предметное содержание которой соответствует предметному содержанию этого класса.
Подсчет тестовых баллов, отражающих "напряженность" отдельных мотивационных тем, сводится к подсчету карточек в соответствующих им группах. Показатели могут быть представлены в виде профиля. При интерпретации сравниваются показатели, выявляющие порядковую структуру индивидуального профиля мотивационных тем, их доминирование, "притягивание" (апперцептирование) стимульного материала одних тем другими. При интерпретации данных могут анализироваться не только изолированные темы, но и их комбинации. Возможно проведение сложного содержательного анализа семантических отношений между карточками, которые испытуемый включает в темы. Следует отметить, что, по мнению автора ТЮФ, показатели напряженности мотивационной темы могут отражать не только силу мотива, но и силу преграды (фрустратора) потребности с результатами тематической апперцепции теста и другими методиками.
Четвертая группа перечня психодиагностических компьютерных программ представляет собой ряд комплексных методик.
Программа "COMPLT1" включает:
1) Клинический опросник MMPI, предназначенный для диагностики пограничных состояний, невротических проявлений, психопатий и определения личностных черт. В компьютерной программе содержится «большой» (377 вопросов, 13 шкал) и «малый» («Мини-мульт», 71 вопрос, 11 шкал) варианты методики.
2) Цветовой тест М. Люшера — экспресс-диагностика с помощью цветов актуальных проблем, внутренних конфликтов личности, психологического и физиологического стресса.
3) Методику САН — экспресс-диагностика трех важных психологических показателей: Самочувствие, Активность, Настроение.
4) Методику Г. Айзенка — определение экстравертированности-интровертированности и невротизма (57 вопросов, 3 шкалы).
5) Методику Спилбергера — экспресс-диагностика уровня тревоги.
6) Методику интерперсональной диагностики Т. Лири — определение ведущих форм социального поведения, используемых личностью при взаимодействии с внешним миром (128 пунктов, 8 форм поведения).
Программа "COMPLT2" представляет собой компьютерные версии:
1) Цветового теста М. Люшера.
2) Методику САН.
3) Методику Айзенка.
4) Методику Спилбергера.
5). Методику Т. Лири.
6) MMPI (377 пунктов).
7) Mини-мульт (71 пункт).
8) Модификацию методики Дж. Роттера "Уровень субъективного контроля" (УСК).
9) Методику А.Е. Личко "ПДО-патохарактерологический диагностический опросник" по выявлению акцентуаций характера подростков.
10) Опросник "Мотивация потребления алкоголя".
Программа "DIFTEST" разработана ЦПОМ "Человек и профессия", ТК "Инсайт", г. Москва. В состав тестовой батареи входят:
1) Методика Т. Лиpи.
2) Тест "Самочувствие. Активность. Настроение."(САН).
3) Методика Спилбеpгеpа — Ханина.
4) Опросник структуры темперамента по Русалову (105 вопросов).
Программа "KOLIBRI" предназначена для интегрированной ("К"омплексной) психодиагностической "О"ценки "Л"ичности, "И"нтеллекта, "Б"олезненных психических "Р"асстройств, выдачи "И"ндивидуализированных медико-психологических рекомендаций.
В основу методики положены: сокращенный вариант теста MMPI (Мини-мульт), тест Айзенка в модификации Т.В. Маталиной, фрагмент теста Д. Кеттелла и анамнестическая анкета.
Программа "PEDAGOG" ("Стратегия и тактика успеха — СТАТУС") включает опросники: «Осведомленности о профессии педагога» (42 пункта), «Определения педагогического потенциала» (99 пунктов), «Опросник социальной мотивации» (9 пунктов), «Определения профессиональных склонностей» (41 пункт), «Дифференциально-профессиональный опросник» (20 пунктов), «Типа реагирования в конфликтной ситуации» (30 пунктов), «Отношения с людьми» (Тест Т. Лири) (128 пунктов), «Структуры темперамента» (105 пунктов), «Уровня самоуправляемости» (33 пункта), «Стиля управления» (60 пунктов), «Стремления к успеху» (52 пункта), «Самооценки функционального состояния» (20 пунктов), «Отношения к себе» (57 пунктов) и «Изучения коммуникативных и организаторских склонностей» (40 пунктов).
Программа "PROFK" включает опросник Айзенка (форма А и В ), опросник профессиональной готовности, опросник выявления мотивов трудовой деятельности, методику КОС (коммуникативные и организаторские склонности), методику выявления направленности личности (ЛН), опросник Стреляу, опросник Леонгарда — Шмишека, тест конкретных ситуаций, опросник ИМУЛ (исследование монотоноустойчивости личности), ОПГ-М — профориентационный опросник, тест потенциала руководителя и опросник терминальных ценностей.
Программа "TESTANTI" (запуск с файла test.exe) представляет собой комплект автоматизированных тестов и опросников и состоит из следующих разделов:
1) Психологический портрет + профориентация.
2) Психологическая совместимость, склонность к действиям, направленным против интересов фирмы и "лично вас".
3) Партнеры и конкуренты.
4) Система тестов PSY, которая, в свою очередь включает шесть популярных тестов: «Как Вы справляетесь с делами?»; «Что мешает работать эффективно?»; «Характер и темперамент»; «Что Вам говорят жесты и мимика?»; «Удовлетворенность положением» и «Понимание, эмоции, авторитет».
Программа "TS1EXE" (запуск программы с файла test.bat) включает:
1) Опросник Айзенка.
2) Тест К. Коха "Дерево".
3) Тест "Несуществующее животное".
4) Опросник Кэттела (форма А).
5) ММИЛ (по Ф.Б. Березину, 377 пунктов).
6) Методика Равена.
7) Опросник УСК.
8) Опросник Т. Лири.
9) Опросник УНП (уровень невротизации и психопатизации).
10) Тест структуры интеллекта (ТСИ).
11) Тест Люшера.
12) опросник САН.
13) Опросник для измерения потребности в достижениях Ю.М. Орлова.
14) Опросник КОС.
15) Опросник для определения нервно-психического напряжения Т.А. Немчина (НПН).
16) Методика Маслоу (структуры потребностей).
17) Опросник Шмишека.
18) Опросник Спилбергера.
19) Методика оценки способов реагирования на конфликтные ситуации.
20) Тест-опросник удовлетворенности браком (ТОУБ).
Программа "TSS" включает:
1) Тест Стреляу (диагностика типа высшей нервной деятельности: возбудимый, тормозимый, подвижный).
2) Определение порога активности (активность-пассивность).
3) Краткий ориентировочный тест — КОТ (определение IQ).
4) Школьный тест умственного развития (ШТУР).
5) Тест мотивации одобрения (выявление субъективной значимости оценок окружающих).
6) Тест родительского отношения (авторы Варга А.Я., Столин В.В. — консультация родителей по проблемам воспитания детей).
7) Тест Басса — Дарки (выявление преобладающей формы агрессивного поведения: физическая; косвенная; склонность к раздражению; негативизм; обида; подозрительность; вербальная; чувство вины.
8) Тест склонности к риску.
9) Тест эмоциональной напряженности.
10) Тест Дженкинса (диагностика типа поведения обусловливающего повышенный риск ишемической болезни сердца — тип А).
Программа "ZERKALO" включает следующие методики:
1) Тест Люшера.
2) Большой тест MMPI (377 пунктов).
3) Малый тест MMPI (71 пункт).
4) Личностный опросник Айзенка.
5) Интерперсональный тест Лири.
6) Тест "16 личностных факторов" Кэттела (187 пунктов).
7) Интеллектуальный тест Айзенка.
9) Патохарактерологический диагоностический опросник Личко.
10) Тест "Уровень субъективного контроля".
11) Тест "Локус субъективного контроля" (прототип — шкала локус-контроля Дж. Роттера).
12) Звуковой тест (определение типа темперамента, прототип — методика Б. Цуканова "Внутреннее время человека").
13) Тест "Стиль руководства".
14) Тест "Потребность достижений".
15) Опросник Спилбергера.
16) Тест "Самочувствие. Активность. Настроение."
17) Опросник структуры темперамента.
18) Ориентировочная анкета Смекала (оценка направленности субъекта).
19) Опросник Шмишека.
Программа "RITM"* представляет собой компьютерную психотехнологию АСИД "Ритм" ("Разработка имитационных тестирующих моделей"), разработанную И.Н. Носсом и Е.В. Сусловым в 1991 году.
Программа "TUTOR" АСИО** (рекламная модель — "TYPETUTOR") является обучающей программой по подготовке машинисток. Авторский коллектив: Носс И.Н., программное обеспечение — Суслов Е.В., Круглый И.Б.
Программа "Компьютерная персонал-технология" представляет собой модульную адаптивную автоматизированную систему поддержки кадровых органов и служб персонала. Система разработана в ЭРГОцентре, г. Тверь и состоит из следующих подпрограмм:
1. ПРОФЕССИОГРАФИЯ: психограмма (идеал, математический профиль) должности; профессиграмма (описание должности).
2. АТТЕСТАЦИЯ: психограмма (реальный математический профиль) работника; деловой портрет работника; заключение о профессиональной пригодности; рекомендации о профессиональной пригодности; профессиональная переориентация работника; план карьеры работника; коэффициент профессиональной пригодности для отбора кандидатов (расчет валидности тестов).
3. ОТБОР: психограмма (реальный математический профиль кандидата); деловой портрет кандидата; заключение о профессиональной пригодности кандидата; профессиональная ориентация кандидата.
4. КЛИМАТ:
— оценка социально-психологического климата
а) по элементам: психические состояния; групповая оценка; отношения; стиль поведения; мнения;
б) по подразделениям,
в) по категориям работников,
г) в динамике;
— рекомендации по комплектованию групп.
5. ОБУЧЕНИЕ:
- количество работников, требующих подготовки по каждому из признаков профессиональной пригодности; электронный справочник учебных заведений; план профессиональной подготовки работников; заявки в учебные заведения (по количеству специалистов, по требованиям к подготовке; предложения по изменению учебных программ);
- автоматизированные обучающие системы;
- оценка эффективности профессиональной подготовки.
6. СТАТУС: оценка оптимальности распределения функций, прав, обязанностей и ответственности.
7. РЕЗУЛЬТАТЫ: электронное досье работника; резерв на выдвижение; схема ротации кадров; конкурс кандидатов; анализ профессионального потенциала персонала и план его развития.
8. АДМИНИСТРАТОР: инструкция пользователю; корректировка признаков профессиональной пригодности; корректировка коэффициентов пригодности; корректировка форм документов; подготовка материалов для обследования персонала в "ручном" режиме; список должностей; список работников; список вакансий; заявки в Службу занятости; подготовка и печать выходных данных.
ЗАКЛЮЧЕНИЕ
Подводя итог, следует заметить, что психодиагностика не является оценкой вообще. Любая оценка — это сравнение с каким-либо эталоном, критерием или нормой. В некоторых учебниках психодиагностика представлена в виде оценки способностей, мотивов, коммуникативных свойств и т. д. Способностей вообще не существует. Есть способности к определенной деятельности, критерии которой являются определенными требованиями к способностям людей. Говоря о мотивах и их оценке, необходимо исследовать мотивацию субъекта к определенной деятельности, детерминацию действий и т. д. Эмоционально-волевые компоненты оцениваются не абстрактно, а лежат в области устойчивости человека к определенным специфическим условиям или стрессогенным факторам.
Таким образом, психодиагностика глубоко специфична и в огромной степени зависит от предметной деятельности людей. Более того, и конструирование психодиагностического инструмента детерминируется этой специфичностью. Способности или мотивация к одной деятельности может являться неспособностью или отторжением другой. Поэтому инструмент ее оценки неадекватен инструменту в рамках иной деятельности*.
Вторым аспектом проблемы психодиагностической оценки является достоверность ее инструментов, результатов и их интерпретации. В этом смысле практические психологи постоянно сталкиваются с проблемами валидизации и адаптации методик. Здесь возникает задача разработки методологических основ, а также собственного или адаптации существующего инструментария психологического оценивания. Следует учитывать, что в отечественной и зарубежной практике тестовый материал часто отрабатывается на специфической выборке студентов, школьников или военнослужащих. Тому имеется множество свидетельств в отечественной и зарубежной литературе по экспериментальной психологии. Причиной является относительная простота организации психологического эксперимента в условиях учебных заведений или воинских подразделений. Поэтому психологам приходится постоянно подвергать пересмотру выводы даже известных и авторитетных тестов и методик. Кроме того, даже краткое обзор современного диагностического инструментария дает основание заключить, что основная масса психологических методик представляет собой зарубежные техники, переведенные на русский язык или адаптированные в России. До сих пор в опросниках присутствуют пункты, представленные в иноязычной редакции вследствие центрированного перевода текстов, а в интеллектуальных тестах зачастую встречаются задания со специфическим стимульным материалом*. Отечественные оригинальные методики составляют даже в относительно «предвзятых» перечнях тестовых процедур не более 30%**.
Так, перечень наиболее часто применяемых тестов возглавляют именно зарубежные методики, такие как Цветовой тест М. Люшера, 16PF, опросник Шмишека, тест Д. Векслера и др.***
Тестологические проблемы исходят из методологии разработки так называемых интеллектуальных методик, которые активно применяются в области оценки различных способностей испытуемых. Основная их часть оценивает сформированные в процессе жизнедеятельности человека психические функции. Потенциальные возможности психики остаются вне рамок диагностики, потому что измерению подлежит уже усвоенная (свернутая) функция, в которой психическая переменная присутствует лишь на уровне регуляции. Сам процесс формирования психики, когда актуализирована ориентировочная деятельность человека, тестом не фиксируется. Поэтому многие зарубежные и отечественные авторы свидетельствуют о том, что тесты интеллекта слабо или даже обратно соотносятся с реальными деятельностными критериями****.
И, наконец, особое слово следует сказать о возможностях проективных техник. С одной стороны, большинство из них прочно базируется на крайне субъективной интерпретации данных и не подлежит нормализации. С другой стороны, как писал сам Г. Мюррей, «то, что обнаруживает тест, порой является прямой противоположностью тому, что обследуемый делает сознательно в обычной жизни»****. Однако следует заметить, что это положение не в полной мере относится к графическим, графологическим, цветовым и им подобным техникам. Несмотря на то, что эти техники опираются на субъективную интерпретацию, они все же больше склоняются к сопоставлению «признакового пространства» методики и реального поведения индивида.
В заключении следует сказать, что психологическая диагностика -это особый метод, который, безусловно, имеет свой предмет, но не специфически психологический, а эпистемологический. Но в то же время психодиагностика является именно психологическим методом. Психологическая специфика придается ей на этапе интерпретации количественного результата в качество исследуемого объекта. Как ни странно, но интерпретация становится психологической в результате психологичности объекта, а не предмета диагностики. Объект психологии не имеет материальной сути. Количественная материальная основа психики является лишь ее активным носителем. Но идеальное (качество) не порождается материальным (количеством). Адекватное идеальное возникает у другого человека посредством интерпретации количественных признаков, «облитых» светом собственной души. Психологический эффект диагностики появляется именно в процессе и в результате интуитивно-чувственной интерпретации количественных признаков, через эмпиризм — в дух.
Тем, кто понял это и кому данная книга поможет приобрести некоторые практические знания, мы желаем доброго пути в трудном, но удивительном мире психологических исследований.
Контрольные вопросы
Дата добавления: 2021-12-14; просмотров: 333;