Архитектура Аудит Военная наука Иностранные языки Медицина Металлургия Метрология Образование Политология Производство Психология Стандартизация Технологии |
Глава 6. Диагностика психических свойств личности
Психодиагностика – метод дифференциальной психологии, направленный на выявление психических свойств и черт личности, в своей совокупности образующих психическое качество личности. Влияя на уровень определенной деятельности, оно выступает как способность личности. Основное средство психодиагностики – психологические тесты (пробы) – серия кратких однотипных стандартизированных испытаний предполагаемого носителя определенных психических свойств. Суммарный итог этих испытаний позволяет судить об уровне измеряемого психического качества у данного индивида (посредством подсчета тестового балла). Наряду с тестовым обследованием в психодиагностике широко используется и клиническое обследование. Формализация психодиагностического обследования основана на психометрике – математизированной технологии измерительных методик. Тест должен обладать определенными психометрическими свойствами – надежностью, валидностью и репрезентативностью. Психодиагностика не сводится к эпизодическому тестированию, она имеет развернутый комплексный характер. Так, высокий уровень развития интеллекта может сочетаться с такими негативными психическими свойствами, как пониженный уровень концентрации внимания и ослабленность непосредственной (" механической" ) памяти. Различные параметры психических свойств индивида в психодиагностике должны быть структурированы – сгруппированы по уровню значимости. Эти свойства могут быть синэргичными и конфликтными. Систематизированный итог психодиагностики отображается в психодиагностическом профиле, в котором повышенные значения одних психических свойств отображаются на ломаной линии-графике подъемами, а пониженные значения – спадами. (Возвышения и спады определяются в отношении осевой линии среднего уровня. При этом различаются статистическая и социокультурная* норма.) Значимые отклонения от нормы называются акцентуацией. Резко выраженные отклонения от нормы свидетельствуют о наличии у индивида патохарактериологических признаков. * Социокультурная норма – уровень психического свойства, который признается необходимым в данном социуме. Историческое развитие психодиагностики. Психодиагностика начала формироваться как особая отрасль психологии во второй половине XIX в. Ее источником явилась зародившаяся в это время экспериментальная психология. В 1883 г. английский исследователь Френсис Гальтон выступил как основоположник комплексной науки – антропометрики, в рамках которой осуществлялись как анатомические, так и психофизиологические измерения человека (острота зрения и слуха, особенности психомоторных реакций). Ф. Гальтон впервые ввел тестовые исследования и предложил сам термин " тест". Психодиагностика возникла как наука о методах дифференциальной психологии, а в дальнейшем развивалась в соответствии с запросами педагогики, профессионального отбора и медицины. В 1890 г. в американском журнале " Mina" были опубликованы первые интеллектуальные тесты, разработанные Дж. М. Кеттеллом. Здесь же было высказано предложение о необходимости стандартизации тестов с тем, чтобы исключить влияние на их результаты побочных факторов. В дальнейшем Дж. М. Кеттелл разработал 50 образцовых (стандартизированных) тестов для измерения различных сенсорно-интеллектуальных свойств индивида. В 1896 г. в США были созданы координационные центры по консолидации тестологических исследований. Новый сдвиг в развитии тестологии произошел благодаря созданию серии интеллектуальных тестов французским врачом и психологом Альфредом Вине (1857–1911). В 1905 г. А. Вине в сотрудничестве с Анри Симоном провел серию тестовых испытаний детей с целью выявления особенностей их умственного развития. Задания в этих тестах были сгруппированы применительно к различным возрастным группам – от 3 до 13 лет. (Если пробные задания (шкалы) выполняли 90% детей данного возраста, то это задание считалось стандартным.) В каждой возрастной группе тестированию подвергались по 300 детей. По успешности выполнения тестовых заданий стал определяться умственный возраст ребенка, который не всегда совпадал с его хронологическим возрастом. Было введено понятие базового умственного возраста – это максимальный возраст, при котором все задания определенного типа успешно выполняются подавляющим большинством детей. Если ребенок выполнял отдельные задания, предназначенные для более старшей группы, то к его хронологическому возрасту приписывалось соответствующее количество месяцев. Разница между умственным и хронологическим возрастом интерпретировалась или как одаренность, или как умственная отсталость. Вторая редакция " шкалы А. Бине" была тщательно исследована в Стэнфордском университете США группой сотрудников под руководством Л. М. Термена. Разработанная ими " шкала" подверглась существенным изменениям и стала называться " шкала Стэнфорд – Бине" (1916). Были введены два новых основоположения: статистическая достоверность тестовой нормы и коэффициент интеллектуальности (IQ), предложенный В. Штерном. Коэффициент IQ определялся как частное, получаемое при делении хронологического возраста на умственный возраст и умноженное на 100. Шкала Стэнфорд–Бине была рассчитана на детей в возрасте от 2, 5 до 18 лет. Для каждого возраста был определен типичный средний показатель (X) выполнения соответствующих тестовых заданий, принятый за 100, и возможные стандартные отклонения (S) в пределах 16 баллов. (Все индивидуальные показания в пределах 84–116 баллов считались нормальными.) Если же тестовый показатель выходил за пределы этих значений, то ребенок признавался либо умственно отсталым либо одаренным. Шкала Стэнфорд – Бине получила широкое распространение и выдержала четыре издания (1937, 1960, 1972, 1986 гг.). В период первой мировой войны в США стали проводить групповое тестирование интеллекта при отборе новобранцев по различным родам войск. А. С. Отис разработал две разновидности армейских тестов – " Альфа" и " Бета" (первая для знающих английский язык, вторая – для неграмотных и иностранцев). Эти групповые тесты отличались упрощенностью применения и оценки результатов. Они стали широко применяться в промышленности, образовании и армии, так как не требовали психологически квалифицированных кадров. Тестология получила массовое распространение. Тесты стали валидными и высоконадежными. Было выяснено, что общий уровень развития интеллекта коррелирует с рядом других личностных качеств индивида. В тестологии возникло новое направление – тестирование специальных способностей человека, которое стало основой профессионального отбора, профессиональной ориентации и профессиональной консультации. Были созданы тестовые комплексы (батареи) для отбора поступающих в медицинские, педагогические, юридические, инженерные, военные и другие учебные заведения, для эффективного распределения персонала по различным рабочим местам. Стала применяться математическая методика обработки полученных результатов – факторный анализ. Английский психолог Чарльз Спирмен установил, что все специальные способности имеют не только специфические характеристики (S-фактор), но и общие особенности – генеральный фактор (G-фактор). Выяснилось, что любая специальная способность базируется на необходимом уровне общей способности, что отдельные тестовые показатели объединяются в родственные подгруппы. Тестовые задания стали соответствовать факторному анализу (Л. Л. Терстоун и др.). Было выделено 12 факторов, характеризующих первичные умственные способности (в настоящее время выделено 120 таких факторов). В США была разработана батарея тестов общих способностей, необходимых для конкретных видов деятельности (GATB). Наряду с этим начали разрабатывать тесты достижений, выявляющие усвоение определенных знаний и сформированность профессиональных умений и навыков. Сравнительному анализу подверглась и эффективность различных способов и программ обучения (широкоизвестный Стэнфордский тест достижений (AT) был опубликован в 1923 г.). Тестология стала основной частью психометрики – науки о психологических измерениях. В США с 1936 г. выходит специальный журнал " Психометрика". Наряду с тестами в личностной диагностике получили широкое распространение личностные опросники и прожективные методы. Первым личностным опросником явился разработанный американским психологом Робертом Вудвортсом " Бланк данных о личности" (1919), предназначенный для выявления среди военнослужащих лиц с невротической симптоматикой. Личностные опросники содержат косвенную постановку диагностических вопросов. Стандартизированная процедура их предъявления и оценки итогов сближают их с тестовыми обследованиями. Во второй половине XX века самым распространенным личностным опросником стал тест-опросник MMPI – Миннесотский многофазный личностный перечень. Широко применялись также проективные методики, возникшие на основе ассоциативной концепции. Первые ассоциативные эксперименты провел Ф. Гальтон еще в 1879 г., предлагая испытуемым отвечать на словесные раздражители случайно вспомнившимся словом. Предполагалось, что эта методика позволит выявить устойчивую психическую направленность личности. (Эта методика широко используется в психоанализе.) Наиболее известная проективная методика была разработана в 1921 г. швейцарским психиатром Германом Роршахом. Предъявляя причудливые чернильные пятна (симметрично организованные путем перегиба листа бумаги) различным группам психически больных, Рорщах установил статистически достоверную систему показателей. Затем была разработана методика А. Пейна (1928 г.) – " завершение предложений". А в 1935 г. была создана самая распространенная проективная методика – Тест Тематической Апперцепции (ТАТ). Ее создатели X. Морган и Г. Мюррей обобщили весь накопившийся к тому времени опытный материал, полученный различными проективными методиками. Появившееся в последнее время обилие тестовых методик в принципе основано на вышерассмотренных классических методиках. В связи с развитием компьютерной техники появилась возможность " настройки" теста на индивидуальные особенности испытуемого – возникла методика адаптивного тестирования. Многомерная компьютерная обработка данных позволила делать заключения о субъективном семантическом пространстве испытуемого (Ч. Осгуд, 1952; Дж. Келли, 1955). В России психодиагностика начала развиваться в начале XX в., но ее экспериментальная база была заложена в последней четверти XIX в.: в 1885 г. возникла первая экспериментальная психологическая лаборатория в Казани, созданная В. М. Бехтеревым, а в 1895 г. по инициативе С. С. Корсакова была создана психологическая лаборатория при психиатрической клинике Московского университета. Известный русский невропатолог и психиатр Г. И. Россолимо уже в 1909 г. разработал методику индивидуального психологического профиля (исследовались 11 психических процессов по десятибалльной шкале. Посредством ответов на десять вопросов выявлялись особенности внимания, воли, восприятия, ассоциативной деятельности). Им же была предложена графическая форма отображения результатов психических измерений в виде " психологических профилей". Г. И. Россолимо стремился к целостному, структурированному исследованию личности, выявлению ее сильных и слабых сторон. Такой же позиции придерживался и известный русский психолог А. Ф. Лазурский – создатель отечественной дифференциальной психологии и научной характериологии. Наиболее интенсивно практика отечественной психодиагностики развивалась в 20-х и начале 30-х гг. в связи с развитием педологии и психотехники. Широко использовались зарубежные психологические тесты. Предлагались и новые разновидности тестирования (например, " измерительная шкала ума" А.П. Болтунова, 1928 г.). В рамках психотехники разрабатывались тесты выявления специальных способностей. В 1936 году развитие отечественной психодиагностики было приостановлено. Началась огульная критика всей западной тестологии. И только в 1982 г. вышел первый переводной учебник А. Анастази " Психология тестирования". Появились частично адаптированные варианты зарубежных тестов Ф. Б. Березина, Л. Н. Собчик, И. Н. Гиляшева, стали разрабатываться отечественные методики исследования умственной одаренности и интеллектуального развития (Д.Б. Богоявленская и др.), психической совместимости (Ф. Д. Горбов, Н. Н. Обозов), мотивации (Ю. М. Орлов), личностных акцентуаций (А. Е. Личко) и др. Однако селекция и сертификация психологических тестов должным образом не производились. Широко распространилось тестовое " самиздательство". Практическая психология не получила научной психометрической базы. И лишь в самое последнее время стали появляться исследования по научным основам психодиагностики (Основы психодиагностики / Под ред. А. Г. Шмелева. М., 1996; Дружинин В. Н. Психологическая диагностика способностей. Саратов, 1990). Технология психодиагностики. Общие основоположения. Компетентное использование психодиагностических методик возможно лишь на основе знаний по дифференциальной психологии, знаний о структуре психологических свойств личности, системных особенностей ее поведения. В структуре психических свойств личности системообра-зующими факторами являются ее направленность и способности (психофизиологические возможности). Стилевые же особенности поведения обусловлены темпераментом и характером личности. Направленность личности – иерархическая система интернализированных (присвоенных) ею ценностей, иерархия устойчивых мотивов ее поведения, обусловленная базовыми потребностями данной личности. Способности – устойчивые психофизиологические возможности личности; они подразделяются на общие (элементарные и сложные) и специальные. Общие элементарные способности – необходимый уровень развития психических функций – внимания, восприятия, памяти, мышления и воображения, эмоционально-волевой регуляции поведения. Общие сложные способности – способность к обобщению, переносу, экстраполяции, антиципации (предвидению), к образно-конструктивным представлениям. Специальные способности коррелируют со склонностями личности (еще А.Ф. Лазурский говорил, что личность можно описать только через ее склонности). Природно обусловленная нервно-психическая конституция индивида – темперамент, который проявляется в динамических особенностях протекания психической деятельности, энергетических характеристиках поведения индивида. В характере индивида интегрируются все свойства и психические черты личности, проявляются обобщенные способы ее поведения, образующие поведенческий тип личности. Концептуально разработанные методики психодиагностики ориентированы на выявление психических свойств и черт личности определенных уровней, диагностические данные подвергаются системно-структурному анализу. Так, в характере индивида следует различать глобальные и парциальные качества, имеющие значимость лишь в узком спектре поведенческих ситуаций. Глобальные качества характера – нравственно-волевые особенности психической саморегуляции личности. Среди глобальных свойств характера на передний план в современных характериологических классификациях выдвигаются следующие пять системообразующих свойств: 1) интеллектуальная гибкость, 2) сознательность – импульсивность, 3) эмоциональная устойчивость – тревожность, 4) уверенность – неуверенность, 5) дружелюбие – агрессивность. Парциальными, ситуативно значимыми чертами характера являются: общительность, доминантность, впечатлительность, толерантность, смелость, осторожность, доверчивость, практицизм, самостоятельность, конформизм, деятельная активность, честолюбие, непритязательность и др. Следует также учитывать, что поведение индивида полидетерминировано – оно обусловлено рядом внешних и внутренних причин. Для психодиагностики существенно выявление стратегических особенностей психической саморегуляции индивида. Психодиагностика психических качеств личности нередко маскируется текущими психическими состояниями личности – временным своеобразием протекания ее психической деятельности. Одно и то же по внешнему проявлению психическое состояние может быть обусловлено различными психическими качествами личности. В каждом психическом состоянии проявляется комплекс эмоционально-волевых и функциональных текущих психорегуляционных особенностей. Радость и грусть, страх и гнев могут сочетаться с импульсивностью или толерантностью, экспрессивностью и импрессивностью. Следует четко различать диагностику устойчивых психических свойств, качеств личности и диагностику текущих функциональных состояний индивида. Особую сферу психики индивида образуют категориальные (семантические) структуры сознания и самосознания личности. Диагностика этой системообразующей сферы психики индивида осуществляется сложными методиками и процедурами – на основе данных семантического дифференциала Ч. Осгуда и личностных конструктов Дж. Келли и др. Обедненный образ мира обусловливает примитивную схему поведения индивида, стимулируемую мотивационными импульсами низшего уровня, стратегической дезинтеграцией психической регуляции. Уровень категориальной системы индивида обусловливает репертуар его поведенческих форм. Личностные качества индивида формируются и проявляются в его межличностных отношениях, во взаимодействии индивида с социальными группами. Отдельные поведенческие особенности личности обусловлены ее социальной самоидентификацией, персонализацией и общими способами социальной адаптации. В личностной диагностике существенно выявление неформальных отношений индивида, особенностей его неформально-ролевого поведения. Существенно также выявление компенсаторных особенностей психики индивида, особенно в ситуациях несоответствия требований среды и индивидуально-психических возможностей индивида. Методы социометрии при этом должны сочетаться с другими методами социально-психологических исследований. Научная психодиагностика невозможна вне системно-структурного анализа психических свойств личности. Только высококвалифицированные профессиональные психологи могут получать научно достоверные результаты психодиагностических исследований. Их деятельность подчиняется строгим этическим требованиям и стандартам (см. Положение о службе практической психологии образования в Российской Федерации. Вестник образования, 1995, № 7). Лица, занимающиеся психодиагностикой, должны иметь на это право – обладать лицензиями. Используемые ими методики должны соответствовать необходимым профессиональным стандартам. Сертифицированными психодиагностическими методиками обладают только аттестованные психодиагносты. Никто не может быть подвержен принудительному психологическому тестированию. Каждый гражданин имеет право на соблюдение тайны его психодиагностического обследования. Испытуемый имеет право настаивать на применении эквивалентной методики выявления его психических свойств. Сообщение результатов психодиагностического обследования не должно вызывать негативных психических реакций у обследуемого лица. Методы и методики психодиагностики. Практическая психодиагностика направлена, как правило, на выявление психических свойств личности, Существенных для определенных видов социально значимой деятельности и поведения, для выявления критериальных показателей в критериальном поведении. (Так, например, критериальным показателем определенного вида труда является его производительность.) Для этого необходимо установление причинных связей между различными критериями деятельности и психическими свойствами индивида. Чем выше диагностическая ценность используемых методов, тем выше их универсальная значимость. Психодиагностический метод направлен на решение широкого круга задач. Психодиагностическая методика – способ решения частных задач. Способы реализации методики называются диагностическими процедурами. По операциональной классификации диагностических методик различаются методики объективные и субъективные. Объективные методики в минимальной мере зависят от индивидуальных качеств их исполнителя. Субъективные методики почти полностью зависят от опыта и мастерства психодиагноста. К объективным психодиагностическим методикам относятся приборные психофизиологические и аппаратурные поведенческие методики, объективные тесты с выбором ответа и тесты-опросники. К субъективным методикам относятся различные способы субъективного шкалирования испытуемым, исследователь же оценивает и интерпретирует его результаты, делаются выводы о ценностных ориентациях испытуемого. Все проективные методики (ТАТ, тест цветовых предпочтений Люшера, тесты Роршаха и др.) являются субъективными методиками. Методы психодиагностики не сводятся к психологическому тестированию. К ним относятся также методы стандартизированного аналитического наблюдения, включенное наблюдение с последующим рейтинг-шкалированием, контент-анализ (анализ содержания текста с выявлением частоты появления определенных высказываний, фактов – единиц анализа), психодиагностическая беседа, анкетные опросы, ролевые игры, метод экспертных оценок и др. В процессе реализации всех психодиагностических методов существенное значение имеет принятие нормативных решений сравнение выявленного уровня психического свойства с социокультурным нормативом. Однако ведущим методом психодиагностики является метод тестов. Этот метод позволяет стандартизировать условия и результаты диагностического обследования, обеспечивает его надежность, оперативность и экономичность, возможность компьютеризации. Хорошо проработанные тесты обеспечивают их психологическую адекватность, оптимальный уровень сложности, индивидуальную дифференцированность. Однако внешняя легкость тестового обследования нередко сопровождается его профанацией. Модные тесты начинают использоваться на все случаи жизни, из результатов их применения делаются всеобщие категоричные выводы, игнорируется надежность, валидность и репрезентативность применяемого теста. Надежность теста – его помехоустойчивость, независимость его результата от воздействия случайных факторов: информационно-социальных обстоятельств, психического состояния обследуемого лица, физических условий обследования. Даже высоконадежные тесты подвержены некоторому влиянию этих факторов, имеют определенную " стандартную ошибку измерения" (Se), которая выявляется специальными корреляционными методами, сравнением результата применения теста при первом и последующем тестировании. Показатель надежности теста (R) должен быть достаточно высоким (0, 8 – 0, 9). Сам показатель надежности теста применим только к стабильным психическим свойствам индивида. Такие динамические характеристики, как установки личности, исследуются более сложными методами. Валидность теста – соответствие теста измеряемому психическому свойству, независимость получаемых результатов от других психических свойств данного индивида. При выявлении валидности теста используется критерий валидности – независимый от теста внешний источник информации о наличии данного свойства и его развитости у данного индивида (данные наблюдения, экспертных оценок и др.). Валидность теста выявляется в лабораторных условиях системой сложных статистически достоверных методов. Величина выборки стандартизации теста называется репрезентативностью теста – она определяет возможность использования этого теста применительно к данной популяции испытуемых (определенной категории обследуемых лиц). Тест, стандартизированный на студентах, а тем более – на специалистах, будет не репрезентативным в отношении учащихся средней школы. Валидность теста связана как с его репрезентативностью, так и с его достоверностью – защищенностью теста от мотивационных искажений (особенно при использовании выборочных тестов). В тестах-опросниках предусматриваются специальные " шкалы лжи". Используются и другие " ловушки" недостоверности. В аттестационной ситуации, когда тестирование проводится администрацией, использование тестовых опросников, не снабженных шкалами лжи, нецелесообразно. Психометрические характеристики теста разрабатываются высококвалифицированными психодиагностами в специальных исследовательских учреждениях. Только высококвалифицированный психолог-тестолог способен пересчитать тестовые нормы и психометрические индексы надежности и валидности теста применительно к собственной выборке с учетом национально-культурной и социальной специфики обследуемой популяции, выяснить, как тест работает в данной конкретной ситуации. И здесь на помощь ему приходит компьютерная техника. В нашей стране разработан пакет программ ТЕСТАН (научная фирма " Гуманитарные технологии" ) для психометрического анализа тестов. Тестовые методики. Методика шкалирования. Испытуемому предлагается дать ранговую оценку какому-либо событию, явлению или своим личностным качествам. Разновидностями этих методик являются " Семантический дифференциал" (Ч. Осгуда) и " Тест конструктов" (Келли), " Тест цветовых предпочтений" (Люшера), методика КИСС (Соловьева–Федотова). В методике КИСС используются схематические изображения разных лиц, а испытуемому дается задание: " Проранжируй эти изображения лиц по степени их сходства с отцом, матерью, учителем и т. п." Полученная ранговая решетка конструктов может быть обработана на компьютере. Методика сравнений по сходству (методика сортировки) показывает дифференцированность системы понятий испытуемого, уровень сформированности этих понятий (когнитивная диагностика). Разновидностью этой методики является " Каузометрия" (Головахи–Кроника). Называя наиболее важные события из своей жизни и устанавливая причинные связи между ними, испытуемый дает материал для выстраивания линии его жизни. При наличии компьютерной программы " Life Line" испытуемому предъявляются для оценки пары событий, и компьютер выстраивает каузальный график на своем дисплее. Все методики шкалирования относятся к субъективному способу тестирования и требуют высокого профессионализма их пользователей. Проективные методики – рисунок, рассказ, ролевая игра. Проективные методики, так же как и методики шкалирования, относятся к субъективной разновидности тестирования и требуют высокоразвитой профессиональной интуиции исследователя и специальной подготовки. Название этих методик происходит от фрейдовского понятия " проекция" – перенос внутреннего мира во внешний мир в системе определенных символов, наделение других людей качествами, неприемлемыми для самого индивида. Проективные методики берут свое начало от теста словесных ассоциаций, предложенного К. Юнгом. Предполагалось, что быстрые словесные ассоциации выявляют подсознательные влечения индивида, его скрытый внутренний мир. В дальнейшем Германом Роршахом была выявлена связь с устойчивыми подсознательными структурами предпочитаемых индивидом фантастических образов (" Психодиагностика", 1921). Предъявляя испытуемому десять чернильных пятен (пять черно-белых и пять цветных), Г. Роршах предлагал им рассказать, что они ему напоминают. Ответы испытуемых, ассоциативные образы, возникавшие у них, позволяли Роршаху судить о психических особенностях испытуемых, об их страхах и тревогах, внутренних конфликтах. В 1935 г. был разработан Тест тематической апперцепции (Морган и Мюрей), чаще называемый аббревиатурой – ТАТ. В этом тесте испытуемому предлагается определенная картинка, по которой он должен составить короткий рассказ. Изображения лиц и фигур на картинке нечеткие, что расширяет вариативные возможности их интерпретации. Восприятие человеком явлений действительности апперцептивно – к воспринимаемым объектам люди относятся со своих устойчивых личностных позиций. Эти позиции и выявляются тестом ТАТ. Изображая преимущественно фрустрационные события, ТАТ выявляет конфликтные особенности испытуемой личности. К этому тесту примыкает фрустрационный тест Розенцвейга (1964). Существуют также разнообразные графические проективные методики: " нарисуй дерево", " нарисуй животное", " нарисуй человека" и др. Исследователь осуществляет психоаналитическую интерпретацию этих рисунков. Однако при этом следует применять и другие методы диагностического исследования. Предложенная Хоментаускасом методика " Рисунок семьи" (1987) позволяет выявить особенности внутрисемейных отношений. Однако все проективные методики обладают высокой вероятностью появления артефактов – возникновения инструментальных ошибок и ошибок психодиагноста. Их использование целесообразно сочетать с методом экспертных оценок. При исследовании межличностных отношений ребенка в малой группе значительными диагностическими возможностями обладают ролевые игры. В последнее время в психодиагностике широко распространилось применение разнообразных личностных опросников (MMPI и др.) с хорошо разработанной методикой их реализации. Следует, однако, учитывать, что ни один тест и ни одна тестовая методика не могут служить основанием для категорических психодиагностических выводов. Основным методологическим принципом психодиагностики является принцип комплексности.
Популярное:
|
Последнее изменение этой страницы: 2017-03-08; Просмотров: 837; Нарушение авторского права страницы