Раздел 3 Методы и приемы анализа

3.1. Перекрестная Валидность. Конкретная Методология

Мы хорошо помним устойчивую, хотя не всегда оправданную, негативную реакцию «классической психологии» на попытки применения психодиагностических тестов: считалось, что за тестами «нет глубокой настоящей теории», что их отчетливый прагматизм не опирается на научную основу, а если таковая и есть, то она не соответствует принятым в нашей стране концепциям и подходам.

Тем не менее тесты получали и получают широкое распространение в исследовательских лабораториях, в клинической практике, на предприятиях, в школах и т. п. Несмотря на критическое и даже пренебрежительное, отношение к тестам, существует, на наш взгляд, по крайней мере один веский аргумент в их пользу: все эти психодиагностические процедуры позволяют получать информацию об индивидуальных психологических особенностях конкретного человека, о его отличии от других людей.

Понятно, что этот аспект применения психодиагностических методов можно рассматривать как один из важных критериев эффективности тестов, как и любых других конкретных психодиагностических процедур: насколько полна, точна и надежна получаемая с их помощью информация, настолько она поддается научному толкованию и специальной интерпретации.

Проблема интерпретации данных психодиагностического метода теснейшим образом связана с понятием валидности теста. Эта связь, однако, не вполне очевидна и не проста: дело в том, что она лежит «в стороне» от привычной логики оценки теста, поскольку большинство специалистов но психодиагностике, в силу совершенно понятных психологических причин, выпускает из вида то обстоятельство, что «интерпретация» психодиагностических данных имеет два уровня: интерпретация в терминах принятой математической модели обработ-

Раздел 3. Методы И Приемы Анализа

165

Ки данных и интерпретация в терминах психологической концепции, принятой тем или иным специалистом.

Психологические причины «выпадения» из поля внимания специалистов отмеченного выше обстоятельства лежат в особенностях организации мыслительного процесса: при обсуждении той или другой предметной реальности люди не отдают себе отчета в том, что каждый из них «видит» (говоря психологическим языком — отображает) одну и ту же реальность по-своему.

Поэтому-то психологическое умение интерпретировать диагностические данные и расценивается как «искусство», поскольку редко (а в специальной литературе — почти никогда) не обсуждается вопрос о соответствии этих разных моделей: модели реальности, существующей «в голове» специалиста (т. е. его собственных представлений о психической реальности, его психологических знаний и предпочтений); математической модели обработки данных тестирования (т. е. части технологического процесса применения метода); психологической модели реальности, принятой «конструктором» теста (т. е. психологической основы для создания методики, выбранной ее автором).

Если учесть к тому же, что все эти модели так или иначе интегрируются в рамках «модели решаемой задачи», о которой мы говорили при обсуждении содержательной стороны деятельности практического психолога, то станет совершенно понятным, что их стихийное, неосознаваемое и не отраженное в рациональных понятиях соотнесение, без которого невозможна адекватная интерпретация данных, сильнейшим образом зависит от личного опыта и вкуса практического психолога, и в действительности в таком случае является скорее искусством, чем наукой.

В контексте приведенных выше соображений рассмотрим особенности современного понимания проблемы «валидности теста» и затем снова вернемся к вопросу о связи названных выше различных моделей в разрешении проблем интерпретации психодиагностических данных.

Идея И Техника «перекрестной Валидизации»

Возможность применения процедуры перекрестной валидизации будет проиллюстрирована на примере техники графических психодиагностических методов, специально созданной в рамках реализации дуального подхода для комплексного двухуровневого психодиагностического обследования с применением методов-экспресс и глубинной личностной диагностики.

166

Часть II. Практическая психодиагностика

Рис. 10. Трехкомпонентная структура психологии профессионального

Становления

Естественно, что в сложившейся ситуации мы не могли обойти вниманием вопросы валидности и надежности этого специфического класса методик. Рассматривая эту проблему на первом этапе работы с графическими методами, мы в основном ориентировались на способы субъективной и экспертной оценки валидности, а также на данные, получаемые с помощью метода контрастных групп.

Именно в этом случае применяется процедура перекрестной валиди-зации и сопоставляются данные, полученные с помощью фафических методов, с результатами других методических приемов, в частности

Раздел 3. Методы И Приемы Анализа

167

Техники личностных опросников, результатов наблюдений и традиционных методов оценки продуктивности той или иной деятельности и т. д.

Проблема валидности психодиагностических процедур оказалась теснейшим образом связанной с проблемой интерпретации тестовых данных. Продолжая рассмотрение проблемы интерпретации, мы должны подчеркнуть, что в современном тестировании есть одно обескураживающее несоответствие:

♦ с одной стороны, разработаны и продолжают развиваться строгие статистические процедуры обработки данных, утверждаются в действующей практике строгие критерии измерения психических явлений;

♦ с другой стороны, налицо «нестрогие» правила обоснования соответствия теста изучаемому явлению и чрезвычайно затрудненная для практического решения задача конкретной и точной интерпретации полученных результатов в терминах теоретического знания психологии.

Это несоответствие в значительной степени является основанием критики метода тестов вообще. Вместе с тем наш анализ позволяет увидеть, что современные специалисты (А. Анастази, X. Улликсен, А. Хьюсон и др.) по теории тестирования [16; 17; 325; 357; 369], обсуждая эту проблему, ограничиваются лишь первым уровнем интерпретации, построенным исключительно на привлечении количественных критериев.

Конечно, одной из важных составляющих научного тестирования и основой научной интерпретации результатов тестовых испытаний является наличие психологически и статистически обоснованных норм. Однако вся современная литература по тестологии буквально «зациклилась» на этом моменте, и тестовая норма понимается теперь не иначе как установленное на базе репрезентативной выборки усреднение количественных данных в результатах выполнения теста. Существует обширная дискуссия но этому вопросу, в ходе которой разработано даже специальное «деление» норм: на групповые, профессиональные, школьные, национальные, универсальные и др. (см., например, 16; 69).

Можно согласиться, что без количественного обоснования квалифицированная интерпретация тестовых данных действительно невозможна, но можно утверждать, что применение только количественных подходов и создает то исключительно неудобное положение для практикующего психолога, в котором чрезвычайно ответственное и чрезвычайно важное значение приобретает не знание, а интуиция исследователя при описании, обобщении и объяснении эмпирических данных.

168

Часть II. Практическая Психодиагностика

Все это убеждает нас в плодотворности продолжения исследований в этом направлении и служит для нас аргументом в пользу разработки метода и техники перекрестной валидизации психодиагностических тестовых процедур. Общая идея и схема оценки перекрестной валидности показана на рис. 11.

Основной смысл техники перекрестной валидизации состоит в том, чтобы сопоставить данные, полученные разными методами, с разными моделями личности, имеющимися в психологической литературе, на одном и том же контингенте испытуемых, а затем сравнить эти данные с результатами экспертных оценок, данными наблюдения и продуктами реальной деятельности.

Контингент обследуемых (экспериментальный)

S СО

Х я о

S ї Ї

О s -О

С « 5

Я I P

1|1

Я с ш

Lit ■ Т о а

А?

Сводные интерпретации и выбор методов оценки качественного согласия данных

Оценка * «согласия»

Рис. 11. Схема перекрестной качественной валидизации

Практические Приложения Перекрестной Валидизации

В качестве конкретного примера применения процедуры перекрестной валидности рассмотрим технику валидизации разработанного нами графического теста «Автопортрет».

Хорошо известно, что использование графических методов встречает много трудностей на практике. Известно, например, что при идентификации почерка, несмотря на общее мнение экспертов об идентичности почерка, о его «абсолютном сходстве», на поверку оказывалось, что предъявленные рукописные отрывки были выполнены различными

Раздел 3. Методы и приемы анализа

169

Людьми [ 178]. Вместе с тем необходимо осознавать, что наряду с индивидуальными различиями в изобразительной деятельности имеется подобие, сходство внутри того или иного вида графики, разнообразие типов личности внутри одного и того же типа рисунка, и сходство это иногда столь высоко, что вызывает недоумение.

Этот пример показывает, насколько важна разработка специальной техники (и технологии) сопоставления, соотнесения типологической («видовой») классификации графического продукта с индивидуально-типологическими классификациями людей, включенных в процесс психодиагностического обследования графическими методами.

Первый этап перекрестной валидизации (как следует из схемы рис. 10) как раз и состоит в упорядочении психодиагностических данных. Наше исследование показало, что материал, полученный в тесте «Автопортрет», можно упорядочить по схеме, предложенной Г. Ридом [392; 393]:

♦ перечисляющий рисунок (изображение нескольких автопортретов при инструкции нарисовать один);

♦ органический рисунок (на фоне изображения живой природы в окружении растений, животных и т. д.);

♦ гаптический рисунок (изображение себя часто в состоянии болезни: «болит зуб», «болит голова» и т. д.);

♦ эмфатический рисунок (изображение себя в какой-либо эмоциональной атмосфере, идущей извне);

♦ декоративный рисунок (изображение портрета в явно приукрашенном виде, в красивой рамочке, с присутствием цветов и другого декора);

♦ имажинарный рисунок (изображение себя в виде какого-либо персонажа из литературного или любого художественного произведения, а также созданного в собственном изображении);

♦ ритмический рисунок (изображение, в котором подчеркивается движение, т. е. изображение движущегося человека: идущего, бегущего по лестнице и т. д.);

♦ структурный рисунок (изображение себя «как есть»: голова, ноги и т. д., может быть изображено только лицо или же фигура человека в полный рост).

Следующий этап перекрестной валидизации предполагает сопоставление полученной нами «типологии рисунка» с рассмотренными ранее психологическими типами К. Юнга. Результаты такого сопоставления приведены в табл. 4.

170

Часть II. Практическая Психодиагностика

Таблица 4 Процентное Соотношение Индивидуально-Типологических Особенностей

По Тесту «Автопортрет»

Данные таблицы позволяют судить о доминировании того или иного типа личности в обследуемой группе.

Для более полной интерпретации результатов указанных тестов необходима дальнейшая работа по сопоставлению показателей, выявляемых при обработке рисунка, с показателями других методик и данными наблюдения. Ыа атом, предварительном, этапе можно воспользоваться весьма авторитетной психологической типологией К. Юнга. Вместе с тем, как мы уже указывали, процедура перекрестной оценки валидности предполагает прямое соотнесение различных моделей: моделей обработки данных рисуночного теста (например, тип по Риду), психологических моделей типов личности (например, тип по Юнгу), а также допускает новую возможность соотнесения отдельных признаков личности (в моделях личности Кэттелла, Леонгарда и др.) и признаков рисунка, выделенных нами в наших рисуночных тестах.

Для иллюстрации такой возможности приведем еще один пример другого эмпирического исследования — с использованием известного за рубежом графического прожективного теста «дом — дерево — человек» (ДДЧ).

В результате реализации этой процедуры получены весьма устойчивые данные как по субъективному (по данным самооценок и самонаблюдения), так и по экспертному критерию валидности (они оказались порядка 0,9).

В практических реализациях лишь 10 из 100 обследуемых смогли по тем или иным причинам либо отрицать правильность характерне-

Раздел 3. Методы И Приемы Анализа

171

Тики, составленной для них с помощью графических методов, либо утверждать, что пока они еще не замечали за собой указанных особенностей. По результатам дополнительных бесед, однако, они иногда соглашались с тем, что в своем детстве «имели нечто похожее». Приведенные данные интересны сами но себе, но существенно более важно то, что почти всегда независимые эксперты, которые хорошо знали испытуемых, подтверждали наличие качеств, указанных в этих психологических характеристиках.

Большой массив данных, насчитывающий тысячи рисунков, значимые коэффициенты корреляции, полученные при сопоставлении количественных показателей графических методов с другими методами, также свидетельствуют о достаточной, по крайней мере для практических целей, эффективности графических диагностических процедур.

Дополнительные данные о надежности и валидности были получены нами в продолжение той же логики перекрестной валидизации при использовании метода контрастных групп, когда в обследовании участвовали специалисты различных профессий; учителя, руководители, программисты, художники, режиссеры, актеры, вокалисты, литераторы, инженеры, банковские служащие.

Надежность методов, определяемая в результате повторного обследования, по нашим данным, колеблется от 0,6 до 0,8 при вычислении коэффициентов корреляции в интервалах между обследованиями от 1 до 3 месяцев и в пределах одного года.

Таким образом, при разработке стандартизированных процедур и выборе надлежащих количественных способов обработки данных вопрос об основных требованиях валидности и надежности психодиагностических методик может быть успешно решен при помощи процедур принятой нами техники перекрестной валидизации данных. Более того, эта техника может служить средством взаимной проверки и уточнения не только самих диагностических методов, но также различных психологических моделей психических явлений (в частности, различных моделей личности).

На основании сопоставления результатов, полученных с помощью традиционно применяемой в профориентации ДДО (дифференциально-диагностически-опросной методики Е. А. Климова) и данных, полученных с помощью описанных нами графических методик, мы можем сказать, что использование ДДО совместно с графическими методиками существенно обогащает весь процесс профессиональной консультации. Более того, изучение индивидуально-психологических

172

Часть II. Практическая Психодиагностика

Предпосылок профессионального самоопределения личности с помощью психодиагностического комплекса с участием графических методов имеет определенные положительные перспективы: позволяет глубже проанализировать особенности индивида и выработать более адекватные рекомендации по повышению явности профессионального самоопределения как молодежи, так и взрослых.

Оценивая общие перспективы применения комплексных психодиагностических методов и процедур перекрестной валидизации в практической работе психолога — диагноста и консультанта, — мы считаем полезным сказать несколько добрых слов в адрес графических методов психодиагностики. Графические методы работают с невербальным материалом, и это позволяет существенно расширить как возрастной диапазон их применения, так и возможности межкультурпого использования. Эти методы оказались интересными для оптантов; они позволили легче установить коммуникативные контакты между сторонами, включенными в диагностический процесс. В силу проективного характера графических процедур их результаты, как показывает наш опыт, менее подвержены контролю сознания, а это весьма важный аргумент в пользу их применения. Они оказались простыми и быстрыми в применении, что, во всяком случае, допускает их эффективное использование в качестве методов предварительной экспресс-диагностики.

В рассмотренных нами версиях и вариантах применения перекрестной валидизации графические диагностические методы работают «через проекцию» на сетку психологических типов личности. Попри этом они дают также некоторую оценку состояния автора рисунка. Такая ситуация позволяет, по крайней мере в принципе, применять графические методы вместе с соответствующими методами стандартных психодиагностических процедур оценки личностных качеств (MMPI, Кэттелл, Айзенк и др.), а также с методами оценки состояний (инструментальные методы, САН, Люшер и т. д.).

Графические методы могут прекрасно работать в сложных психодиагностических комплексах, имеющих целью создание обобщенного, а если нужно — то и конкретизированного — психологического портрета данного индивида с выявлением (и учетом) спектров и текущих значений его состояний и его интересов. Последнее, конечно, важно не только в диагностических задачах, но и в консультационной работе как в сфере профессионального становления, профессионального самоопределения человека, так и в психологической поддержке индивида на его жизненном пути.

Раздел 3. Методы И Приемы Анализа

173