О релевантности субъективной экспертизы




Одной из разновидностей субъективных экспертных оценок является многомерное шкалирование. Суть этого метода сводится к тому, что эксперты производят оценку выраженности тех или иных свойств исследуемого объекта по шкалам с соответствующими названиями.


Исследования, проведённые в 80-е годы в саратовском университете, показали, что эта методика имеет ряд существенных недостатков. В частности, выяснилось, что оценки, производимые каждым экспертом, попадают в узкую область оценочного пространства, задаваемого шкалами. Для каждого индивида существует своя оценочная область, и производимые им оценки попадают в эту область вне зависимости от качеств оцениваемого объекта. Эта область "сохраняется постоянной во времени...[и]...если стимул вызывает сильное эмоциональное переживание... область оценок сильно меняется" (В.А. Ментюков, 1984). Следовательно, "в основе оценочных процессов лежит достаточно устойчивое, очевидно, личностное образование, индивидуальная динамика изменения которого в большей степени зависит от психологических особенностей человека, чем от свойств и качеств оцениваемых [объектов]".


В нашем исследовании эксперты (71 валидная анкета) оценивали качество звуковоспроизводящей аппаратуры. Оценка производилась по шкалам "качество звучания" (КЗ) и "общее впечатление" (ОВ). Оценивались 2 типа аппаратуры, сильно различающиеся по своим характеристикам: стереосистема класса Hi-Fi и переносной кассетный магнитофон. Кроме оценки аппаратуры по шкалам КЗ и ОВ эксперты производили эмоциональную оценку прослушиваемых при помощи аппаратуры музыкальных программ (В.Д. Балин,1983). Эта оценка производилась по 10-ти базовым эмоциям шкалы К. Изарда (К. Изард, 1980). Для прослушивания было выбрано 2 музыкальных произведения, каждое из которых прослушивалось при помощи как магнитофона, так и проигрывателя. Были вычислены коэффициенты корреляции между оценками магнитофона и стереосистемы по шкале КЗ и коэффициенты корреляции между их оценками по шкале ОВ. В подавляющем большинстве случаев (87,5%) была обнаружена сильная связь между оценками магнитофона и стереосистемы. Связь между оценками можно объяснить наличием у каждого эксперта индивидуальной оценочной области, о которой говорилось выше, а коэффициент корреляции между оценками можно считать индикатором, указывающим на наличие этой области.


После этого была вычислена корреляция между эмоциональными оценками разных произведений. Связь между оценками эмоционального состояния обнаруживалась намного реже (25% случаев), что существенно лучше, чем при оценке аппаратуры по шкалам КЗ и ОВ.


Для этих же вариантов вычислялся коэффициент корреляции между суммарными баллами эмоциональной оценки музыкальных произведений. Связь была обнаружена в 75% случаев. Это наводит на мысль о том, что одной из причин коррелирования эмоциональных оценок разных объектов может быть такая индивидуальная черта экспертов, как эмоциональная возбудимость. Для того чтобы исключить влияние этой черты, было вычислено процентное содержание каждой эмоции в общем паттерне. Для этого значение оценки каждой эмоции делилось на суммарный балл. После повторного вычисления коэффициента корреляции связь была обнаружена лишь в 15% случаев. Таким образом, результаты эксперимента показывают, что при проведении субъективных экспертиз эмоциональная оценка может быть предпочтительнее, чем, так сказать, когнитивная. Её преимущество в том, что она более релевантна к объекту оценивания, чем к производящим оценку экспертам.


Необходимо отметить, что применение эмоциональной оценки при проведении субъективных экспертиз имеет свои недостатки. Главный из них в том, что результат экспертизы должен быть представлен в терминах, описывающих свойства объекта, в то время как исходные данные представлены в терминах, описывающих состояние экспертов. Универсальных правил перехода от одних терминов к другим здесь быть не может. Для каждого рода оцениваемых объектов необходима отдельная концептуальная разработка. Надо признать, что наверняка существуют такие случаи, в которых построение экспертизы, основанной на эмоциональной оценке объекта, невозможно.


Выводы о том, что эмоциональная оценка объекта слабо зависит от индивидуальных свойств экспертов, противоречат положениям, изложенным в [К. Изард, 1980]. Там введено понятие "эмоциональная черта" как тенденция весьма часто испытывать ту или иную эмоцию. Кроме того, там же введено понятие "эмоциональный порог" как склонность завышать или занижать оценку той или иной эмоции. Однако ещё С.Л. Рубинштейн указывал, что "основные различия в эмоциональной сфере личности связаны с различием в содержании человеческих чувств, в том, на что, на какие объекты (курсив наш - А.М.)они направляются, и какое отношение человека к ним выражают" (С.Л. Рубинштейн, 1998). Таким образом, указанное противоречие можно разрешить, предположив, что индивидуальные эмоциональные черты проявляются в большей степени в выборе объектов эмоциональной направленности, или в выборе существенных свойств этих объектов, а не в тенденциозности их оценки. Так как в нашем исследовании объект был задан инструкцией - один для всех, в оценках слабо проявлялись индивидуальные свойства экспертов. Кроме того, объектом оценки было музыкальное произведение; в силу самой природы музыки экспертам было затруднительно выделить его существенные признаки, наиболее соответствующие тем или иным переживаниям.


Меклер А.А.



Также читайте:

 
Поиск по сайту

Популярные темы

Новые тесты

Это интересно
2010-2017 Psyhodic.ru
Все замечания, пожелания и предложения присылайте на admin@psyhodic.ru