Ім'я файлу: 1задание .doc Розширення: doc Розмір: 58кб. Дата: 29.03.2020 скачати Пов'язані файли: Таблица.docx Доклад на тему «Метод экспертной оценки в различных отраслях психологической науки»: Эксперт - (от лат. "опытный", "искушенный") - компетентное лицо, имеющее специальный опыт в конкретной области и участвующее в исследовании в качестве источника непосредственной информации. Его задачей является выражение своего мнения о качестве объекта или явления по определенной шкале в соответствии с предусмотренными для этого правилами. Основное содержание метода экспертных оценок заключается в рациональной организации работы одного или нескольких специалистов над поставленной проблемой с регистрацией и последующей обработкой полученных данных. В психологическом исследовании экспертное оценивание может рассматриваться как в качестве самостоятельного метода познания, так и в виде существенного компонента процедур наблюдения, опроса, эксперимента, анализа продуктов деятельности, словом, везде, где имеет место нестандартизированный переход от признаков к выводам. Более того, те или иные разновидности экспертизы применяются на любом этапе исследования: в определении его целей и задач, в построении и проверке гипотез, при выявлении проблемных ситуаций, в ходе интерпретации понятийного аппарата, для обоснования адекватности используемого инструментария, в процессе выработки рекомендаций и т.д. Разумеется, экспертное оценивание не ограничено пределами психологической науки. Промышленность, образование, медицина, юриспруденция, спорт - поистине, трудно найти ту область знания или сферу деятельности, где оно не находило бы применений с давних пор и по настоящее время. Особый интерес к исследовательскому потенциалу данного метода появился после успешной реализации так называемого "Дельфийского проекта". Суть его, как известно, состояла в решении сугубо актуальной после Второй мировой войны задачи для правительства США: определении количества ядерных зарядов, достаточных для обеспечения безопасности страны и ее союзников. В то время частная фирма "Ренд корпорейшн", предложив экспертное оценивание в качестве способа решения проблемы, превзошла по ряду параметров (кратковременность процедур, их сравнительно малая трудоемкость и себестоимость) традиционные методики добывания информации Пентагона и ЦРУ. Вместо сотен секретных агентов и десятков аналитиков, выявляющих потенциальные цели на территории противника, было задействовано семь экспертов (четыре экономиста, специалист по атомным взрывам, специалист по системному анализу и инженер-электронщик). Еще несколько человек снабжали их разного рода информацией. Недостатки в осуществлении мониторной деятельности самым пагубным образом сказываются на качестве оценочных процедур. Дело в том, что рассматриваемый нами метод относится к категории субъективных. Это, напомним, означает признание факта, что результаты экспертного оценивания в значительней мере зависят не только от объекта исследования, но и от характеристик тех лиц, которые это исследование выполняют. Следует заметить, что основной задачей мониторной деятельности является максимальное приближение оценок экспертов к истине. Субъективность метода вовсе не означает его неэффективности. Экспертное оценивание становится способом получения недостоверной информации только в тех случаях, когда плохо подобраны специалисты и некачественно организована их работа. Перейдем к анализу содержания оценочной деятельности экспертов. В целом в ней можно выделить такие этапы: 1.Подготовка к экспертизе (изучение порядка и правил оценивания, ознакомление со способами регистрации суждений, актуализация знаний в данной конкретной области). 2.Исследование объекта экспертизы. 3.Возникновение имплицитной оценки - той, где субъективное впечатление, слабо дифференцированное и неустойчивое, еще не получило выражения средствами внутренней речи, символами или словами. 4.Экспликация оценки - формулирование ее в уме, а затем и в вербальном или символическом виде. 5.Проверка правильности результата оценивания. 6.Аргументирование оценки. 7.Участие в информационном обмене между экспертами. Работа экспертов может происходить в условиях большей или меньшей стандартизации. Так, выражение их суждений в зависимости от особенностей исследования планируется в форме свободного интервью или анкетирования с полузакрытыми (или открытыми) вопросами, или же как стандартизированное интервью. Особо следует остановиться на статистической обработке материала. В практике научных исследований традиционно выделяют такие типы измерительных шкал: 1. Шкала наименований (или номинальная). Здесь устанавливается лишь факт подобия или различия объектов относительно какого-либо признака. Это деление на качественно однородные группы. Объекты в пределах каждой из групп располагаются в случайном порядке, в любой последовательности. При статистической обработке данных в такого рода шкале обычно лишь подсчитывается частотность отнесения объектов к категории. Примерами категориальных признаков являются "девушки - юноши", "экстраверты - интроверты", "сангвиники - флегматики - холерики - меланхолики", "дети - взрослые" и т.д. Главное, чтобы каждый объект входил всякий раз только в одну группу. 2. Шкала порядковая (или ранговая). Предполагает распределение объектов по интенсивности проявлений того или иного признака. С помощью нее устанавливается последовательность носителей признака и направление степени его выраженности в ряду объектов. Дело ограничивается определением отношений "больше - меньше", "выше - ниже" и т.п. Таким образом, каждый объект занимает свое место в ряду других. Однако это не означает, что интервалы между делениями такой шкалы равны друг другу. К примеру, если один школьник ответил на "2" балла, а другой - на "4", нельзя сказать, что кто-то из них знает учебный материал вдвое лучше, чем другой. Неправомерно складывать, вычитать, умножать, делить порядковые места (ранги) или с их помощью вычислять среднее арифметическое. При статистической обработке данных в пределах этой шкалы обычно ограничиваются установлением медианы (величины выраженности признака, соответствующей объекту со средним рангом). Примером использования шкалы порядка является, скажем, составление упорядоченного списка испытуемых, показавших тс или иные результаты при выполнении определенной деятельности. 3. Шкала интервалов. К ней относят материалы, в которых дана количественная оценка изучаемого объекта в фиксированных единицах. Между делениями такой шкалы равные расстояния, одинаковая удаленность. К примеру, если один человек при тестировании интеллекта набрал 100 баллов, а другой - 90, это означает, что различия в показателях их интеллекта столь же велики, как если бы один получил 60 баллов за тот же тест, а другой - лишь 50. Однако это вовсе не подразумевает, что имеющий показатель 100 вдвое "интеллектуальнее", чем тот, у кого 50 баллов. Дело в том, что точка отсчета здесь установлена произвольно. Даже если при выполнении теста не будет решена ни одна задача, мы не решимся утверждать, что показатель интеллекта равен нулю. Основная проблема при ориентации оценивания на шкалу интервалов заключена в поиске такой единицы, которая во всех случаях была бы тождественна сама себе, то есть неизменна, одинакова. А это далеко не всегда возможно. С помощью данной шкалы можно выполнять обычные алгебраические операции типа сложения величин и вычисления среднего арифметического. 4. Шкала отношений (или пропорций). В отличие от предыдущей шкалы здесь не только равные интервалы между единицами измерения, но и имеется абсолютная точка, от которой и ведется отсчет. Тем самым становятся возможными выводы о пропорциях (типа "в два раза меньше", "в полтора раза выше", "в четыре раза тяжелее" и т.п.). В рамках этой шкалы могут производиться все статистические действия. Однако, изучая те или иные психологические признаки, практически невозможно исходить из некоего "абсолютного нуля". Шкала отношений используется, как правило, только если речь идет о физических особенностях испытуемых (типа веса, роста, размера и др.). Итак, мониторная группа, определив тин базовой измерительной шкалы, адекватный исследованию, разрабатывает для экспертов конкретные параметры, но которым будут вынесены индивидуальные суждения. Важно, чтобы в последующем, при статистической обработке и логическом сопоставлении результатов экспертизы не осуществлялось неправомерных выходов за пределы возможностей того или иного типа измерения. После вынесения оценок экспертами исследователь осуществляет обычно следующие операции: - проверку индивидуальных суждений и обоснований на непротиворечивость составляющих; - анализ совокупности мнений экспертов с целью установления степени согласованности их между собой; - выделение групп экспертов с близкими позициями в случае наличия существенных расхождений в оценках; - выявление причин разброса индивидуальных мнений; - определение влияния компетентности экспертов на содержание их оценок и обоснований. Теперь обратимся к рассмотрению причин нарушения достоверности результатов в ходе экспертного оценивания. В качестве примера используем дидактическое оценивание, осуществляемое педагогами для выявления качества знаний и степени сформированности умений и навыков обучаемых. Известно, что иногда несколько педагогов, оценивая независимо друг от друга один и тот же устный ответ или письменную работу ученика, выставляют совершенно разные отметки но традиционной шкале успешности обучения. Бывает и так, что учитель, повторно оценивая письменную работу через некоторый промежуток времени, выставляет отметку, отличающуюся (подчас значительно) от собственной отметки, сделанной ранее. Почему это происходит? Можно выделить следующие причины оценочного субъективизма: 1.Полифункциональность отметки в учебном процессе иногда приводит к тому, что вступают в противоречие функции контроля и воспитания, ориентации учащегося в его достижениях и стимуляции к достижениям. 2. Неисчисляемость оценочных процедур. Традиционная для современного образования шкала успешности обучения является порядковой. Учитель не измеряет качества ответов или работ, а сравнивает их с неким идеальным образом, эталоном. Он пользуется цифрами, но не делает вычислений, применяя обозначения количества в качестве ярлыков. Естественно, что каждый из них делает это по-своему. 3.Разный уровень профессиональной подготовленности экспертов, в частности, степень владения учебным материалом, умение пользоваться данным средством контроля, коммуникативно-аудиальные умения. 4.Индивидуально-личностные особенности педагогов, в том числе: - степень автономности от социальных стереотипов; -уровень инертности сложившихся к моменту оценивания представлений о возможностях ученика (в силу этого "отличнику" так же трудно бывает получить "3", как "троечнику" - "5", даже если их ответы заслуживают такой отметки); - различия в умении абстрагироваться от имеющихся межличностных отношений с учащимся; -характерологические особенности: ответственность, добросовестность, собранность, заинтересованность и др.; различия во влиянии на оценку несущественных аспектов ответа или работы ученика, таких как темп речи, дикция, громкость голоса, наличие пауз и количество оговорок, ораторские способности, особенности почерка, число исправлений или орфографических ошибок (если оценивается не грамотность) и т.д.. К причинам нарушения достоверности данных при очном групповом оценивании следует отнести: - стремление к идентификации сообщения с его источником, в силу которого слушатель бывает склонен принять или опровергнуть чье-либо мнение в зависимости не от реального содержания, но от отношения к человеку, высказавшему его; - центростремительное давление, проявляющееся в виде смещения экспертных оценок в ходе обсуждения в сторону "безопасной середины"; - тенденцию защищать собственную позицию, высказанную публично, даже после того, как сам эксперт убедился в её неверности; - стремление к доминированию как личностная особенность, возникающая часто у лиц, не являющихся признанными лидерами, но претендующих на это; - влияние феномена "огруппления мышления", появляющееся в том случае, когда чувство принадлежности человека к группе подталкивает его к поддержке решений не столько правильных, сколько способных обеспечить единодушие; - неустойчивость имплицитной оценки, легко изменяющейся под воздействием уже высказанных мнений со стороны других экспертов. Большинство из этих факторов не оказывают особого влияния на итоги группового оценивания, осуществляющегося в заочной форме, без непосредственного взаимодействия экспертов между собой. Однако заочная форма экспертизы обычно требует нескольких туров, что увеличивает продолжительность и трудоемкость процедуры. Лабораторная работа на тему «Метод экспертной оценки в различных отраслях психологической науки»(за методикою Ю. П. Платонова). |