Глава 6. Технология контроля качества результатов обучения
Разработка новых государственных стандартов в профессиональном образовании и внедрение новых технологий обучения повлекли за собой необходимость использования новых подходов к системе контроля и проверки соответствия требований к подготовке выпускников заданным уровневым стандартам знаний. В системе профессионального образования существует широкий арсенал видов контроля и оценки. В данной главе излагается как традиционная технология контроля и оценки, так и рейтинговая. Глава написана по материалам работ С.И. Архангельского [4], С.Я. Батышева [45], Д.В. Чернилевского [57].
6.1. Оценка качества результатов обучения
Диагностика в педагогическом процессе понимается, как и привычный нам термин "контроль в учебном процессе", в смысле прояснения всех обстоятельств протекания дидактического процесса, точного определения результатов последнего. Без диагностики невозможно эффективное управление дидактическим процессом, достижение оптимальных результатов, определенных целями обучения. В последнее время в педагогической литературе категорию "диагностирование обученности" рассматривают как последствия достигнутых результатов обучаемости [45]. Целями дидактического диагностирования являются своевременное выявление, оценивание и анализ течения учебного процесса в связи с продуктивностью последнего.
Как видно, в диагностику вкладывается более широкий и более глубокий смысл, чем в традиционную проверку знаний и умений обучаемых. Последняя, преимущественно, лишь констатирует результаты, не объясняя их происхождения. Диагностирование рассматривает результаты в связи с путями, способами их достижения, выявляет тенденции, динамику формирования продуктов обучения. Диагностирование включает в себя контроль, проверку, оценивание, накопление статистических данных, их анализ, выявление динамики, тенденций, прогнозирование дальнейшего развития событий.
Контролирование, оценивание знаний, умений обучаемых включаются в диагностирование как необходимые составные части. Это очень древние компоненты педагогической технологии. Возникнув на заре цивилизации, контролирование и оценивание являются непременными спутниками высшей школы, сопровождают ее развитие. Тем не менее но сей день идут жаркие споры о смысле оценивания, его технологии. Как и сотни лет назад, педагоги спорят, что должна показывать оценка, должна ли она быть индикатором качества — категорическим определением успеваемости обучаемого или же, наоборот, должна существовать как показатель преимущества и недостатков той или иной системы (методики) обучения.
В нынешней теории педагогики еще нет установившегося подхода к определению понятий "оценка", "контроль", "проверка", "учет" и других, с ними связанных. Нередко они смешиваются, взаимозамещаются, употребляются то в одинаковом, то в различном значении.
Общим родовым понятием выступает "контроль", означающий выявление, измерение и оценивание знаний, умений обучаемых. Выявление и измерение называют проверкой. Поэтому проверка — составной компонент контроля, основной дидактической функцией которого является обеспечение обратной связи между преподавателем и обучающимися, получение педагогом объективной информации о степени освоения учебного материала, своевременное выявление недостатков и пробелов в знаниях. Проверка имеет целью определение не только уровня и качества обученности обучающегося, но и объема учебного труда последнего. Кроме проверки, контроль содержит в себе оценивание (как процесс) и оценку (как результат) проверки. В ведомостях успеваемости, базах (банках) данных и т.д. оценки фиксируются в виде отметок (условных обозначений, кодовых сигналов, "зарубок", памятных знаков и т.п.).
Основой для оценивания успеваемости обучающегося являются итоги (результаты) контроля. Учитываются при этом как качественные, так и количественные показатели работы обучающихся. Количественные показатели фиксируются преимущественно в баллах или процентах, а качественные в оценочных суждениях типа "хорошо", "удовлетворительно" и т.п. Каждому оценочному суждению приписывается определенный, заранее согласованный (установленный) балл, показатель (например, оценочному суждению "отлично" — балл 5). Очень важно при этом понимать, что оценка — это не число, получаемое в результате измерений и вычислений, а приписанное оценочному суждению значение. Количественные манипуляции с оценочными суждениями (баллами) недопустимы. Чтобы избежать соблазна использовать оценки как числа, во многих странах мира они имеют буквенное обозначение, например А, В, С и т.д.
Количественное значение уровня обученности получается тогда, когда оценку понимают (и определяют) как соотношение между фактически усвоенными знаниями, умениями и общим объемом этих знаний, умений, предложенным для усвоения. Показатель усвоения (продуктивности обучения) вычисляется из соотношения:
О = (Ф/П) • 100% ,
где О — оценка успеваемости (обученности, продуктивности), Ф — фактический объем усвоенных знаний, умений; П — полный объем знаний, умений, предложенных для усвоения. Как видно, показатель усвоения (оценка) здесь колеблется между 100% — полное усвоение информации и 0% — полное отсутствие такового.
Для определения оценки по этому критерию необходимо научиться измерять объемы усвоенной и предложенной информации. Эта задача решена на уровне удобной практической технологии.
Функции оценки, как известно, не ограничиваются только констатацией уровня обученности. Оценка — единственное в распоряжении педагога средство стимулирования учения, положительной мотивации, влияния на личность. Именно под влиянием объективного оценивания у студентов создается адекватная самооценка, критическое отношение к своим успехам. Поэтому значимость оценки, разнообразие ее функций требуют поиска таких показателей, которые отражали бы все стороны учебной деятельности студенток и обеспечивали их выявление. С этой точки зрения ныне действующая система оценивания знаний, умений требует пересмотра с целью повышения ее диагностической значимости и объективности.
Важнейшими принципами диагностирования и контролирования обученности (успеваемости) обучающихся являются объективность, систематичность, наглядность (гласность). Объективность заключается в научно-обоснованном содержании диагностических тестов (заданий, вопросов), диагностических процедур, равном, дружеском отношении педагога ко всем обучаемым, точном, адекватном установленным критериям оценивании знаний, умений. Практически объективность диагностирования означает, что выставленные оценки совпадают независимо от методов и средств контролирования и педагогов, осуществляющих диагностирование.
Требование принципа систематичности состоит в необходимости проведения диагностического контролирования на всех этапах дидактического процесса — от начального восприятия знаний и до их практического применения. Систематичность заключается и в том, что регулярному диагностированию подвергаются все обучаемые с первого и до последнего дня пребывания в учебном заведении. Контроль необходимо осуществлять с такой частотой, чтобы надежно проверить все то важное, что обучаемым надлежит знать и уметь. Принцип системности требует комплексного подхода к проведению диагностирования, при котором различные формы, методы и средства контролирования проверки, оценивания используются в тесной взаимосвязи и единстве, подчиняются одной цели. Такой подход исключает универсальность отдельных методов и средств диагностирования.
Принцип наглядности (гласности) заключается прежде всего в проведении открытых испытаний всех обучаемых по одним и тем же критериям. Рейтинг каждого обучающегося, устанавливаемый в процессе диагностирования, носит наглядный, сравнимый характер. Принцип гласности требует также оглашения и мотивации оценок. Оценка — это ориентир, по которому обучаемые судят об эталонах требований к ним, а также об объективности педагога. Необходимым условием реализации принципа является также объявление результатов диагностических срезов, обсуждение и анализ их с участием заинтересованных людей, составление перспективных планов ликвидации пробелов.
Диагностировать, контролировать, проверять и оценивать знания, умения обучающихся нужно в той логической последовательности, в какой проводится их изучение.
Качество усвоения студентами подлежащего изучению материала, приобретенного (усвоенного) ими опыта и, следовательно, деятельности, которую они могут осуществлять в результате обучения, может характеризоваться уровнями усвоения (деятельности). Напомним их.
1-й уровень — уровень представления (знакомства). Студент, выведенный на этот уровень, способен узнавать объекты и процессы, если они представлены ему сами (в материальном виде) или даны их описание, изображение, характеристика. На этом уровне студент обладает знанием-знакомством и способен опознать, различить и соотнести эти объекты и процессы.
2-й уровень — уровень воспроизведения. Студент может воспроизвести (повторить) информацию, операции, действия, решить типовые задачи, рассмотренные при обучении. Он обладает знанием-копией.
3-й уровень — уровень умений и навыков. На этом уровне усвоения студент умеет выполнять действия, общая методика и последовательность (алгоритм) которых изучены на занятиях, но содержание и условия их выполнения новые. Здесь различают две разновидности усвоения: умение, когда студент выполняет действия после довольно продолжительного предварительного продумывания последовательности и способов их осуществления, навык, когда действие выполняется автоматически. Обдумывание каждой предстоящей операции резко "свернуто" во времени. Создается впечатление, что исполнитель работает "не думая".
4-й уровень — уровень творчества. Как известно, творчеством считают проявление продуктивной активности человеческого сознания. Например, рационализаторство и изобретательство, работа по реконструкции в ходе реального курсового проектирования, при участии в научно-исследовательской работе. Чтобы вывести студента на уровень творчества, недостаточно, чтобы он овладел знаниями, умениями и навыками по определенному, пусть даже весьма широкому набору учебных элементов. Необходимо обучить его умению самостоятельно "добывать" необходимые знания и умения. Нужно пробудить и развить в нем творческие склонности. А это возможно только при условии, что в процессе обучения будут применяться специальные творческие задачи научно-исследовательской, проектной, конструкторской, технологической деятельности, т.е. будут реализовываться мотивационные знания.
Для достижения любого уровня усвоения студент должен осуществить учебную деятельность (УД), состоящую из трех видов действий: ориентировочной основы действия (ООД), исполнительских действий (ИД) и контрольных действий (КД), выполняемых студентами обычно с помощью преподавателя:
УД = ООД + ИД + КД.
Здесь ООД заключается в получении студентами необходимой информации, осознании поставленной перед ними задачи усвоения. С помощью полученных от преподавателя инструктажа и ориентировки они выбирают пути, средства и методы (выбирают программу) ее решения; ИД состоят в интеллектуальной переработке полученной информации и выполнении упражнений с целью усвоения знаний, умений и навыков. Студент выполняет программу, разработанную в ходе ООД; КД — действия, с помощью которых проверяются полнота, правильность и качество выполнения ООД и ИД.
Приведенные выше характеристики контроля качества знаний и умений весьма условны. Качество обучения, по С.И.Архангельскому [4], рассматривается как способность студентов выполнять определенные требования, поставленные перед ними, с учетом целей и задач изучения того или иного предмета.
Состояния учебного процесса и знаний, как известно, всегда относительны. Отсюда, естественно, возникают вопросы:
а) можно ли вообще что-либо относительное измерить абсолютно?
б) не лучше ли говорить об относительных единицах измерения в учебном процессе?
в) насколько нуждается оценка учебного процесса в абсолютно-точных измерителях?
Для учебного процесса измерения нужны как инструмент, с помощью которого можно объективно оценивать результаты, обеспечивать его упорядочение и осуществлять управление. Характерно и то, что от такого инструмента требуется определение не только "статической картины" тех или иных результатов обучения, но и динамики учебного процесса.
По С.И. Архангельскому, педагогическая оценка — это последовательность действий преподавателя, включающая в себя постановку цели, разработку контрольного задания (вопроса), организацию, проведение и анализ результатов деятельности, реализация которых в учебном процессе приводит к заключению, обуславливающему цели проверки и ее конечный вывод — отметку в зачетной книжке студента. Следовательно, отметка — это заключение о результатах (успехах) обучения и воспитания студента, сделанное на основании оценочной деятельности преподавателя и выраженное в принятой системе градации (ранговой или функциональной).
Оценка призвана отражать в единстве его количественную и качественную стороны. Под качественной оценкой следует понимать такие действия преподавателя, которые направлены на выявление и опознание существенных характеристик объекта, их анализ. Количественная же оценка в этой процедуре выступает как бы вторым действием. Она имеет дело с теми же качественными характеристиками, но уже наделяет их традиционными свойствами: дает им меру, формирует принцип дискретности (способ членения), определяет нормы и эталоны, присваивает цену деления шкалы "измерения" и др.
Рассматривая педагогическую оценку как результат сравнения, сопоставления и обобщения в единстве качественных и количественных сторон изучаемого объекта, нельзя противопоставлять одну ее грань другой. Речь может идти лишь о целесообразности дополнения и углубления каждой отдельно взятой характеристики более тонкими традициями. И в этой части количественная оценка по отношению к качественной всегда выступает вторичной и является производной от первой.
В сущности, качественная и количественная оценки формируют некоторый образ — копию исследуемого объекта, что чаще всего достигается не прямым путем, а опосредственно. Опосредованность — неотъемлемая часть любой оценки, так как процесс получения выводов связан с абстрагированием интересующих нас признаков и обобщением той информации, которая отвечает целям и задачам проверки.
Объектом педагогической оценки в учебном процессе является деятельность студентов, предметом — результаты этой деятельности, выраженные в различных качественных характеристиках. Наиболее представительными из них выступают обученность и воспитанность. Как косвенный критерий может выступать развитость способностей студентов.
Обученность — одно из существенных качеств студента, отражающее его способность оперировать знаниями и умениями при решении теоретических и практических задач, которые приобретаются им в действиях над конкретным учебным материалом. И чем больше пройдет через его сознание и практику разнообразного по содержанию и форме учебного материала в изменяющихся ситуациях деятельности, тем эта способность будет богаче умениями, прочнее обобщением и тем мобильнее она будет проявляться в его деятельности.
Обученность (в узком смысле слова) — это способность студента применять усвоенные знания для выполнения конкретного учебного задания и достигать определенного темпа деятельности.
Воспитанность — это показатель сформированных отношений студентов к окружающему их миру (к людям, событиям, вещам и т.д.), которые реализуются в их социальной деятельности, в умственных и практических действиях при решении общественных задач.
В качестве оценки воспитанности может выступать готовность приложения этих отношений к реальной действительности в полном соответствии с социальными нормами общества. В последнем заключается качественная сторона воспитанности. Отсюда следует, что школа воспитанности имеет как положительные, так и отрицательные значения, граница между которыми, точка отсчета — "нуль".
Педагогическая оценка обладает рядом фундаментальных свойств: объективностью, всесторонностью, качественной и количественной определенностью (детерминированностью), точностью, надежностью, современностью, результативностью и др.
Все разнообразие качественных и количественных критериев в педагогике принято делить на два подмножества, соответственно отражающих воспитательные и дидактические функции преподавателя. В первое подмножество, как правило, включают три группы критериев: для оценки эффективности средств и методов индивидуального воспитательного воздействия в текущем учебном процессе, для оценки системы организации и методик количественного (общественного) воспитательного воздействия в ходе учебного процесса и, наконец, для оценки результатов воспитания студентов на завершающих этапах обучения. Ко второму относятся дидактические критерии, имеющие прямое отношение к учебному материалу, заданиям, пособиям и учебникам; критерии оценки деятельности студентов по овладению учебными программами с отражением результатов формирования знаний, умений и навыков и развития их способностей и, наконец, критерии, связанные с оценкой конечных результатов обучения, деятельности преподавателя, оптимизацией средств и методов учебной работы. Изложенная выше информация изображена на рис. 6.1.
Приведенная из работы Архангельского С.И. структурная схема оценки качества оцениваемого объекта не претендует на исчерпывающий вариант оценки педагогического процесса. Разработка новых (содержательных) критериев является первоочередной задачей оценки качества подготовки обучающихся и методики преподавания. Эта задача сложна, требует много усилий, но решение ее поднимает эффективность учебно-воспитательного процесса в высшей школе.
В заключение можно сказать, что методы контроля зависят от того:
1) какая обучающая процедура контролируется;
2) что контролируется — ход процедуры или ее результат;
3) какие задания для проверки хода и результатов обучающей процедуры используются;
4) какие ответы студентов используются при выполнении контрольных заданий;
5) какова частота и периодичность контроля.
| Педагогический метод оценивания | | Педагогический объект проверки и оценки | |||||||||||||
| Цели проверки и оценки | Содержание и форма представления знаний | Способ получения исходных знаний | Предмет оценивания (результаты деятельности) | ||||||||||||
| Обученность | Воспитанность | Развитость способностей | |||||||||||||
| Критерии оценки | Исходные данные | ||||||||||||||
| |  | | | | |||||||||||
| | | Предварительная обработка | | | |||||||||||
| | | | | | |||||||||||
| Показатели по качеству | | | Показатели по эффективности | ||||||||||||
| | Результаты оценивания (отметки) | | |||||||||||||
1 2 3 4