Размещено на http://www.allbest.ru/

Учебно-методическое обеспечение специализированной подготовки актива базовых вузов учебно-методических объединений (УМО) в области проектирования нового поколения основных образовательных программ (ООП), реализующих федеральные государственные образовательные стандарты высшего профессионального образования (ФГОС ВПО)

Н.Ф. Ефремова, В.Г. Казанович

ОЦЕНКА КАЧЕСТВА ПОДГОТОВКИ ОБУЧАЮЩИХСЯ В РАМКАХ ТРЕБОВАНИЙ ФГОС ВПО:

Создание фондов оценочных средств для аттестации студентов вузов при реализации компетентно-ориентированных ООП ВПО нового поколения.

Установочные организационно-методические материалы тематического семинарского цикла

МОСКВА -- 2010

СОДЕРЖАНИЕ

ВВЕДЕНИЕ

1. ЦЕЛИ ПОДГОТОВКИ ПО ПРОГРАММЕ

2. КАТЕГОРИЯ СЛУШАТЕЛЕЙ ПО ПРОГРАММЕ ТСЦ

3. КОМПЛЕКСНЫЙ КОНЕЧНЫЙ РЕЗУЛЬТАТ РЕАЛИЗАЦИИ ПРОГРАММЫ ТЕМАТИЧЕСКОГО СЕМИНАРСКОГО ЦИКЛА

4. ОРГАНИЗАЦИЯ ОБРАЗОВАТЕЛЬНОГО ПРОЦЕССА ПО ПРОГРАММЕ ТСЦ

5. МЕТОДИЧЕСКОЕ ОБЕСПЕЧЕНИЕ ПРОГРАММЫ ТСЦ

6. ЗАДАНИЯ СЛУШАТЕЛЯМ

7. МЕТОДИЧЕСКИЕ РЕКОМЕНДАЦИИ ПО РАЗРАБОТКЕ ФОНДА ОЦЕНОЧНЫХ СРЕДСТВ

ПРИЛОЖЕНИЯ

Сведения об авторах

ВВЕДЕНИЕ

Актуальность реализации Программы Тематического семинарского цикла (ТСЦ).

Компетентностная ориентация основной образовательной программы (ООП) определяет необходимость компетентностной ориентации не только самого образовательного процесса, его содержания и технологий реализации, но и соответствующей переориентации оценочных процедур, технологий и средств оценки качества подготовки обучающихся в рамках компетентностно-ориентированных требований ФГОС ВПО. Это имеет отношение ко всем стадиям образовательного процесса: от входной аттестации (в особенности на предмет выявления уровней сформированности общекультурных компетенций), через все виды промежуточных аттестаций до итоговой аттестации на соответствие требованиям ФГОС ВПО.

Следовательно, должны быть, при максимально возможном задействовании всего наработанного арсенала оценочных средств, модернизированы (переформатированы) имеющиеся в вузах оценочные средства аттестации студентов и выпускников с целью их компетентностной «настройки», разработаны принципиально новые компетентностно-ориентированные средства и технологии аттестации. Это касается и новых форм организации аттестаций и новых аттестационных технологий (в особенности в отношении общекультурных компетенций, которые в существующем образовательном процессе не являлись предметом оценки).

Разработанные учебно-методическими объединениями в 2009 г. проекты ООП содержат лишь незначительное количество инновационных оценочных средств, не затрагивая в целом фонд оценочных средств, и практически не содержат новые схемы (формы) организации аттестации выпускников с точки зрения выявления уровней их сформированности.

Вследствие этого, в данном аспекте предстоит серьезная доработка базовыми вузами УМО проектов ООП.

1. ЦЕЛИ ПОДГОТОВКИ ПО ПРОГРАММЕ

а) Образовательные

· ознакомить слушателей с современной компетентностно-ориентированной методологией оценки качества подготовки в высшей школе;

· дать представление о современных компетентностно-ориентированных оценочных средствах и технологиях, об их функциональных возможностях в образовательном процессе высшей школы;

· ознакомить с зарубежным опытом разработки и использования инновационных средств оценки качества подготовки студентов и выпускников высшей школы;

· ознакомить с передовым отечественным опытом разработки и использования инновационных средств оценки качества подготовки студентов и выпускников высшей школы;

б) проектные

· ознакомить слушателей с современными методическими подходами к организации аттестационных процедур в вузе;

· ознакомить с основными методами проектирования компетентностно-ориентированных оценочных средств аттестации студентов и выпускников вузов (по каждому виду оценочных средств);

· предоставить слушателям возможности самостоятельного, при консультационной поддержке, экспериментального проектирования отдельных видов оценочных средств и в целом системы аттестации как части ООП.

2. КАТЕГОРИЯ СЛУШАТЕЛЕЙ ПО ПРОГРАММЕ ТСЦ

Представители профессорско-преподавательского состава базовых вузов УМО из числа, преимущественно, сотрудников выпускающей кафедры по соответствующей ООП, имеющие опыт организации и разработки оценочных средств аттестации студентов и выпускников вуза, способные возглавить и организовать соответствующую работу в вузе по разработке фонда оценочных средств и технологий аттестации студентов и выпускников вузов в рамках компетентностно-ориентированной ООП.

3. КОМПЛЕКСНЫЙ КОНЕЧНЫЙ РЕЗУЛЬТАТ РЕАЛИЗАЦИИ ПРОГРАММЫ ТЕМАТИЧЕСКОГО СЕМИНАРСКОГО ЦИКЛА

Комплексный конечный результат реализации Программы Тематического семинарского цикла заключается в разработке коллективом базового вуза УМО под руководством слушателя (ей) семинара:

· Комплексной программы организации аттестации студентов вуза, обучающихся по конкретной ООП, включающей входную аттестацию, все виды промежуточной аттестации, итоговую аттестацию. При этом программа аттестации должна включать сертификацию выпускника по всем составным частям компетентностной модели, заложенной в ООП.

· Комплекса (фонда) оценочных средств по всем видам аттестационных испытаний, предусмотренных комплексной программой организации аттестации.

· Методического комплекса, включающего:

а) методические материалы по использованию оценочных средств при аттестации студентов и выпускников (по всем видам аттестаций и по всем видам оценочных средств);

б) методические материалы по оценке качества курсовых и дипломных работ;

в) методические материалы по оценке уровней сформированности компетенций: общекультурных, профессиональных.

· Пояснительной записки (обоснования) к выполненному проекту.

4. ОРГАНИЗАЦИЯ ОБРАЗОВАТЕЛЬНОГО ПРОЦЕССА ПО ПРОГРАММЕ ТСЦ

В рамках реализации Программы предусматривается:

· проведение лекций, носящих, в основном, методический характер и раскрывающих технологические особенности различных схем и средств оценки;

· проведение практических семинаров с обсуждением вопросов проектирования и функционирования различных видов оценочных средств;

· проведение консультационных занятий по различным аспектам проектирования фондов оценочных средств и технологий аттестации студентов и выпускников;

· самостоятельная работа по разработке Программы и оценочных средств аттестации студентов и выпускников. При этом предусматривается поэтапная выдача слушателям серии заданий в соответствии с этапами проектирования;

· защита результатов самостоятельной работы как соответствующего раздела ООП базового вуза УМО.

В рамках тематического цикла семинаров предусматривается презентация слушателями позитивного опыта своего вуза по разработке компетентностно-ориентированных оценочных средств и технологий.

Организация образовательного процесса предусматривает проведение 2-х экспертиз: промежуточной и итоговой результатов разработки фонда оценочных средств и технологий для аттестации студентов и выпускников вузов как части компетентностно-ориентированных ООП.

Данный цикл семинаров тематически тесно связан с другими соответствующими авторскими циклами семинаров, предусматриваемых в рамках научно-образовательного сопровождения разработки и внедрения в образовательную практику нового поколения ООП ВПО в базовых вузах УМО:

· тематический цикл семинаров «Проектирование и экспериментальное внедрение компетентностно-ориентированных учебных программ дисциплин, практик, модулей в составе ООП нового поколения»;

· тематический цикл семинаров «Проектирование и экспериментальное внедрение программ формирования актуальных социальных компетентностей в составе ООП нового поколения».

Укрупненный план-график проведения цикла семинаров

Общий объем подготовки по Программе - 66 часов

Из них:

лекционных занятий - 10 часов (5 лекций по 2 часа)

практических занятий - 10 часов (5 занятий по 2 часа)

самостоятельная забота слушателей - 35 часов

консультации - 10 часов (5 конс. дней по 2 часа)

защита итогового проекта - 1 час

Занятия проводятся в период: май-июнь, сентябрь-ноябрь с периодичностью 1 раз в месяц, продолжительностью 6 часов каждое занятие.

5. МЕТОДИЧЕСКОЕ ОБЕСПЕЧЕНИЕ ПРОГРАММЫ ТСЦ

Предполагается обеспечение слушателей следующими основными методическими материалами:

1. Методические рекомендации по проектированию фонда оценочных средств и технологий аттестации студентов и выпускников вузов на соответствие требованиям ФГОС ВПО - в процессе подготовки к печати.

2. Ефремова Н.Ф. Подходы к оцениванию компетенций в высшем образовании: Учеб. пособие. - М.: Исследовательский центр проблем качества подготовки специалистов, 2010. - 216 с.

3. Звонников В.И., Челышкова М.Б. Контроль качества обучения при аттестации: компетентностный подход: Учебное пособие. - М.: Университетская книга; Логос, 2009. - 272 с.

4. Ефремова Н.Ф. Организация оценивания компетенций студентов, приступающих к освоению основных образовательных программ вузов (в печати).

5. Пузанков Д.В., Кузьмин Н.Н., Шехонин А.А. и др. Проблема оценивания результатов обучения при компетентностном задании требований к выпускнику вуза // Материалы ХI Симпозиума «Квалиметрия в образовании: методология, методика, практика» / Под науч. ред. Н.А. Селезневой и А.И. Субетто. - М.: Исследовательский центр проблем качества подготовки специалистов, 2006. - 37 с.

6. Богословский В.А., Караваева Е.В. Принципы проектирования оценочных средств для реализации многоуровневых образовательных программ ВПО при компетентностном подходе. // Материалы ХVII Всероссийской научно-методической конференции «Проектирование ФГОС ВПО и ООП ВПО в контексте европейских и мировых тенденций». Ч. 1. - М.; Уфа: Исследовательский центр проблем качества подготовки специалистов, 2007. - С. 57-70.

По мере проведения семинаров предполагается подготовка и издание отдельных брошюр, презентующих лучший опыт российских вузов в разработке компететностно-ориентированных оценочных средств и технологий аттестации студентов и выпускников высшей школы.

6. ЗАДАНИЯ СЛУШАТЕЛЯМ

образовательный процесс программа

Достижение определенного выше комплексного конечного результата реализации Программы ТСЦ осуществляется через выполнение следующей серии частных заданий.

Задание №1 (аналитическое)

Провести анализ потенциального арсенала оценочных средств, которые могли бы быть использованы при реализации комплексной программы аттестации студентов и выпускников вузов на соответствие требованиям ФГОС ВПО.

Задание выполняется путем заполнения соответствующего экспертно-аналитического листа (Приложение 1).

Задание №2

Разработка комплексной программы аттестации студентов и выпускников вузов на соответствие требованиям ФГОС ВПО.

Главными вопросами при составлении тематической программы аттестации являются:

а) определение для каждой компетенции, заданной компетентностной моделью выпускника, форм оценивания уровня сформированности компетенции (или, как минимум, диагностики обеспечения минимально необходимого уровня сформированности компетенции);

б) обеспечение покрытия аттестационными испытаниями всех компетенций, определенных компетентностной моделью выпускника.

Данное задание направлено на разработку основных программных документов, регламентирующих аттестацию студентов и выпускников вузов, в т.ч.:

1) Программу входной аттестации первокурсников, поступающих на обучение по соответствующей ООП. Проведение такой входной аттестации связано, прежде всего, с необходимостью выявления начального уровня сформированности компетенций студентов-первокурсников, прежде всего, общекультурных компетенций, что не предусматривается программой вступительных экзаменов.

2) Сквозную программу промежуточных (поэтапных / по курсам обучения) комплексных испытаний (аттестаций) студентов в вузе на соответствие их подготовки поэтапным ожидаемым результатам образования компетентностно-ориентированной ООП ВПО.

Данная сквозная программа отражает содержание и организацию нового вида промежуточных комплексных испытаний по завершении каждого курса обучения при освоении компетентностно-ориентированной ООП ВПО.

Поэтапные (по курсам обучения) ожидаемые результаты образования
в компетентностном формате, необходимые для разработки данной сквозной программы, формируются на основе компетентностно-формирующей части учебного плана.

Рекомендуемая структура сквозной программы приводится в приложении 2.

Введение такой сквозной программы промежуточных (поэтапных) комплексных испытаний рассматривается как важный механизм в обеспечении качества компетентностно-ориентированного образования и гарантии качественной подготовки студентов к итоговой государственной аттестации.

3) Программу итоговых комплексных испытаний (итоговой государственной аттестации) студентов - выпускников вуза.

В данной программе раскрываются содержание и форма организации всех видов итоговых комплексных испытаний (в рамках итоговой государственной аттестации студентов-выпускников вуза), позволяющие продемонстрировать сформированность у них (на достаточном уровне) всей совокупности обязательных компетенций, определенных в компетентностной модели выпускника.

Рекомендуемая структура данного документа приводится в приложении 3.

При разработке программ в соответствии с п.п. 2), 3) следует иметь в виду, что в компетентностно-ориентированном образовательном процессе у студента появляется новая роль - самопрезентация и последовательное формирование компетентностной составляющей в результатах своего образования: от образовательных процессов по отдельным учебным дисциплинам и видам практик, через поэтапную комплексную самопрезентацию - защиту сформированности обязательных компетенций по окончании каждого курса обучения до самопрезентации - защиты конечных результатов образования в форме компетенций на итоговой аттестации студента-выпускника вуза перед государственной аттестационной комиссией.

Основные организационно-методические и технологические аспекты самооценки студентов в компетентностно-ориентированном образовательном процессе будут рассмотрены в тематическом семинарском цикле «Научно-методическое обеспечение участия студентов в реализации компетентностно-ориентированных ООП ВПО в соответствии с требованиями ФГОС ВПО».

Примечание: Задание 2 выполняется участниками тематического семинарского цикла совместно с представителем своего УМО - участником тематического семинарского цикла «Системное проектирование и экспериментальное внедрение компетентностно-ориентированных ООП ВПО, реализующих ФГОС ВПО».

Задание №3

Разработка проекта вузовского Положения о фонде оценочных средств аттестации студентов и выпускников вузов на соответствие требованиям ФГОС ВПО.

Положение должно определять основные структурные и регламентные аспекты разработки, формирования и функционирования фонда оценочных средств.

Задание №4

Разработка комплекса (фонда) оценочных средств по всем видам аттестационных испытаний, предусмотренных комплексной программой организации аттестации.

Примечание: В минимальном варианте фонд может быть представлен в виде примеров оценочных средств по всем видам аттестационных испытаний.

При формировании фонда слушателю целесообразно руководствоваться методическими рекомендациями В.И. Звонникова, М.Б. Челышкова, представленными в качестве установочных организационно-методических материалов данного цикла.

Задание №5

Разработка методического комплекса, включающего:

а) методические материалы по оценке качества курсовых и дипломных работ;

б) методические материалы по оценке уровней сформированности компетенций: общекультурных, профессиональных.

Примечание: п. а) является минимальным вариантом представления методического комплекса.

Задание №6

Составить обоснование к разработанному комплексу оценочных средств.

Обоснование должно включать:

1. Концептуальные принципы реализации комплексной программы аттестации и разработки соответствующего фонда оценочных средств, отражающих специфику данного направления подготовки.

2. Рефлексию относительно того, что удалось реализовать в разработанном проекте и что может быть определено в качестве перспективного направления развития проекта фонда оценочных средств.

3. Что, по мнению разработчиков комплекса, могло бы представлять методический интерес для представителей других образовательных областей.

7. МЕТОДИЧЕСКИЕ РЕКОМЕНДАЦИИ ПО РАЗРАБОТКЕ ФОНДА ОЦЕНОЧНЫХ СРЕДСТВ

Требование измеримости в отношении компетенций как предмета контроля результатов обучения составляет на сегодняшний день наивысшую трудность, как в теоретическом, так и в практическом плане, так как общепризнанные методы измерения компетенций в системе образования на сегодня отсутствуют. Тем не менее, задача оценивания компетенций в условиях реализации ФГОС ВПО третьего поколения (компетентностный подход) ставится вполне определенно, ее необходимо решать, прежде всего, создавая фонды оценочных средств вузов.

Под фондом оценочных средств понимается комплект методических и контрольных измерительных материалов, предназначенных для оценивания компетенций на разных стадиях обучения студентов, а также для аттестационных испытаний выпускников на соответствие (или несоответствие) уровня их подготовки требованиям соответствующего ГОС ВПО по завершению освоения основной образовательной программы по определенному направлению или специальности. При этом применение современных оценочных средств рекомендуется обеспечивать через эталонные квалиметрические процедуры, обеспечивающие количественные и качественные оценки, их достоверность и сопоставимость. Фонды оценочных средств разрабатывается вузами с учетом особенностей принятых основных образовательных программ (ООП). ФГОС ВПО и при этом выполняет функцию социальной нормы качества высшего профессионального образования, описанной в категориях: «вид (направление) деятельности», «квалификационные требования (универсальные и профессиональные компетенции)», «профессиональные задачи», «решение проектов» и др.

Оценка уровня освоения компетенций абитуриентов, студентов и выпускников вузов требует создания новой инновационной технологии комплексного оценивания совокупности имеющихся знаний, умений и навыков (ЗУН) и социально-личностных характеристик, формирующих их компетенции.

Поэтому при создании фонда оценочных средств необходимо принимать во внимание ряд факторов:

– дидактико-диалектическую взаимосвязь между результатами образования и компетенциями, различия между понятиями «результаты образования» и «уровень сформированности компетенций»: результаты образования определяются преподавателем, а компетенции приобретаются и проявляются только в процессе деятельности;

– компетенции формируются и развиваются не только через усвоение содержания образовательных программ, но и самой образовательной средой вуза и используемыми образовательными технологиями - соответственно и данные параметры должны проходить процедуру оценки;

– при проектировании инновационных оценочных средств необходимо предусматривать оценку способности к творческой деятельности, способствующей подготовке студента, готового обеспечивать решения новых задач, связанных с недостаточностью конкретных специальных знаний и отсутствием общепринятых алгоритмов профессионального поведения в квазиреальной деятельности;

– при оценивании уровня сформированности компетенций студентов должны создаваться условия максимального приближения к будущей профессиональной практике; кроме преподавателей конкретной дисциплины, в качестве внешних экспертов должны активно использоваться работодатели, студенты выпускных курсов вуза, преподаватели смежных дисциплин и др.;

– помимо индивидуальных оценок должны использоваться групповые и взаимооценки: рецензирование студентами работ друг друга; оппонирование студентами проектов, дипломных, исследовательских работ и др.; экспертные оценки группами из студентов, преподавателей и работодателей и др.;

– по итогам оценивания следует проводить анализ достижений, подчеркивая как положительные, так и отрицательные индивидуальные и групповые результаты, обозначая пути дальнейшего развития.

В структуру фонда оценочных средств могут быть включены:

– программа и план-график проведения контрольно-оценочных мероприятий на весь срок обучения;

– модели компетенций и программы оценивания компетенций в соответствии с уровнями обучения и профилем специальности;

– совокупность контрольно-оценочных материалов (опросников, тестов, кейсов и др.), предназначенных для оценивания уровня сформированности компетенций на вполне определенных этапах обучения (на входе у студентов первого курса, приступающих к освоению ООП, после первого курса, на ключевых этапах обучения на старших курсах, после практик, на этапе подготовки к защите дипломной работы и др.);

– методические материалы, определяющие процедуры оценивания компетенций на всех этапах проверки (описание процедур входного контроля уровня сформированности общих компетенций студентов первого курса в начале освоения ООП; материалы для проверки компетенций на разных стадиях освоения ООП по направлениям подготовки);

– требования к квалификации организаторов оценивания;

– технологии и методы обработки результатов оценивания компетенций;

– методические материалы, определяющие процедуру оценивания, а также инструкции и программно-инструментальные средства обработки результатов, статистического анализа данных, графической визуализации и интерпретации, форматы представления их пользователям;

– наборы показателей, а также критерии оценки уровней сформированности компетенций и шкалы оценивания в соответствии с задачами контроля;

– рекомендации по интерпретации результатов оценивания и методические материалы, определяющие процедуру обсуждения результатов со студентами, рекомендации по накоплению оценок и их использованию в портфолио студента;

– программы подготовки оценщиков и экспертов для проведения контрольно-оценочных процедур;

– банк статистической информации и программы мониторинга достижений;

– структура портфолио и доступность статистической информации пользователям (интерфейсы по категориям пользователей: студентам, преподавателям, администрации, работодателям и др.);

– программы итогового экзамена для выпускников по направлениям подготовки;

– совокупность заданий, предназначенных для предъявления выпускнику на экзамене и критерии их оценки;

– методические материалы, определяющие процедуру проведения экзамена;

– для выпускной квалификационной работы методические материалы, определяющие процедуру и критерии оценки соответствия уровня подготовки выпускника требованиям ГОС ВПО, на базе подготовки, выполнения и защиты им выпускной квалификационной работы;

– рекомендации по обновлению фонда оценочных средств (периодичность, степень обновления, изменения процедур, методов, технологий, показателей, критериев и др.).

При формировании фондов для развития компетенций студентов важно учитывать стандарты оценочной процедуры:

– периодичность проведения оценки уровня сформированности компетенций (по мере завершения изучения модуля ООП);

– соблюдение последовательности проведения оценки: в модели компетенций следует предусмотреть, чтобы развитие компетенций шло по возрастанию их уровней, а оценочные средства на каждом этапе учитывали это возрастание;

– многоступенчатость: оценка и самооценка студента, обсуждение результатов и комплекс мер по устранению недостатков;

– единство используемой технологии (заполнение оценочных листов, собеседование, определение направлений развития) для всех студентов, выполнения условий сопоставимости результатов оценивания.

Фонды оценочных средств должны проходить экспертизу учебно-методических объединений вузов (УМО) (или других вузовских объединений, являющихся основными разработчиками новых ФГОС ВПО); представителей работодателей и профессиональных сообществ, Министерства образования и науки. Фонды оценочных средств должны быть полными и адекватными отображениями требований ФГОС ВПО и ООП ВПО, обеспечивать решение оценочной задачи соответствия общих и профессиональных компетенций выпускника этим требованиям.

Формирование фонда оценочных средств вуза включает предварительный и основной этапы:

– на предварительном осуществляется идентификация требований, их разделение и ранжирование по значимости;

– на основном - формирование структуры и содержания оценочных средств, их проверка на валидность поставленным целям оценивания.

Для проведения контрольно-оценочной деятельности требуется разработка критериев оценивания (степени соответствия установленным требованиям) и технологии (процедуры) оценивания.

Вузовский фонд оценочных средств может состоять из двух частей: средств для промежуточной аттестации студентов и средств для итоговой аттестации выпускников.

Основой проектирования и разработки оценочных средств могут служить структурные матрицы оценочных средств текущего, промежуточного (рубежного) и итогового контроля уровня освоения компетенций студентов и выпускников (табл. 1).

Таблица 1 - Макет структурной матрицы оценки уровня сформированности компетенций

Обозначения в таблице: ГСЭ - гуманитарный, социальный и экономический цикл; МЕН - математический и естественнонаучный цикл; Проф. - профессиональный цикл. УО - устный опрос: собеседование (УО-1), коллоквиум (УО-2), зачет (УО-3), экзамен по дисциплине, модулю (УО-4). (ПР) - письменные работы: тесты (ПР-1), контрольные работы (ПР-2), эссе (ПР-3), рефераты (ПР-4), курсовые работы (ПР-5), научно-учебные отчеты по практикам (ПР-6). ТС - технические средства контроля: программы компьютерного тестирования (ТС-1), учебные задачи (ТС-2), комплексные ситуационные задания (ТС-3) и др.

Структурные матрицы содержат информацию в столбцах об учебных циклах ООП и соответствующих им базовых и вариативных дисциплинах (включая практики, НИР и др.) и виды ИГА (госэкзамен и ВКР), а в строках - индексы компетенций в соответствии с ФГОС ВПО по данному направлению подготовки и соответствующие им виды и формы оценочных средств. Структурные матрицы составляются отдельно для каждой из ООП подготовки бакалавров, магистров, специалистов по направлению подготовки. Эта информация задает требования к содержанию и возможной структуре средств оценивания компетенций выпускников согласно перечню УМО по направлению подготовки и может служить основой для аттестации аккредитации ООП ВПО (бакалавры и магистры) по данному направлению.

В зависимости от целей оценки, уровня, ступени или типа образовательной программы оценочные средства конструируются на разных уровнях сложности и неопределенности: от имеющих однозначное решение (ответ) до имеющих многозначность решений (ответов) или не имеющих на сегодня признанных решений (ответов).

Чем выше уровень неопределенности, творчества (выше сложность, эвристичность ответа), задаваемого оценочным средством, тем меньше степень социального нормирования (содержание задания нормировано, а на ответ нормирование может не распространяться). Напротив, чем ниже уровень неопределенности, выше детерминированность (ниже сложность, выше однозначность ответа) оценочного средства, тем меньше степень нормирования (оно касается и содержания задания, и ответа на него). При реализации инновационных технологий контроля качества компетенций для каждого оценочного средства должен быть выбран определенный критерий оценивания, определяющий степень соответствия заданной норме.

Создание вузовского фонда оценочных средств следует проводить поэтапно, включая и технологии для «входной» аттестации уровня сформированности основных компетенций у студентов 1-го курса в начале освоения ООП ВПО.

Последовательность шагов на пути формирования оценочных средств может быть следующая.

1. Устанавливается полный состав требований к первокурснику, студенту на разных этапах обучения и выпускнику, требования, содержащиеся в конкретных ГОС ВПО, дополняются требованиями, вытекающими из заявленных целей и академических свобод вузов.

2. Создается перечень формируемых компетенций по уровням обучения, начиная со студентов первого курса, приступающих к освоению ООП ФГОС ВПО третьего поколения (компетентностный подход) и до выпускников вуза.

3. Разрабатывается полный состав требований к системе оценки компетенций студентов на каждой стадии контроля.

4. Разрабатываются модели компетенций для каждого этапа обучения с учетом дополнительных компетенций, обусловленных спецификой специальности или направления подготовки.

5. Создается накопительная система сбора данных на каждого студента за весь срок обучения (портфолио студента).

4. Проводится выделение массива основных учебных модулей (ОУМ), участвующих в формировании конкретных компетенций, или ряда основных модулей, относящихся к различным дисциплинам, но формирующих одно и то же интегральное знание или умение студента.

5. Проводится формирование структуры и содержания оценочных средств для каждого этапа обучения студентов, начиная с выделения для контроля массива учебных модулей. Наиболее типичным вариантом будет наличие ряда основных модулей, относящихся к различным дисциплинам, но формирующих одно и то же интегральное знание или умение студента; каждый модуль может быть достаточным для формирования соответствующей компетенции, а может иметь только статус необходимого, т.е. формирующего данную компетенцию только в совокупности с другими модулями. Для каждой дисциплины модуля формулируется вопрос (задача), по результатам выполнения которого можно судить о степени освоения студентом учебного материала и достижения определенного уровня сформированности компетенции.

6. На каждый этап контроля создается спецификация поверяемых компетенций и соответствующих им заданий или вопросов. Определяется число заданий и время, необходимое для ответов. Требуется добиться высокой значимости каждого задания, установить процедуру контрольно-оценочного процесса. Значимость задания (вопроса) может определяться тем, насколько это задание позволяет вынести интегральное решение о соответствии уровня сформированности компетенции требованиям ООП. Процедуру установления значимости (веса) заданий рекомендуется проводить с помощью экспертов или автоматизировано по статистическим данным предварительной апробации отдельно для каждой оцениваемой компетенции.

7. Для оценки каждой из заявленных к оцениванию компетенций разрабатываются задания, по результату выполнения которых можно судить об уровне ее развития и степени освоения учебного материала модуля; возможны формулировки заданий, одновременно охватывающих материал нескольких модулей (междисциплинарные комплексные задачи), для решения которых необходимо освоение содержания соответствующих основных модулей.

8. Разрабатывается демоверсия контрольного оценочного материала по спецификации, проводится учет замечаний и предложений экспертов, определение сроков и длительности контрольно-оценочного процесса, организационных, учебно-методических, технических и эргономических условий его проведения, методов обработки результатов.

9. Разработка параллельных вариантов этого материала (наборов заданий одинаковых по содержанию в каждом варианте и по сложности их решения с равной или близкой суммой весов входящих в него заданий), для обеспечения информационной защищенности процедур оценивания рекомендуется не менее 5 вариантов.

10. Сопоставление структуры и содержания контрольных оценочных средств с требованиями к уровням компетенций на данной стадии обучения студентов.

11. Выполняется подготовка «ключей» - наборов правильных ответов на каждое задание по вариантам.

12. Устанавливаются критерии (критерий) и шкала оценивания, по которым можно судить о соответствии или несоответствии уровня сформированности компетенций студентов в соответствии с требованиями ФГОС ВПО и ООП.

13. Обеспечивается тиражирование необходимого количества вариантов.

14. Разрабатываются инструкции по выполнению контрольно-оценочного процесса для оценщиков, к которым можно отнести работников учебного отдела, сотрудников вузовского центра оценки достижений студентов, руководителя научной работы студента, работников деканата и др. Желательно исключить преподавателей предметников по направлению подготовки.

15. Структура и форма оценочного листа должны быть отработаны, содержать поле требований к процедуре оценивания. В пояснении необходимо привести критерий оценки соответствия требованиям ФГОС ВПО.

Основой для проектирования и конструирования оценочных средств могут служить:

– структурные матрицы каждой из основных образовательных программ (ООП) подготовки бакалавров, магистров, специалистов в соответствии с требованиями ФГОС ВПО по направлению подготовки, разработанные учебно-методическими объединениями (УМО) по направлениям подготовки;

– модели универсальных и профессиональных компетенций выпускников (бакалавров, магистров и специалистов), построенные вузом на основе ООП;

– образцы оценочных средств, рекомендованных УМО для проведения текущего, промежуточного и рубежного контроля, а также итоговой оценки компетенций выпускников (бакалавров, магистров и специалистов) в соответствии с ООП по направлению подготовки;

– образцы оценочных средств текущего, промежуточного, рубежного контроля и итоговой оценки компетенций выпускников (бакалавров, магистров и специалистов) в соответствии с учебным планом вуза по направлению подготовки.

Во всех случаях ключевые принципы, используемые для создания и использования фонда средств оценки компетенций это:

– валидные контрольные измерительные материалы;

– соответствие содержания материалов уровню и стадии обучения;

– четко сформулированные критерии оценки;

– максимально объективные процедуры и методы оценки;

– высококвалифицированные специалисты-оценщики;

– четко прописанные рекомендации действий по итогам оценки.

Для обработки результатов оценивания используются программно-инструментальные средства автоматизированной обработки оценочных материалов и модели статистических обобщений на массивах оценок: размах оценок, средняя или мода по оценкам каждого из выпускников вузов, факторизация (расслоение) массива аттестуемых по полученным оценкам, обобщенные оценки, мониторинговые сравнения с результатами предыдущих аттестаций и др.

Разработка фонда оценочных средств потребует от разработчиков знаний методик контроля, теории педагогических измерений для выбора вида и содержания контролирующих заданий на разных этапах обучения студентов, умений структурирования содержания учебного материала на основе компетентностного и деятельностного подходов, стандартизации контрольно-оценочных процедур.

Размещено на http://www.allbest.ru/

Приложение 1

ЭКСПЕРТНО-АНАЛИТИЧЕСКИЙ ЛИСТ по анализу и обновлению комплекса оценочных средств итоговой аттестации студентов по ООП

№п/п	Вид оценочного средства (материала)	Использование в действующей ООП	Представлены в проектах ООП в версии 2009 г.	Будут представлены в проектах ООП в версии 2010 г.	Находятся в перспективной разработке	Примечания (комментарии)
1	Оценочные средства
1.1	Фонды монодисциплинарных контрольных заданий
1.2	Фонды полидисциплинарных комплексных контрольных заданий
1.3	Примеры полидисциплинарных комплексных контрольных заданий
1.4	Фонды междисциплинарных комплексных контрольных заданий
1.5	Примеры междисциплинарных комплексных контрольных заданий (по задачам профессиональной деятельности)
1.6	Типовые задания по оценке уровней сформированности профессиональных компетенций
1.7	Примеры контрольных заданий по оценке уровней сформированности профессиональных компетенций
1.8	Типовые задания по оценке уровней сформированности общекультурных компетенций
1.9	Примеры контрольных заданий по оценке уровней сформированности общекультурных компетенций
1.10	Потфолио итоговое
1.11	Кейс измерители
	1.11.1. В электронном виде
	1.11.2. В текстовом виде
1.12	Компетентностные тесты
1.13	Тесты для оценки практической деятельности студентов
1.14	Анкеты
1.15	Интервью
1.16	Собеседование
1.17	Психологические тесты

Таблица может быть продолжена другими видами используемых оценочных средств

Приведите лучшие примеры заданий по оценке уровней сформированности профессиональных компетенций

Приведите лучшие примеры заданий по оценке уровней сформированности общекультурных компетенций



№ п/п	Вид оценочного средства (материала)	Использование в действующей ООП	Представлены в проектах ООП в версии 2009 г.	Будут представлены в проектах ООП в версии 2010 г.	Находятся в перспективной разработке	Примечания (комментарии)
2	Методические материалы
2.1	Методические материалы по оценке уровней сформированности профессиональных компетенций
2.2	Методические материалы по оценке уровней сформированности общекультурных компетенций
2.3	Матрица соответствия компетенций, составных частей ООП и оценочных средств
2.4	Требования к содержанию, объему и структуре ВКР
2.5	Критерии оценки ВКР
2.6	Требования к содержанию и процедуре проведения госэкзамена
2.7	Положение о балльно-рейтинговой системе оценивания

Таблица может быть продолжена другими видами используемых методических материалов.

Приложение 2

______________________________________________________________________

(наименование вуза)

«Утверждаю»

Ректор (декан, директор института)

«……» ________________

СКВОЗНАЯ ПРОГРАММА

промежуточных (поэтапных) комплексных испытаний (аттестаций) студентов на соответствие их подготовки ожидаемым результатам образования компетентностно-ориентированной ООП ВПО

Направление подготовки

Профиль подготовки

Квалификация (степень) выпускника

(бакалавр, магистр, специалист)

Нормативный срок обучения

Форма обучения

(очная, заочная, вечерняя и др.)

г.__________ - 200____ г.

1. ЦЕЛЬ И ЗАДАЧИ ПРОМЕЖУТОЧНЫХ (ПОЭТАПНЫХ) КОМПЛЕКСНЫХ ИСПЫТАНИЙ (АТТЕСТАЦИЙ) СТУДЕНТОВ

2. ОСНОВНОЕ СОДЕРЖАНИЕ ПРОМЕЖУТОЧНЫХ (ПОЭТАПНЫХ) ИСПЫТАНИЙ (АТТЕСТАЦИЙ) СТУДЕНТОВ

[Раскрывается через содержание поэтапных (по курсам обучения) совокупностей ожидаемых результатов образования студентов в компетентностном формате и типов оценочных заданий для выявления уровней сформированности у студентов результатов образования].

2.1. - 2.4 . ОСНОВНОЕ СОДЕРЖАНИЕ КОМПЕТЕНТНОСТНЫХ ИСПЫТАНИЙ (АТТЕСТАЦИЙ) СТУДЕНТОВ

ПО ЗАВЕРШЕНИИКУРСА ОБУЧЕНИЯ ПО ООП (1, 2, 3, 4)

Коды	Совокупность ожидаемых результатов образования студентов в форме компетенций по завершении1курса обучения по ООП ВПО 2, 3, 4	Содержание оценочных заданий для выявления сформированности компетенций у студентов по завершениикурса обучения по ООП ВПО 1, 2, 3, 4
		«Допороговый» уровень сформированности компетенций	«Пороговый» уровень сформированности компетенций	Повышенный (продвинутый) уровень сформированности компетенций
1	2	3	4	5
ОК	ОБЩЕКУЛЬТУРНЫЕ КОМПЕТЕНЦИИ
ОК - 1	P	P	P
…
ОК - …	P	P	P
ПК	ПРОФЕССИОНАЛЬНЫЕ КОМПЕТЕНЦИИ
ПК - 1	P	P	P
…
ПК - …	P	P	P

Примечания:

1) В графе 2 совокупность компетенций, формируемых у студентов по завершении 1-го, 2-го, 3-го или 4-го курсов обучения по ООП ВПО, заполняется на основании компетентностно-формирующей части учебного плана.

2) Под «пороговым» уровнем сформированности компетенции как ожидаемого результата образования понимается уровень освоения компетенции студентами-выпускниками вуза по ООП ВПО, который планируется достичь по отношению ко всем студентам к моменту завершения ими обучения по ООП ВПО в целом.

3) Под «допороговым» уровнем сформированности компетенции понимается такой уровень, который по одному, всем или нескольким существенным признакам уступает «пороговому» уровню и является промежуточным.

4) Под «повышенным/продвинутым» уровнем сформированности компетенции понимается такой уровень, который по одному, всем или нескольким существенным признакам превосходит «пороговый» уровень.

5) По каждой из компетенций (графа 2) графы 3, 4 и 5 заполняются на основании паспорта и программы формирования компетенции и учебного плана.

6) При проектировании содержания оценочных заданий разных уровней рекомендуется использовать таксономии Б. Блума и его последователей, другие международно- или национально-признанные таксономии включая авторские.

7) На основании спроектированного содержания оценочных заданий по каждому курсу обучения формируются фонды оценочных средств для проведения промежуточной аттестации студентов по ООП ВПО.

3. ОСНОВНОЕ СОДЕРЖАНИЕ КОМПЛЕКСНЫХ «ВХОДНЫХ» ИСПЫТАНИЙ СТУДЕНТОВ 1 КУРСА ПЕРЕД НАЧАЛОМ ОСВОЕНИЯ КОМПЕТЕНТНОСТНО-ОРИЕНТИРОВАННОЙ ООП ВПО

Коды	Совокупность ожидаемых результатов обучения студентов в форме компетенций по ООП	Содержание оценочных заданий для выявления сформированности у студентов 1-го курса общекультурных компетенций (ОК) и профессиональной ориентации на получение ВПО по ООП
		«Допороговый» уровень сформированности общекультурной компетенции или профессиональной ориентации	«Пороговый» уровень сформированности общекультурной компетенции или профессиональной ориентации	«Повышенный (продвинутый)» уровень сформированности общекультурной компетенции или профессиональной ориентации
ОК	ОБЩЕКУЛЬТУРНЫЕ КОМПЕТЕНЦИИ
ОК - 1	P	P	P
…
ОК - …	P	P	P
ПК	ПРОФЕССИОНАЛЬНЫЕ КОМПЕТЕНЦИИ
ПК - 1	P	P	P
…
ПК - …	P	P	P

Примечания:

1) При проектировании содержания оценочных заданий разных уровней рекомендуется использовать широко применяемые таксономии Б. Блума и его последователей, другие международно- или национально-признанные, включая авторские таксономии.

2) После проведения комплексных «входных» испытаний студентов 1 курса перед началом освоения ООП с использованием разработанных типов оценочных заданий может потребоваться уточнение содержания и основных признаков «порогового» и «продвинутого» уровней сформированности компетенций.

3) На основании разработанного содержания оценочных заданий формируется фонд оценочных средств для проведения «входной» аттестации.

4. ФОРМЫ ПРОВЕДЕНИЯ ПРОМЕЖУТОЧНЫХ (ПОЭТАПНЫХ) КОМПЛЕКСНЫХ ИСПЫТАНИЙ (АТТЕСТАЦИИ) СТУДЕНТОВ ПО ООП

(Например, публичная презентация-защита индивидуального доклада-отчета студентом перед аттестационной комиссией и коллективом своей студенческой учебной группы / потока на основании портфолио студента и индивидуального мониторинга качества результатов образования).

5. УЧЕБНО-МЕТОДИЧЕСКОЕ И ИНФОРМАЦИОННОЕ ОБЕСПЕЧЕНИЕ ПРОМЕЖУТОЧНЫХ (ПОЭТАПНЫХ) КОМПЛЕКСНЫХ ИСПЫТАНИЙ (АТТЕСТАЦИЙ) СТУДЕНТОВ ПО ООП ВПО

а) основная литература ;

б) дополнительная литература ;

в) программное обеспечение и Интернет-ресурсы .

Документ составлен в соответствии с требованиями ФГОС ВПО с учетом рекомендаций ПрООП ВПО по направлению и профилю подготовки .

Автор(ы)

Рецензент(ы)

Документ одобрен на заседании

(Наименование уполномоченного органа вуза (УМК, НМС, Ученый совет)

от ___________ года, протокол № ________.

Размещено на http://www.allbest.ru/

Размещено на http://www.allbest.ru/

Приложение 3

_____________________________________________________________

_____________________________________________________________

(наименование вуза)

«Утверждаю»

Ректор

(декан, директор института)

«……» __________________

ПРОГРАММА итоговых комплексных испытаний (итоговой государственной аттестации) студентов-выпускников вуза на соответствие их подготовки ожидаемым результатам образования компетентностно-ориентированной ООП ВПО

Направление подготовки

Профиль подготовки

Квалификация (степень) выпускника

(бакалавр, магистр, специалист)

г.__________ - 200____ г.

1. ЦЕЛЬ И ЗАДАЧИ ИТОГОВЫХ КОМПЛЕКСНЫХ ИСПЫТАНИЙ (ИТОГОВОЙ ГОСУДАРСТВЕННОЙ АТТЕСТАЦИИ) СТУДЕНТОВ-ВЫПУСКНИКОВ ВУЗА

2. ОСНОВНОЕ СОДЕРЖАНИЕ ИТОГОВЫХ КОМПЛЕКСНЫХ ИСПЫТАНИЙ (ИТОГОВОЙ ГОСУДАРСТВЕННОЙ АТТЕСТАЦИИ) СТУДЕНТОВ-ВЫПУСКНИКОВ ВУЗА

[Содержание итоговых комплексных испытаний базируется на компетенциях выпускника вуза как совокупного ожидаемого результата образования по ООП ВПО.

Установленная совокупность итоговых комплексных испытаний должна позволять оценить соответствие подготовки студентов-выпускников вуза совокупному ожидаемому результату образования по ООП ВПО.]

2.1. Содержание выпускной квалификационной работы (ВКР) студента-выпускника вуза и ее соотнесение с совокупным ожидаемым результатом образования в компетентностном формате по ООП ВПО в целом

Коды	Компетенции выпускника вуза как совокупный ожидаемый результат по завершении обучения по ООП ВПО	Совокупность заданий, составляющих содержание выпускной квалификационной работы студента-выпускника вуза по ООП ВПО (Даются содержательные формулировки заданий)
		Задание 1	Задание 2	…	Задание NВКР
1	2	3
ОК	ОБЩЕКУЛЬТУРНЫЕ КОМПЕТЕНЦИИ
ОК - 1	P	P	P
…
ОК - …	P	P	P
ПК	ПРОФЕССИОНАЛЬНЫЕ КОМПЕТЕНЦИИ
ПК - 1	P	P	P
…
ПК - …	P	P	P

2.2. Содержание итогового государственного экзамена (ИГЭ) и его соотнесение с совокупным ожидаемым результатом образования в компетентностном формате по ООП ВПО в целом

Коды	Компетенции выпускника вуза как совокупный ожидаемый результат по завершении обучения по ООП ВПО (см. Приложение 1)	Совокупность оценочных заданий, составляющих содержание итогового государственного экзамена (Даются содержательные формулировки каждого из оценочных заданий)
		Задание 1	Задание 2	…	Задание NИГЭ
1	2	3
	Общекультурные компетенции (ОК)
ОК - 1	P	P	P
…
ОК - n	P	P	P
	Профессиональные компетенции (ПК)
ПК - 1	P	P	P
…
ПК - n	P	P	P

2.3. Содержание других видов итоговых комплексных испытаний (в рамках итоговой государственной аттестации), установленных Ученым советом вуза для выпускников ООП ВПО по направлению подготовки

_____________________________________________________________

(если таковые установлены)

3. ФОРМЫ ПРОВЕДЕНИЯ ИТОГОВЫХ КОМПЛЕКСНЫХ ИСПЫТАНИЙ (ИТОГОВОЙ ГОСУДАРСТВЕННОЙ АТТЕСТАЦИИ) СТУДЕНТОВ-ВЫПУСКНИКОВ ВУЗА НА СООТВЕТСТВИЕ ИХ ПОДГОТОВКИ ОЖИДАЕМЫМ РЕЗУЛЬТАТАМ ОБРАЗОВАНИЯ КОМПЕТЕНТНОСТНО-ОРИЕНТИРОВАННОЙ ООП

[Например, итоговый государственный экзамен рекомендуется проводить в форме публичной презентации-защиты индивидуального доклада-отчета студента-выпускника перед государственной аттестационной комиссией (ГАК) о соответствии его подготовки совокупному ожидаемому результату образования компетентностно-ориентированной ООП ВПО в целом на основании портфолио студента и индивидуального мониторинга качества результатов образования].

4. УЧЕБНО-МЕТОДИЧЕСКОЕ И ИНФОРМАЦИОННОЕ ОБЕСПЕЧЕНИЕ ИТОГОВЫХ КОМПЛЕКСНЫХ ИСПЫТАНИЙ (ИТОГОВОЙ ГОСУДАРСТВЕННОЙ АТТЕСТАЦИИ) СТУДЕНТОВ-ВЫПУСКНИКОВ ВУЗА

а) основная литература ________________________________________;

б) дополнительная литература __________________________________;

в) программное обеспечение и Интернет-ресурсы __________________.

Документ составлен в соответствии с требованиями ФГОС ВПО с учетом рекомендаций ПрООП ВПО по направлению и профилю подготовки.

Автор(ы) _____________________________________________________

Рецензент(ы) _________________________________________________

Документ одобрен на заседании _________________________________

(Наименование уполномоченного органа вуза (УМК, НМС, Ученый совет)

от ___________ года, протокол № ________.

Сведения об авторах

ЕФРЕМОВА - профессор кафедры педагогических измерений.

Надежда Федоровна - исследователь образовательного центра проблем качества подготовки специалистов НИТУ «МИСиС», доктор педагогических наук, профессор

КАЗАНОВИЧ - Ученый секретарь Исследовательского центра проблем

Виктор Григорьевия - качества подготовки специалистов НИТУ «МИСиС», кандидат педагогических наук, доцент

Учебное издание

Н.Ф. Ефремова, В.Г. Казанович

ОЦЕНКА КАЧЕСТВА ПОДГОТОВКИ ОБУЧАЮЩИХСЯ В РАМКАХ ТРЕБОВАНИЙ ФГОС ВПО:

Создание фондов оценочных средств для аттестации студентов вузов при реализации компетентностно-ориентированных ООП ВПО нового поколения

Установочные организационно-методические материалы тематического семинарского цикла

Руководители тематического семинарского цикла доктор педагогических наук, профессор В.И. Звонников доктор педагогических наук, профессор М.Б. Челышкова

Компьютерная верстка: М.В. Королевой, С.В. Лилло

Ответственные за выпуск: В.Г. Казанович, Г.М. Дмитриенко, Н.М. Амбросимова, Т.А. Подкопаева.

Подписано в печать 18.05.2010 Бумага «Снегурочка». Формат 60х84/16. Гарнитура Times New Roman.

Усл. печ. л. 2,09. Тираж 300 экз. Заказ № 988.

Издательство: Исследовательский центр проблем качества подготовки специалистов,

105318, Москва, Измайловское шоссе, 4.

тел. (499) 369-42-83, 369-42-84, fax: (499) 369-58-13

E-mail: rc@rc.edu.ru

Размещено на Allbest.ru