Автоматизация контроля результатов обучения учащихся

Размещено на http://www.allbest.ru/

1

Размещено на http://www.allbest.ru/

Тема курсовой работы: «Автоматизация контроля результатов обучения учащихся»

The theme of the course work: "Automation of the control of learning outcomes of students"

Студент: Нигматуллина Гузелия Вакилевна

Руководитель: Варфоломеева Татьяна Николавена,

к.п.н, доцент кафедры бизнесинформатики

и информационных технологий

Оглавление

Введение

§1. Традиционные и инновационные средства контроля знаний учащихся

§2. Особенности использования автоматизированного контроля знаний учащихся

§3. Анализ тестовых оболочек

§4. Создание теста в тестовой оболочке My Test

Заключение

Список использованной литературы

Приложение

Введение

Оценка качества обучения на сегодняшний день относится к одной из самых актуальных проблем в сфере образования. С одной стороны, требуются большие временные затраты, с другой стороны, необходимость анализа полученных данных и сокращение этапа реагирования на полученные результаты. Необходимо заранее оговорить пределы, при превышении которых следует принимать управленческие меры по изменению качества образования. Многие из тех, кто оценивает качество образования, проводят эту длительную процедуру только для получения самого результата, но не осуществляют никакой обратной связи. Поэтому очень важно рассчитать затраты на проведение оценки качества образования и соотнести их с конечным результатом, который хочет получить в итоге образовательное учреждение.

Проблема отечественной педагогической диагностики активно развивается уже с 80-90-х годов. Одной из линий синтеза данной области является связь с математическими методами и информационными технологиями.

В ведущих странах мира компьютерное тестирование пользуется заслуженным доверием и имеет широкую область применения в таких сферах как международные сравнительные исследования, мониторинг качества образования в масштабах страны, лицензирование и государственная аккредитация учебных заведений, аттестация учащихся и студентов, учителей и преподавателей, проверка профессиональной пригодности специалистов и т.д.

В последние годы в России в сфере образования наблюдается усиление интереса к автоматизации различных видов учебной и административной деятельности. В процессе обучения, прежде всего это коснулось информатизации контроля результатов обучения. Самым популярным видом такого контроля является тестирование, основанное на диалоге информационной системы и пользователя. Рост быстродействия технических средств, уменьшение цен на вычислительную технику, появление качественных и мощных систем программирования увеличило потребность в системах, позволяющих объективно, быстро и надежно оценивать знания учащихся, предлагая интересные формы взаимодействия с ними.

Проведение контроля достижения результатов обучения с использованием современных средств информационных технологий в процессе обучения по сравнению с другими методами контроля имеет ряд очевидных преимуществ, в числе которых: высокая степень стандартизации, объективность оценки результатов, удобная количественная форма выражения результатов, повышенная устойчивость к фальсификациям, высокая скорость обработки результатов, единство требований ко всем учащимся, исключение субъективизма при оценке результатов.

При этом удобство в наличии количественных показателей выражается в возможности сравнения знаний и умений одних обучаемых с другими, или отслеживании динамики усвоения знаний одним учащимся в процессе обучения.

Таким образом, возникают противоречия между:

наличием средств компьютеризации образования, позволяющих уменьшить непроизводительные затраты живого труда преподавателей и сохранением традиционных форм контроля знаний, обусловленных методическим потенциалом педагогов старшего поколения;

возможностью предоставления учащимся широких возможностей свободного выбора собственной траектории обучения в процессе получения образования с возможностью самоконтроля полученных знаний и использованием традиционной классно-урочной формы обучения.

Все вышесказанное свидетельствует об актуальности выбранной темы исследования: «Автоматизация контроля результатов обучения учащихся».

Цель исследования - изучить современные средства контроля результатов обучения.

Объект исследования - система обучения в общеобразовательной школе.

Предмет исследования - использование средств информационных технологий в процессе оценки результатов обучения.

Для достижения цели исследования нами были поставлены следующие

задачи:

Провести сравнительный анализ традиционных и инновационных

средств контроля результатов обучения.

Рассмотреть особенности использования автоматизированного контроля результатов обучения.

Выполнить сравнительный анализ инструментальных средств создания компьютерных тестов.

Изучить работу инструментального средства My Test и разработать алгоритм составления компьютерных тестов.

Курсовая работа состоит из введения, заключения и литературы, приложения, четырех параграфов, где приводится теоретическое обоснование и практическое применение компьютерного контроля результатов обучения как одного из звеньев учебного процесса.

§1. Традиционные и инновационные средства контроля знаний учащихся

В современной педагогической практике используют следующие виды контроля знаний:

предварительный;

текущий;

рубежный (периодический);

итоговый.

Основанием для выделения этих видов контроля является специфика дидактических задач на разных этапах обучения: текущий контроль проводят в процессе усвоения нового учебного материала, рубежный применяют для проверки усвоения значительного объема изученного материала (темы, раздела); с помощью итогового контроля выявляют степень овладения учебным материалом по предмету, ряду дисциплин (на экзаменах). Таким образом, все эти виды в какой-то степени повторяют логику учебного процесса.

Предварительный контроль служит необходимой предпосылкой для успешного планирования и руководства учебный процессом. Он позволяет определить наличный (исходный) уровень знаний и умений учащихся, чтобы использовать его как фундамент, ориентироваться на допустимую сложность учебного материала. На основании данных предварительного контроля, проводимого в начале года, учитель вносит коррективы в календарно-тематический план, определяет, каким разделам учебной программы следует уделить больше внимания на занятиях с конкретным классом, намечает пути устранения выявленных проблем в знаниях учащихся.[2]

Предварительным контролем фиксируется исходный уровень обученности. Сравнение исходного начального уровня обученности с конечным позволяет измерить «прирост» знаний, степень сформированности умений и навыков. На основание данных предварительного контроля, проводимого в начале года, учитель вносит коррективы в календарно - тематическое планирование, определяет каким разделом учебной программы следует уделить больше внимания на уроках с конкретным классом, намечает пути устранения выявленных проблем в знаниях учащихся.

Текущий контроль - основной вид проверки знаний учащихся. Его основной задачей является регулярное управление учебной деятельностью студентов и ее корректировка. Он позволяет получать первичную информацию о ходе и качестве усвоения учебного материала, а также стимулировать регулярную, напряженную и целенаправленную работу студентов. [5]

Текущий контроль должен занимать небольшую часть учебного занятия, чтобы не приводить к спешке при изложении нового материала и закреплении полученной информации. Нельзя допускать больших интервалов в контроле каждого учащегося. В этом случае учащиеся перестают регулярно готовится к занятиям, а, следовательно, и систематически закреплять пройденный материал.

Результаты прогноза используют для создания модели дальнейшего поведения учащегося, допускающего сегодня ошибки данного типа или имеющего определенные проблемы в системе знаний, умений и навыков познавательной деятельности. Диагностика помогает получить достоверные выводы для дальнейшего планирования и осуществления учебного процесса.

Периодический контроль позволяет определить качество изучения учащимися учебного материала по разделам, темам предмета. Такой контроль проводят обычно несколько раз в год. Примером рубежного контроля могут служить контрольные работы, контрольно-учетные и учетно-обобщающие уроки. Периодический контроль позволяет проверить прочность усвоения полученных знаний и приобретенных умений, так как он проводится через продолжительный период времени и не по отдельным дозам учебного материала. С помощью периодического контроля обобщается и усваивается целый раздел (тема), выявляются логические взаимосвязи с другими разделами, другими предметами. Рубежный контроль охватывает учащихся всего класса и проводится в виде устного опроса, небольших письменных, компьютерного и простого тестирования, практических работ. Проведение его обычно предусматривается в календарно-тематических планах.[17]

Итоговый контроль направлен на проверку конкретных результатов обучения, выявление степени овладения учащимися системой знаний, умений и навыков, полученных в процессе изучения отдельного предмета или ряда дисциплин. Итоговый контроль - это контроль интегрирующий, именно он позволяет судить об общих достижениях учащихся. При подготовке к нему происходит более углубленное обобщение и систематизация усвоенного материала, что позволяет знания и умения поднять на новый уровень. При систематизации и обобщении знаний и умений учащихся проявляется в большей степени и развивающий эффект обучения, поскольку на этом этапе особенно интенсивно формируются интеллектуальные умения и навыки.[5]

В учебной деятельности учащихся необходимо различать теоретические знания с практическими навыками работы. В качестве основных (традиционных) методов проверки теоретических знаний можно использовать устный опрос, письменную проверку, самостоятельную работу, контрольную работу, тестирование, лабораторную работу.

Устный опрос как контроль знаний студентов осуществляется в виде фронтальной и индивидуальной проверки. При фронтальном опросе за короткое время проверяется состояние знаний студентов всей группы по определенному вопросу или группе вопросов. Эта форма проверки используется для того, чтобы выяснить готовность группы к изучению нового материала; определить сформированность понятий; проверить домашние задания; поэтапно или окончательно проверить учебный материал, только что разобранный на занятии.

Индивидуальный устный опрос позволяет выявить правильность ответа по содержанию, его последовательность, самостоятельность суждений и выводов, степень развития логического мышления, культуру речи студентов. Эта форма применяется для текущего и тематического учета, а также для отработки и развития экспериментальных умений студентов. Причем устную проверку считают эффективной, если она направлена на выявление осмысленности восприятия знаний и осознанности их использования, если она стимулирует самостоятельность и творческую активность студентов.

Устный опрос осуществляется на каждом занятии, хотя оценивать знания студентов не обязательно. Главным в контроле знаний является определение проблемных мест в усвоении учебного материала и фиксирование внимания студентов на сложных понятиях, явлениях, процессах. В процессе устного опроса можно использовать коллективную работу группы, наиболее действенными приемами, которой являются: обращение с вопросом ко всей группе; конструирование ответа; рецензирование ответа; оценка ответа и ее обоснование; постановка вопросов студентов самими студентами; взаимопроверка; самопроверка.

Письменный контроль позволяет за короткое время проверить знания большого числа студентов одновременно. Используется письменный контроль знаний студентов в целях диагностики умения применять знания в учебной практике и осуществляется в виде диктантов, контрольных, проверочных и самостоятельных работ, тестов, рефератов.

Самостоятельная работа. Традиционная форма контроля знаний, которая по своему назначению делится на обучающую самостоятельную работу и контролирующую. Самостоятельная работа творческого характера позволит не только проверить определенные знания, умения, но и развивать творческие способности студентов. Самостоятельная работа является необходимым этапом любой темы. Как правило, она проводится после коллективного решения или обсуждения задач новой темы и обязательно предшествует контрольной работе по этой теме. Работа выполняется без помощи студентов.

Контрольная работа. Контрольные работы проводятся с целью определения конечного результата в обучении по данной теме или разделу, контролировать знания одного и того же материала неоднократно. Целесообразно проводить контрольные работы различного вида. С помощью промежуточной контрольной работы преподаватель проверяет усвоение студентами материала в период изучения темы. Итоговая контрольная работа проводится с целью проверки знаний и умений студентами по отдельной теме, курсу. Домашняя контрольная работа дается 1-2 раза в учебном году. Она призвана систематизировать знания, позволяет повторить и закрепить материал. При ее выполнении студенты не ограничены временем. Каждому студенту дается свой вариант работы, в который включаются творческие задания для формирования разносторонней развитой личности.

Лабораторная работа - достаточно необычная форма контроля, она требует от студентов не только наличия знаний, но еще и умений применять эти знания в новых ситуациях, сообразительности. Лабораторная работа активизирует познавательную деятельность студентов, т.к. от работы с ручкой и тетрадью студентов переходят к работе с компьютерами. Используется лабораторная работа для закрепления определенных навыков с программными средствами, когда кроме алгоритмических предписаний в задании студентов может получать консультации преподавателя. Так как лабораторная работа может проверить ограниченный круг деятельности, ее целесообразно комбинировать с такими формами контроля, как диктант или тест.

Тест. Традиционные формы контроля недостаточно оперативны, и для их осуществления требуется значительное время, поэтому возникает необходимость в новых видах проверки знаний. Распространение контролирующих устройств способствовало тому, что студенты все чаще и чаще при проверке знаний стали обращаться к заданиям с выборочными ответами, к тестам. Тест представляет собой кратковременное технически сравнительно просто составленное испытание, проводимое в равных для всех испытуемых условиях и имеющее вид такого задания, решение которого поддается качественному учету и служит показателем степени развития к данному моменту известной функции у данного испытуемого.

Различают следующие виды тестов:

избирательные тесты;

закрытые тесты;

тесты перекрестного выбора; ? тесты идентификации.

Избирательный тест состоит из системы заданий, к каждому из которых прилагаются как верные, так и неверные ответы. Из них студент выбирает тот, который считает верным для данного вопроса. При этом неверные ответы содержат такую ошибку, которую студент может допустить, имея определенные пробелы в знаниях.

Избирательные тесты могут быть различными:

Многовариантные тесты, в которых среди предлагаемых ответов на вопрос приведено несколько неверных и единственный верный ответ.

Многовариантные тесты с несколькими верными и неверными ответами на вопрос.

Альтернативные тесты с двумя ответами на вопрос (один ответ верен, другой - содержит ошибку).

Закрытые тесты не содержат вариантов ответов. Студенты предлагают свой вариант ответа. Имеются тесты перекрестного выбора, в которых требуется установить соответствие между элементами множества ответов. Встречаются также тесты идентификации, в которых в качестве ответов приводятся графики, схемы, чертежи и т.д.[13]

Тестирование является стандартизированной формой контроля в том понимании, что как процедура проведения теста, так и оценка знаний стандартны для всех студентов.

По сравнению с другими формами контроля знаний тестирование имеет свои достоинства и недостатки.

Достоинства:

Тест является наиболее качественным и объективным способом оценивания, объективность достигается путем стандартизации процедуры проведения, проверки показателей качества заданий и тестов целиком.

Тестирование ставит всех учащихся в равные условия, как в процессе контроля, так и в процессе оценки, практически исключая субъективизм преподавателя.

Тесты это более объёмный инструмент, поскольку тестирование может включать в себя задания по всем темам курса, в то время как на устный экзамен обычно выносится 2-4 темы, а на письменный -- 3-5. Это позволяет выявить знания учащегося по всему курсу, исключив элемент случайности при вытаскивании билета. При помощи тестирования можно установить уровень знаний учащегося по предмету в целом и по отдельным его разделам.

Тест это более точный инструмент, так, например, шкала оценивания теста из 20 вопросов, состоит из 20 делений, в то время, как обычная шкала оценки знаний -- только из четырёх.

Тестирование -- это более мягкий инструмент, они ставят всех учащихся в равные условия, используя единую процедуру и единые критерии оценки, что приводит к снижению предэкзаменационных нервных напряжений.[16] Недостатки:

Разработка качественного тестового инструментария -- длительный, трудоемкий и дорогостоящий процесс. Стандартные наборы тестов для большинства дисциплин ещё не разработаны, а разработанные обычно имеют очень низкое качество.

Данные, получаемые преподавателем в результате тестирования, хотя и включают в себя информацию о пробелах в знаниях по конкретным разделам, но не позволяют судить о причинах этих пробелов.

Тест не позволяет проверять и оценивать высокие, продуктивные уровни знаний, связанные с творчеством, то есть вероятностные, абстрактные и методологические знания.

Широта охвата тем в тестировании имеет и обратную сторону. Учащийся при тестировании, в отличие от устного или письменного экзамена, не имеет достаточно времени для сколько-нибудь глубокого анализа темы.

Обеспечение объективности и справедливости теста требует принятия специальных мер по обеспечению конфиденциальности тестовых заданий. При повторном применении теста желательно внесение в задания изменений. [11]

Сегодня в качестве инновационных средств используют модульную и рейтинговую системы оценки качества знаний, мониторинг качества, учебные портфолио, компьютерное тестирование.

Модульная система имеет целью поставить учеников перед необходимостью регулярной учебной работы в течение всего учебного года.

Рейтинговая система позволяет преодолеть многие недостатки традиционной четырехбалльной системы и достаточно дифференцировано оценить успехи каждого учащегося.

Рейтинг учащегося - это индивидуальный числовой показатель интегральной оценки достижений в учебе, образуемый путем сложения рейтинговых баллов, полученных в результате оценки отдельных учебных действий, по возможности с учетом коэффициента значимости(«весового» коэффициента) этих действий в достижении образовательных целей. Обычно под рейтингом понимается «накопленная оценка» или «оценка, учитывающая предысторию». В вузовской практике рейтинг - это некоторая числовая величина, выраженная, как правило, по многобалльной шкале (например, 20-балльной или 100-балльной) и интегрально характеризующая успеваемость и уровень знания студента по одному или нескольким предметам в течение определенного периода обучения (семестр, год и т.д.).[3]

Данная система дает возможность:

определить уровень подготовки каждого обучающегося на каждом этапе учебного процесса;

отслеживать объективную динамику усвоения знаний не только в

течение учебного года, но и за все время обучения;

дифференцировать значимости оценок, полученных обучающимися за выполнение различных видов работы (самостоятельная работа, текущий, итоговый контроль, домашняя, творческая и др. работы);

отражать текущей и итоговой оценкой количество вложенного

студентом труда;

повысить объективность оценки знаний.

Мониторинг. В последнее время вместо традиционного понятия «контроль», кроме понятия «диагностика» все чаще стали использовать понятие «мониторинг».

Под мониторингом в системе «педагог - обучающийся» понимается совокупность контролирующих и диагностирующих мероприятий, обусловленных целеполаганием процесса обучения и предусматривающих в динамике уровни усвоения учащимися материала и его корректировку.[6]

Другими словами, мониторинг - это непрерывные контролирующие действия в системе «педагог - обучающийся», позволяющие наблюдать и, по мере необходимости, корректировать продвижение обучаемого от незнания к знанию. Мониторинг - это регулярное отслеживание качества усвоения знаний и формирования умений в учебном процессе.

В педагогической науке выделяют шесть функций мониторинга

Таблица 1 - функции педагогического мониторинга

экспертная	осуществление экспертизы состояния, концепций, форм, методов развития системы образования
информационная	регулярное получение информации о состоянии и развитии системы образования
экспериментальная	поиск и разработка диагностических материалов и апробация их на валидность, технологичность, надежность
образовательная	изучение и удовлетворение образовательных потребностей педагогов по проблемам контрольно-оценочной деятельности

В процессе мониторинга выявляются тенденции в развитии системы образования, соотнесенные во времени, а также последствия принимаемых решений. Иначе говоря, в рамках мониторинга проводится выявление и оценивание проведенных педагогических действий. При этом обеспечивается обратная связь, осведомляющая о соответствии фактических результатов деятельности педагогической системы ее конечным целям.

Описание любой системы мониторинга должно предполагать выяснение следующих моментов:

название модели мониторинга;

краткое описание способа применения методики;

контекст модели (где и при каких условиях модель эффективна);

внутренние возможности оптимизации модели;

управление (указания по разработке и внедрению методики);

требования, предъявляемые к студентам, задействованным в проведении системы мониторинга;

требования к материально-техническому обеспечению учебного заведения, на базе которого будет применяться разработанная система;

интегративная модель оценивания (указания по использованию текущих оценок на промежуточной или итоговой аттестации);

принципиальные преимущества и недостатки модели.[10]

Учебное портфолио. В наиболее общем понимании учебное портфолио представляет собой форму и процесс организации (коллекция, отбор и анализ) образцов и продуктов учебно-познавательной деятельности обучаемого, а также соответствующих информационных материалов из внешних источников (от одноклассников, учителей, родителей, тестовых центров, общественных организаций...), предназначенных для последующего их анализа, всесторонней количественной и качественной оценки уровня обученности данного учащегося и дальнейшей коррекции процесса обучения.[5]

Основная задача состоит в том, чтобы проследить динамику учебного прогресса. Нет четкого списка наименований и количества пунктов, которые необходимо включать в учебное портфолио; это полностью зависит от конкретного учителя, группы учителей или методической комиссии.

Состав учебного портфолио напрямую зависит от конкретных целей обучения данному предмету.

Компьютерное тестирование. Самым популярным видом инновационного контроля знаний является компьютерное тестирование.

Компьютерное тестирование - разновидность тестирования, проводимого с использованием средств вычислительной техники.[15]

Компьютерное тестирование имеет определенные преимущества по сравнению с традиционным бланковым тестированием.

Преимущество компьютерного тестирования:

оценивание результатов тестирования осуществляется мгновенно, автоматически фиксируется и сохраняется на длительное время;

возможность формирования достаточно большого количества вариантов теста, которое ограничено лишь размером банка тестовых заданий;

возможность реализации удобных процедур ввода, модификации

тестовых материалов;

возможность формирования тестов, различных по уровню обученности испытуемых;

возможность управления как содержанием теста, так и стратегией проверок в ходе тестирования;

отсутствует необходимость в бумажных носителях и листах ответа,

при компьютерном тестировании легко ввести временные ограничения или временное отслеживание процесса тестирования, что трудноосуществимо при бумажном тестировании; это позволяет учитывать психомоторные аспекты тестируемого;

повышается эффективность тестирования: уменьшается время тестирования (до 50% по сравнению с бумажной формой тестирования) для достижения того же уровня надежности оценивания, что ведет к уменьшению усталости тестируемого во время сеанса, что также является важным показателем в результатах тестируемых.

Все вышеперечисленные преимущества достижимы лишь при правильной организации технологии компьютерного тестирования, что позволяет выполнять тест несколько раз в индивидуальном режиме и с осуществлением самоконтроля, потому что тестовые задания и их очередность постоянно меняются, а результаты можно увидеть сразу после выполнения студентом теста.

Помимо неоспоримых достоинств компьютерное тестирование имеет ряд недостатков:

негативные психологические реакции испытуемых на компьютерное предоставление тестов;

воздействие на результаты учащихся предшествующего опыта работы на компьютере;

влияние интерфейса на результаты тестирования;

влияние ограничений при компьютерном предъявлении теста на

надежность его результатов.

Положительные стороны в применении электронных тестов:

возможность проверки усвоения учащимися каждой темы или предмета;

осуществление оперативной диагностики уровня усвоения учебного материала каждым учеником;

обеспечение одновременной проверки знаний учащихся всей группы и формирование у них мотивации для подготовки к каждому уроку; ? повышение интереса к предмету;

экономия учебного времени.

Отрицательные стороны в применении электронных тестов:

тестовый контроль не способствует развитию устной и письменной речи учащихся;

выбор ответа может происходить наугад, учителю невозможно

проследить логику рассуждений учащихся.

Изучение традиционных и инновационных средств контроля знаний учащихся позволило выявить основные виды контроля знаний, определить своевременность использования каждого вида контроля и его влияние на итоговую оценку успеваемости. Анализ различных форм оценки результатов обучения позволил сделать вывод, что тесты наиболее приспособлены для автоматизации контроля знаний учащихся.

контроль знание автоматизированный тестовый

§2. Особенности использования автоматизированного контроля знаний учащихся

Применение компьютеров в учебном процессе как средство контроля качества знаний получает все большее распространение. Как показывает практика, при должной научно-методической подготовке автоматизация контроля позволяет заметно повысить, прежде всего, индивидуальность самого контроля, варьировать его в зависимости от способностей и образовательных ценностей учащихся. С применением компьютера контроль качества знаний учащихся перестает быть фронтальным, обретает признаки индивидуального подхода, учитывающего не только знания, но индивидуальный темп обучения. Кроме того, автоматизированный контроль повышает объективность самого контроля, позволяет оценивать качество знаний не только «в общем и целом», но обеспечивает количественную оценку качества усвоения того или иного раздела учебного курса. Еще одним важным аспектом применения автоматизированного контроля, как показала практика, становится стимулирование и мотивирование учащихся к самообразовательной деятельности. При условии соблюдения должных дидактических правил, методы автоматизированного контроля предоставляют информацию о качестве знаний не только преподавателю, но и самим учащимся.

Эти дидактические возможности средств компьютерного автоматического контроля качества знаний актуализировали многочисленные исследования данной проблематики. В результате в последние годы получили надлежащие освещение в научной литературе различные аспекты автоматизации контроля качества с помощью компьютера: дидактические, методические, технологические, программные и т.д.

Однако быстрое совершенствование средств вычислительной техники, расширение их возможностей, как технических (скорость вычислений, быстродействие, объем памяти и т.д.), так и программных приводят к расширению их дидактических и методических возможностей. Практически это означает, что, несмотря на многочисленные публикации по проблеме организации автоматизированного контроля, научная исследованность проблемы по-прежнему не является исчерпывающей.

Расширение технических возможностей, появление новых программных средств позволяют постоянно совершенствовать формы и методы организации автоматического контроля качества знаний учащихся.

В настоящее время все более широкое распространение получают контролирующие программы с обратной связью, опирающиеся на применение звука, изображений (динамичных и статичных), флэш-презентенций и даже 3Dграфики.

Такое развитие вычислительной техники расширяет не только дидактические возможности автоматизации, но и само поле его применения от учебных курсов естественных и точных дисциплин к учебным курсам гуманитарного и социального содержания.

При этом, как показывает опыт, системное, научно обоснованное использование автоматизированного контроля качества знаний повышает образовательную эффективность контроля более чем в два раза.

Среди причин, оказывающих влияние на эффективность контроля, особую роль играет фактор времени. Психологами установлено, что оценка полезности результата деятельности убывает в соответствии с квадратом времени его достижения - чем отдаленнее время достижения результата, тем менее привлекательным является сам результат. Поэтому отсрочка поощрения или наказания за успешный или плохой результат учебной деятельности снижает эффективность этих мер воздействия. Это условие имеет исключительное значение в области обучения и воспитания, в частности, в практике применения педагогической оценки. Другими словами, результат контроля качества знаний должен быть доступен обучающемуся незамедлительно, прямо после выполнения оцениваемой работы. [9]

Тестирование обучающихся «на входе» с составлением и сопоставлением рейтинговых параметров способствует актуализации и мотивации их в течение всего обучения. Например, заранее сделанное объявление о том, что в конце семестра будет подведен общий итог и определен рейтинг каждого, вносит в учебный процесс элемент состязательности и соревновательности, которая стимулирует Ясостояние структуры человеческой психики к проявлению спонтанной активности и творчества. Вовлечение студентов в борьбу за достижение наилучших результатов в учебе поднимает отстающих на уровень передовых, стимулирует развитие творческой активности, инициативы, новаторских починов, ответственности и коллективизма.

Применяемая нами автоматизированная система контроля качества знаний предусматривает составление тестов достижений по каждой дисциплине, в том числе в виде произвольной или дробной пятибалльной шкалы.

Компьютерное тестирование может проводиться в различных формах, различающихся по технологии объединения заданий в тест. Представлено на рисунке 1.

Рисунок 1 - Формы компьютерного тестирования

Первая форма - самая простая. Готовый тест, стандартизованный или предназначенный для текущего контроля, вводится в специальную оболочку, функции которой могут различаться по степени полноты. Обычно при итоговом тестировании оболочка позволяет предъявлять задания на экране, оценивать результаты их выполнения, формировать матрицу результатов тестирования, обрабатывать ее и шкалировать первичные баллы испытуемых путем перевода в одну из стандартных шкал для выдачи каждому испытуемому тестового балла и протокола его оценок по заданиям теста.

Вторая форма компьютерного тестирования предполагает автоматизированную генерацию вариантов теста, осуществляемую с помощью инструментальных средств. Варианты создаются перед тестированием или непосредственно во время его проведения из банка калиброванных тестовых заданий с устойчивыми статистическими характеристиками. Калибровка достигается благодаря длительной предварительной работе по формированию банка, параметры заданий которого получают на репрезентативной выборке учащихся, как правило, на протяжении 3-4 лет с помощью бланковых тестов. Содержательная валидность и параллельность вариантов обеспечиваются за счет строго регламентированного отбора заданий каждого варианта в соответствии со спецификацией теста.

Третья форма - компьютерное адаптивное тестирование - базируется на специальных адаптивных тестах. В основе идей адаптивности лежат соображения о том, что учащемуся бесполезно давать задания теста, которые он выполнит наверняка правильно без малейших затруднений или гарантированно не справится с ними в силу высокой трудности. Поэтому предлагается оптимизировать трудность заданий, адаптируя ее к уровню подготовленности каждого испытуемого, и сократить за счет исключения части заданий длину теста.[14]

Компьютерное тестирование как форму педагогического контроля целесообразно применять для организации контроля таких уровней усвоения как узнавание, воспроизведение и понимание, и таких видов знаний, как знание понятий, терминов и фактов. По Б.С. Блуму - это чаще всего уровни знание, понимание, синтез, оценка, применение, анализ.

Блок знание - уровень запоминания и воспроизведения материала любого уровня сложности (факты, понятия, правила, черты, признаки и т.д.). Целью уровня является то, что ученик воспроизводит термины, знает конкретные правила, понятия, факты и т.д.

Блок понимание - уровень усвоения материала и способность к его преобразованию и интерпретации. Здесь ученик понимает факты, правила, интерпретирует схемы, графики. На основе имеющихся данных предположительно характеризует будущие последствия.

Блок синтез - умение объединить элементы в новое целое. В данном блоке ученик выполняет творческую работу, предлагает план проведения какого-либо эксперимента, использует знания из нескольких областей.

Это творческая переработка информации для создания нового целого.

Блок оценка - умение оценить качество и знание материала на основе критериев, разработанных учеником или данных учителем. Ученик может выделять критерии и следовать им, видит многообразие критериев, оценивает соответствие выводов имеющимся данным, проводит различия.

Блок применение - умение применять правила, теории, методы в конкретных ситуациях и в новых условиях. Достижение цели - ученик использует ранее полученные знания не только в стандартных условиях, но и в новых ситуациях и правильно их применяет.

Блок анализ - умение выделять отдельные элементы структуры учебного материала, определять взаимосвязь элементов и логику этой взаимосвязи. Ученик выделяет части целого и взаимосвязи между ними, видит упущения в логике рассуждений, проводит различия между фактами и следствиями, оценивает значимость данных. [18]

Следует отметить, что компьютерное тестирование отличается от бланкового по процедуре администрирования. Поэтому на результаты тестирования могут оказывать влияние различные дополнительные факторы, которых нет при бланковом тестировании. К таким факторам относят, например, уровень владения компьютером у участника тестирования. Далее, в общепринятом бланковом тестировании испытуемый может изучить все задания, пропустить какие-либо из них, возвратиться к ним позже и т.д. Невозможность посмотреть весь тест целиком, оценить его общую трудность и трудность того, что осталось выполнить, является дополнительным фактором тревожности ученика. Более того, в компьютерном тестировании, как правило, невозможно вернуться к решенным заданиям и исправить ответы. Иногда эта опция предусмотрена, но ввиду ограничения времени тестирования, у испытуемого может не хватить на это времени. Также компьютерная форма иногда может ухудшить восприятие задания (например, в заданиях, основой которых является отрывок текста, который может не поместиться на экране компьютера).

Поэтому общепринято, что результаты бланкового и компьютерного тестирования (по одному и тому же тесту) шкалируются и сообщаются отдельно.

Компьютерное тестирование дает возможность использовать дополнительные возможности при разработке заданий и их администрировании по сравнению с традиционным бланковым тестированием. Инновационные особенности, доступные при КТ включают звук, графику, анимацию, видео. Причем все это может быть включено и в сами задания, и в ответные опции. Другие инновации касаются администрирования заданий. Например, испытуемые, используя компьютер, могут выделять текст, щелкать мышкой на графиках, передвигать объекты по экрану, изменять порядок элементов или картинок. Далее, появляется возможность интерактивного тестирования. Например, в процессе ответа испытуемого на экране может появляться дополнительная информация, различная в зависимости от ответа. Появляется гораздо больше возможностей в заданиях с генерированием ответов, а не простым выбором правильного ответа из набора предложенных. [14]

Хорошо организованный поэтапный контроль практически исключает необходимость в итоговом контроле. На этом основании вполне допустим отказ от итогового контроля в форме традиционного зачета/экзамена. А при массовом применении автоматизированной системы контроля качества знаний вообще снимается вопрос о привычной сессии, либо возникает необходимость резкого сокращения ее сроков. Тем самым создаются два эффекта, положительно влияющих на организацию всего учебного процесса в образовательном учреждении:

Сокращается продолжительность семестра (за счет учебного времени отводимого на экзамен).

Исключается стрессовость экзаменационного периода.

Основными достоинствами применения автоматизированной системы оценки качества знаний студентов, с дидактической точки зрения являются:

обеспечение высокой прочности знаний и умений за счет научно обоснованной систематичности контроля;

сокращение времени на итоговый контроль качества знаний (сессию) до одной недели в семестр и, в итоге, до 20 недель за весь срок обучения.

Выбор формы тестирования зависит от цели тестирования, содержания теста, технических возможностей, уровня подготовленности учителя в области теории и методики тестового контроля знаний. Самым лучшим можно считать тест, в котором заложено широкое содержание, и оно охватывает более глубокие уровни знаний.

Главные требования к системе компьютерного контроля заключаются в том, что:

тестовые вопросы и варианты ответов на них должны быть четкими и понятными по содержанию (текст заданий и ответов компьютерных тестов необходимо делать кратким и лаконичным).

компьютерный тест должен быть простым в использовании;

в тестовую систему должно быть включена оценка степени правильности ответа на каждый заданный обучающемуся вопрос;

тестовых вопросов должно быть настолько много, чтобы совокупность этих вопросов охватывал весь материал, который обучающийся должен усвоить;

вопросы должны подаваться в случайном порядке, чтобы исключить возможность механического запоминания их последовательности;

варианты возможных ответов должны следовать так же в случайном порядке;

необходимо проводить учет времени, затраченного на ответы, и

ограничивать это время;

при всех положительных качествах метода тестирования он не может быть единственным способом проверки качества знаний и умений учащихся и должен быть использован наряду с теми традиционными формами проверки результатов обучения, которые сложились в школе и оправдали себя в практике ее работы.

Для создания тестов по предметной области разрабатываются специальные инструментальные программы-оболочки, позволяющие создавать компьютерные тесты путем формирования базы данных из набора тестовых заданий.

Рассмотренные особенности использования компьютерного тестирования позволяют сделать вывод о том, что только грамотно составленный тест позволяет повысить эффективность применения созданных компьютерных средств обучения.

§3. Анализ тестовых оболочек

Автоматизированные системы тестирования - это обширный класс программ, самым непосредственным образом предназначенный для реализации компьютерного тестирования. Примерами программ данного класса являются «Oprosnik», SuperTest, «Qтест», системы «Экспресс-тест», TeachLab, «Тест», «Знания», AST-Test, TestMaker VVZ 2.6, Auto Control 2.0, My Test, TeachLab и многие другие.[5]

Родоначальником класса по праву можно считать тестирующие программыоболочки. Если на начальном этапе такого типа программы строились на принципе однозначного распознавания ответов испытуемого и использовании только текстового режима при формулировании заданий, более современные варианты, как правило, позволяют реализовать и множественный выбор вариантов ответов, использование графического материала (рисунки, графики и т.д.), звуковой и видеоинформации, а также возможность использования надстрочных и подстрочных символов при формулирования заданий, что особенно важно при разработке компьютерных тестов по таким дисциплинам, как математика, физика, химии.

Существует огромное количество тестовых оболочек для создания тестов, все они различаются интерфейсом, возможными типами заданий, количеством тестовых вопросов, платным или бесплатным распространением и т.п. Рассмотрим таблицу сравнения некоторых тестовых оболочек.

Таблица 2 - сравнение некоторых тестовых оболочек

Критерии сравнения	My Test	Hot Potatoes	MultiTester System	SuperTest
Количество вопросов в тесте	не ограничено	не ограничено	не ограничено	1000
Количество вариантов ответов	10	не ограничено	8	10
Возможность прикрепить рисунок, звуковой файл	возможно	возможно	только рисунок	только рисунок
Типы вопросов	одиночный выбор; множественны й выбор; установление порядка следования; установление соответствия; указание истинности или ложности утверждений; ручной ввод числа (чисел); ручной ввод текста; выбор места на изображении; перестановка букв; заполнение пропусков.	заполнение пропусков; ? установление соответствия; вопросы с множественным выбором ответа; ? кроссворд; ? восстановлени е последовательнос ти; объединитель	установление соответствия; вопросы с множественным выбором ответа; ? возможность вариации форм; ? установление последовательнос ти	одиночный выбор; множественны й выбор; ввод числа или текста
При тестировании блокирование доступа к рабочему столу	монопольном режиме	отсутствует	возможно	отсутствует

Рассмотрим некоторые тестовые оболочки более подробно.

ТЕСТОВАЯ ОБОЛОЧКА MYTEST X. С помощью программы MyTest X возможна организация и проведение тестирования, экзаменов в любых образовательных учреждениях (вузы, колледжи, школы) как с целью выявить уровень знаний по любым учебным дисциплинам, так и с обучающими целями. Предприятия и организации могут осуществлять аттестацию и сертификацию своих сотрудников.

MyTest X - система программ (программа тестирования учащихся, редактор тестов и журнал результатов) для создания и проведения компьютерного тестирования, сбора и анализа результатов, выставления оценки по указанной в тесте шкале.[6]

Программа легка и удобна в использовании. Все учителя и учащиеся быстро и легко осваивают ее.

Программа MyTest X работает с десятью типами заданий: одиночный выбор, множественный выбор, установление порядка следования, установление соответствия, указание истинности или ложности утверждений, ручной ввод числа, ручной ввод текста, выбор места на изображении, перестановка букв, заполнение пропусков. В тесте можно использовать любое количество любых типов, можно только один, можно и все сразу. В заданиях с выбором ответа (одиночный, множественный выбор, указание порядка, указание истинности) можно использовать до 10 (включительно) вариантов ответа.

Программа состоит из трех модулей:

Модуль тестирования (MyTestStudent) является «плеером тестов». Он позволяет открыть или получить по сети файл с тестом и пройти тестирование. Ход тестирования, сигнализация об ошибках, способ вывода результата тестирования зависит от параметров теста, заданных в редактор.

Для создания тестов имеется очень удобный редактор тестов (MyTestEditor) с дружественным интерфейсом. С помощью редактора можно создать либо новый тест, либо изменить существующий. Так же в редакторе настраивается процесс тестирования: порядок заданий и вариантов, ограничение времени, шкала оценивания и многое другое.

Журнал тестирования (MyTestServer) позволяет организовать тестирование более удобным образом. С помощью него можно раздавать файлы с тестами по сети, получать результаты со всех компьютеров тестируемых и анализировать их в удобном виде.

В программе имеются богатые возможности форматирования текста вопросов и вариантов ответа. Можно определить шрифт, цвет символов и фона, использовать верхний и нижний индекс, разбивать текст на абзацы и применять к ним расширенное форматирование, использовать списки, вставлять рисунки и формулы.[4]

К каждому заданию можно задать сложность (количество баллов за верный ответ), прикрепить подсказку (показ может быть за штрафные баллы) и объяснение верного ответа (выводится в случае ошибки в обучающем режиме), настроить другие параметры.

В MyTest X можно использовать любую систему оценивания. Система оценки и ее настройки можно задать или изменить в редакторе теста.

При наличии компьютерной сети можно, используя модуль журнала MyTestX, возможно:

Организовать централизированный сбор и обработку результатов тестирования. Результаты выполнения заданий выводятся учащемуся и отправляются учителю. Учитель может оценить или проанализировать их в любое удобное для него время.

Организовать раздачу тестов учащимся через сеть, тогда отпадает необходимость каждый раз копировать файлы тестов на все компьютеры. Раздавать можно сразу несколько разных тестов.

Непосредственно следить за процессом тестирования (можно видеть кто и какой тест выполняет, сколько заданий уже выполнено и какова их результативность).

Существуют следующие возможности вывода тестовых заданий:

по степени возрастания трудности - для гомогенных тестов, по "спиральной" форме - для гетерогенных тестов (например, если имеется гетерогенный тест по истории культуры, внешней, внутренней политике, социальноэкономическому развитию страны, то первые четыре задания теста составляют самые легкие вопросы по всем этим дисциплинам; следующие четыре - чуть труднее, но опять-таки по всем четырем дисциплинам, и так далее, один за другим, как бы по спирали возрастающей трудности);

в случайном порядке. Исключение обычно делается для первого (для группы первых) и последнего (для группы последних) вопросов, которые могут отбираться специально из соображений большей понятности, удобства, интереса и т.д.;

в специальном порядке, в соответствии с какой-либо теорией, соображениями переноса навыков, концентрации внимания и др.;

в блочном порядке, где блоки и набор заданий в них располагаются вышеперечисленным образом;

в порядке, сочетающим случайный и специальный подбор.

С помощью программ MyTest X возможно организовать как локальное так и сетевое тестирование. Программа поддерживает несколько независимых друг от друга режимов: обучающий, штрафной, свободный и монопольный. В обучающем режиме тестируемому выводятся сообщения об его ошибках, может быть показано объяснение к заданию. В штрафном режиме за не верные ответы у тестируемого отнимаются баллы и можно пропустить задания (баллы не прибавляются и не отнимаются). В свободном режиме тестируемый может отвечать на вопросы в любой последовательности, переходить (возвращаться) к любому вопросу самостоятельно. В монопольном режиме окно программы занимает весь экран и его невозможно свернуть.

MyTest X имеет хорошую степень защиты, как тестовых заданий, так и результатов. Благодаря тому, что для теста можно задать несколько различных паролей (для открытия, редактирования, тестирования), испортить (отредактировать) тест лицам не имеющим на это право становится практически не возможно, плюс ко всему, не возможно украсть ключи (правильные ответы) к тестовым заданиям. Так как результаты тестирования могут сохранятся в защищенный файл, который не возможно отредактировать, то оценки учащихся всегда объективны и не зависят от лояльности тестолога. Ввиду того, что результаты тестирования могут сохранятся как на локальном ПК, так и параллельно на ПК тестолога, вероятность потери результатов сводится к 0%. Программа продемонстрировала высокую надежность работы как в школах так и в ВУЗах России и стран ближнего зарубежья. В программе предусмотрены различные варианты защиты тестов от несанкционированного получения ответов.

Ко многим полезным функциям, которые имеются в программе для проведения компьютерного тестирования, можно ещё присоединить то, что если ученик по каким-либо причинам не может выполнять тест за ПК (например, по состоянию здоровья), то буквально за 1-2 минуты можно сформировать «бумажный» вариант теста.

Программа MyTest X распространяется бесплатно. Не коммерческое использование программы не требует денежных выплат. Любое образовательное учреждение, учитель и ученик могут бесплатно использовать программу на основе лицензионного соглашения без каких либо денежных отчислений. Программа работает под ОС Windows 2000, XP, Vista, 7. Для работы под Linux можно использовать Wine. [4]

Тестовая оболочка Hot Potatoes. Инструментальная программа-оболочка Hot Potatoes (в переводе с английского - «горячий картофель») представляет собой комплекс программ, позволяющих создавать около десятка разных типов интерактивных заданий с использованием текста, графики, звука или видео. [8]

Программа предоставляет преподавателям возможность самостоятельно создавать электронные задания и тесты без знания языков программирования и привлечения специалистов в этой области.

На компьютеры студентов программу устанавливать не нужно.

Hot Potatoes является бесплатной программой для государственных и некоммерческих образовательных учреждений, частных и юридических лиц при условии, что взимания платы за использование созданных материалов производиться не будет, а созданные с помощью нее учебные материалы будут находиться в свободном доступе в Интернете.

Знание языка гипертекстовой разметки документа (HTML) и JavaScript для создания заданий и тестов совершенно не требуется, а лишь предоставляет больше возможностей для изменения конфигурации заданий и получения справочной информации по работе с программой (Help).