Метод количественных оценок ранжированных факторов педагогических исследований

Размещено на http://www.allbest.ru/

Метод количественных оценок ранжированных факторов педагогических исследований

Зиброва Надежда Владимировна

Кравцов Евгений Владимирович

Леньшин Андрей Валентинович

В статье рассматривается методика организации и проведения экспертных оценок педагогических исследований. Определяется порядок задания целевых установок педагогических исследований, построения и изучения моделей педагогических экспериментов на основе экспертных оценок. экспертная оценка педагогический компетенция

Ключевые слова: педагогический эксперимент, компетенции, комплексный технический контроль, объекты контроля.

Method of quantitative evaluation of ranked factors in pedagogical research

The article discusses the method of organizing and conducting expert assessments of medical research. The procedure for setting targets for pedagogical research, building and studying models of pedagogical experiments on the basis of expert assessments is determined.

Keywords: pedagogical experiment, competences, complex technical control, objects of control.

Значительное усложнение перечня задач обучения в военных вузах, их разноплановость при комплексном обучении специалистов комплексного технического контроля (далее - КТК) и формировании умений и навыков применения средств КТК, а также необходимость моделирования различных вариантов оперативно-тактической и радиоэлектронной обстановки, содержащих десятки и сотни разнообразных параметров, оказывают существенное влияние на результаты принятия обучения и управления его качеством.

Необходимый уровень знаний, умений и навыков может быть достигнут за счет формализации интеллектуальных функций по формированию наборов исходных данных установленной градации сложности, оказывающих информационно-обучающее воздействие в зависимости от конкретной задачи обучения и реализующих рациональные условия обучения принятию решения [1; 2]. При этом должны учитываться: целевые функции формирования компетенций у специалистов КТК; психолого-педагогические условия обеспечения дидактической эффективности обучения; содержательные аспекты боевой деятельности; инженерно-технический облик современной техники КТК.

Процесс подготовки военных специалистов, рассматриваемый с позиций общей теории управления [3], является весьма непростым объектом для исследований. Из-за сложности данного процесса на современном этапе развития научно-методического аппарата наблюдается существенная дифференциация исследований на большое число направлений, зачастую не охваченных единством целей. При этом актуальными становятся вопросы систематизации, координации, интеграции и комплексности проводимых исследований с единых позиций, т. е. необходим системный подход к проведению педагогических исследований [4].

Система педагогических исследований должна характеризоваться иерархической совокупностью целей. Можно выделить следующие уровни целевых установок:

1) целевые установки исследований, выполняемых по плану научной деятельности Вооруженных Сил Российской Федерации или заказчика подготовки кадров;

2) целевые установки академических исследований;

3) целевые установки факультетских исследований;

4) целевые установки кафедральных исследований;

5) целевые установки исследований в пределах учебных дисциплин [5].

Частные цели исследований должны быть согласованы, координированы между собой и направлены на повышение эффективности и качества учебно-воспитательного процесса.

Целью настоящей статьи является разработка методики количественных оценок ранжированных факторов педагогических исследований за счет определения иерархической совокупности моделей и эвристических закономерностей.

Важным направлением педагогических исследований является построение и изучение моделей, описывающих различные стороны процесса подготовки военных специалистов. Приступая к планированию педагогических экспериментов и построению моделей, нужно помнить о том, что предельно упрощенные модели целесообразно исследовать с учетом выходных эффектов и ограниченного набора главных влияющих факторов. Такие модели позволяют выявлять основные тенденции в подготовке военных специалистов.

Главными элементами системного подхода, используемого при проведении педагогических исследований, являются: разработка системы целевых установок исследований; создание моделей и эвристических методов, позволяющих изучать отдельные аспекты процесса подготовки военных специалистов; разработка единой системы сбора и обобщения исходных данных.

Педагогические исследования предполагают получение количественных результатов. Объектами измерений могут быть самые разнообразные параметры: 1) показатели эффективности и качества выполнения выпускниками своих служебных обязанностей; 2) успеваемость обучающихся по отдельным дисциплинам; 3) уровень усвоения материала; 4) результаты текущего контроля; 5) уровень профессиональной подготовки профессорско-преподавательского состава; 6) качество сдачи государственной итоговой аттестации.

В ряде случаев между отдельными объектами может быть установлено только отношение предпочтительности, т. е. без отнесения их к каким-либо классам. При этом объекты ранжируются, т. е. составляется их список, в котором каждый предыдущий объект предпочтительнее последующего. В определенных случаях каждому объекту может присваиваться некоторое численное значение - так называемый вес (или ранг).

При ранжировании эксперт должен расположить объекты (факторы) в порядке, который представляется ему наиболее рациональным, и приписать каждому из них числа натурального ряда - ранги. При этом наименьший ранг получает наиболее предпочтительный объект. Число рангов должно быть равно числу ранжируемых объектов. В ряде случаев оценки факторов перед ранжированием нормируют и усредняют.

Для нормирования оценки по всем факторам суммируются, а затем каждая из них делится на полученную сумму:

Когда в экспертизе участвуют несколько экспертов, то обычно они стремятся получить усредненную оценку для каждого фактора. Для этого нормированные оценки каждого фактора суммируются, а полученный результат делится на количество экспертов M:

Групповая оценка, получаемая в ходе экспертиз, может считаться достаточно надежной только при условии хорошей согласованности ответов опрашиваемых специалистов. Поэтому статистическая обработка информации, предоставленной экспертами, должна включать в себя оценку степени согласованности их мнений. Для этих целей чаще всего используют коэффициент вариации (K_v, %), который вычисляется для каждого фактора по формуле

Этот коэффициент характеризует степень разброса оценок, сделанных экспертами по отдельным факторам, полученным в процессе ранжирования. При большом количестве факторов, а также незначительных различиях между ними выставление оценок вызывает определенные затруднения. Для их преодоления может быть использован метод парных сравнений.

Он же может применяться для установления суммарных рангов факторов. Для этого на основании ответов эксперта составляется матрица

На основе матрицы Р можно не только проран- жировать факторы, но и получить их оценки по интервальной шкале. Величина p_rj имеет смысл относительной частоты предпочтений экспертами i-го фактора j-му. Можно предположить, что частота предпочтений является оценкой вероятности и связана с разностью значений важностей факторов функций распределения

Описанный метод позволяет получить оценки по интервальной шкале. Он был апробирован в ходе педагогического эксперимента по оценке формирования профессиональной компетентности специалистов КТК в ВУНЦ ВВС «ВВА»(г. Воронеж), в котором приняли участие 95 курсантов академии в период с 2016 по 2019 г. [4]. В качестве экспертов выступили преподаватели специальных дисциплин кафедры информационной безопасности академии (5 человек). Педагогический эксперимент включал в себя три этапа: 1) констатирующий; 2) формирующий; 3) обобщающий. По его результатам было установлено, что сформированность профессиональной компетентности специалистов КТК находится на уровне, достаточном для успешного выполнения профессиональных задач.

Для проведения качественного и количественного анализа процесса подготовки специалистов КТК и его прогнозирования в целях обеспечения максимально возможной эффективности обучения [6] необходим объективный контроль степени усвоения материала и сформирован- ности компетенций. Таким образом, на основе установления отношений предпочтительности между объектами оценивания в педагогических исследованиях и ранжирования оценок экспертов была выработана методика получения количественных оценок по интервальной шкале.

Литература

1. Организация образовательного процесса на кафедре: метод. пособие / А. В. Лень- шин, С. А. Попов, Н.В. Зиброва, В.П. Сидорчук; под ред. ГВ. Зибровой. Воронеж, 2013.

2. Зиброва Н.В., Леньшин А. В. Подготовка военных специалистов по технической защи-

3. The organization of educational process at department: methodical man-ual / A.V. Lenshin,

4. S.A. Popov, N.V. Zibrova, V.P. Sidorchuk; ed. by

5. V. Zibrova. Voronezh, 2013.

6. Zibrova N.V., Lenshin A.V Training of military specialists in technical information security using

7. те информации с применением современных образовательных технологий // Информация и безопасность. 2016. Т 19. Вып. 3.

8. Современная теория систем управления: пер. с англ. / под ред. К.Т Леондеса. М., 1970.

9. Зиброва Н.В., Весельев РГ, Капустин В.И. Мониторинг формирования профессиональной компетентности специалистов радиомониторинга // Радиоэлектронная борьба в современном мире: сб. науч. ст. по материалам I Всерос. науч.-практ. конф. (1-2 октября 2019 г.). Воронеж, 2019.

10. Зиброва Н.В., Леньшин А.В., Кравцов Е.В. Педагогические условия формирования компетенций у специалистов радиомониторинга при использовании образовательных технологий // Вестн. Краснодар.ун-та МВД России. 2017. № 2(36).

11. Нагалин А.В., Леньшин А.В., Кравцов Е.В., Сенюков ГА. Оценка эффективности технических средств обучения специалистов в области радиомониторинга // Радиотехника. 2015. № 12.

12. the modern educational technologies //Information and safety. 2016. Vol. 19. Iss. 3.

13. Modern theory of control systems: trans. from English/ed. byK.T Leondes. Moscow, 1970.

14. Zibrova N.V., Veselyev R.G., Kapustin V.I. Monitoring the formation of professional competence of specialists of the radio monitoring // Electronic war-fare in the modern world: proc.of sci. works. article based on the materials of the I All-Russian sci. and pract. conf. (October 1-2, 2019). Voronezh, 2019.

15. Zibrova N.V., Lenshin A.V., Kravtsov E.V. Pedagogical conditions for the formation of competencies in radio monitoring specialists using educational technologies // Bull. of the Krasnodar University of of Russian MIA. 2017. № 2(36).

16. Nagalin A.V., Lenshin A.V., Kravtsov E.V., Senyukov G.A. Efficiency evaluation of training's technical means of experts in the field of radio monitoring // Radio engineering. 2015. № 12.

СВЕДЕНИЯ ОБ АВТОРАХ