Диференційно-психологічний аналіз предметних результатів навчання здобувачів різних рівнів освіти у цифровому середовищі

Державна політика із впровадження сучасного та безпечного цифрового освітнього середовища. Створення розумних університетів для саморозвитку та самоосвіти в освітніх організаціях. Оцінка відмінностей в результатах різних рівнів освіти в онлайн-форматі.

Рубрика Психология
Вид статья
Язык украинский
Дата добавления 13.05.2024
Размер файла 48,0 K

Отправить свою хорошую работу в базу знаний просто. Используйте форму, расположенную ниже

Студенты, аспиранты, молодые ученые, использующие базу знаний в своей учебе и работе, будут вам очень благодарны.

Размещено на http://www.Allbest.Ru/

Уманський державний педагогічний університет імені Павла Тичини

Факультет початкової освіти

Диференційно-психологічний аналіз предметних результатів навчання здобувачів різних рівнів освіти у цифровому середовищі

Якимчук Б.А. к. психол. н., професор

Анотація

Представлено результати дослідження, предметом якого були безпосередні та віддалені освітні результати навчання студентів магістратури та програм другої вищої освіти, з одного боку, та студентів бакалаврату та спеціалістів програм першої вищої освіти з іншого, які завершили електронні курси.

Ключові слова: освітні результати; студенти; перша вища освіта; друга вища освіта; електронні курси.

Annotation

Differential psychological analysis of subject learning results of students of different levels of education in a digital environment

Yakymchuk B., С. Psychol. Sci., professor оf faculty of elementary education, Uman State Pedagogical University named after Pavlo Tychyna

Introduction. Today in Ukraine, online education is one of the priority areas of state policy. The state program of higher education provides for the implementation of a project that is focused on creating conditions for the introduction of a modern and safe digital educational environment that ensures the formation of value for self-development and self-education in educational organizations of all types and levels, by updating the information and communication infrastructure, training personnel, creating state digital platform. HEIs that want to be powerful educational clusters should prepare interactive courses with elements of distance learning. The modern paradigm of education envisages the creation of smart universities in order to enable each student to build an individual profile of competencies with which he will enter the labor market in the conditions of the digital economy and be in demand there. In this context, the problem of empirical assessment of various aspects of learning in the digital educational space becomes particularly relevant

Purpose - to present an assessment of the differences in the educational results of master's degree and second higher education programs applicants, on the one hand, and bachelor's degree applicants and specialists of first higher education programs, on the other hand.

Methods - testing, experiment.

Originality. No differences were found between the winners of both categories in the educational results of the entrance test, the final test and the overall score for the ENK.

Graduates of master's degrees and second higher education programs had lower scores on average at the entrance, but already higher scores at the exit than graduates of the first higher education programs, but the effect size without taking into account the entrance results is not significant. The same tendency was revealed in the achievers of both categories: at the entrance, the achievement test results are low, at the exit they reliably and strongly increase, and then after 1,5-4 months they reliably decrease, while remaining reliably higher than the input results. In this, the remote results are highly scattered versus the immediate ones: the standard deviation almost doubles. The effect size of the final test is reliable taking into account the results of the entrance test without correction for clustering, ie. ignoring the fact that the combined sample consists of several subsamples - groups of acquirers. The improvement index means that the median master's and second higher education graduate would have been 8.47 percentage points to the right of the median first higher education graduate, i.e. he would have scored higher in this group. The clustering-adjusted effect size is statistically significant. The effect size for the overall grade for the e-course including the entrance test was also statistically significant. After screening out achievers who did not take the remote outcome test, a reliable effect size and posttest improvement index were obtained considering the entry test only without adjustment for clustering. Graduates of a master's degree and second higher education show significantly better results compared to the group of first higher education. However, when correcting for clustering, the effect becomes unreliable. The size of the effect based on remote results, including both the final test and the entrance test, is also unreliable. Thus, the remote results of both categories of applicants do not differ. The psychometric characteristics of the achievement test in the field of quantitative analysis of empirical data will be considered satisfactory. In both groups, a weak and moderate direct relationship was obtained between the results of this test, the overall grade for the electronic course and two tests from non-mathematical disciplines: the best scores on some tests are associated with the best scores on other tests.

Conclusion. Further research involves the improvement of e-courses regarding the motivation of students, the use of active and interactive components, as well as the individualization of teaching methods. It would also be interesting to compare different aspects of blended and online higher education.

Keywords: educational results; students; first higher education; second higher education; electronic courses.

Вступ

Нині процеси цифровізації освіти набули глобального характеру [1]. Завдяки сучасним цифровим технологіям університети усього світу взаємодіють за мережевою формою, розробляють власні електронні курси та використовують онлайн-курси інших ЗВО, підвищуючи доступність та якість освіти [3; 5; 6; 7]. Сьогодні в Україні онлайн-освіта один із пріоритетних напрямків державної політики. Державна програма вищої освіти передбачає реалізацію проекту, який сфокусовано на створення умов для впровадження сучасного та безпечного цифрового освітнього середовища, що забезпечує формування цінності до саморозвитку та самоосвіти у навчальних освітніх організаціях усіх видів та рівнів, шляхом оновлення інформаційно-комунікаційної інфраструктури, підготовки кадрів, створення державних цифрової платформи [2; 8; 9]. ЗВО, які хочуть бути потужними освітніми кластерами, мають готувати інтерактивні курси з елементами дистанційного навчання. Сучасна парадигма освіти передбачає створення смарт-університетів з метою надання можливості кожному здобувачеві побудувати індивідуальний профіль компетенцій, з якими він вийде на ринок праці в умовах цифрової економіки та буде затребуваний там. І навіть зовнішні умови, пов'язані із форс-мажорними обставинами пандемією COVID, російською агресією та її глобальними наслідками змушують ЗВО у найкоротші терміни повністю переходити на дистанційні формати навчання [4]. Таким чином, проблема емпіричної оцінки різних аспектів навчання у цифровому освітньому просторі набуває особливої актуальності.

Мета статті: презентувати оцінку відмінностей в освітніх результатах здобувачів магістратури та програм другої вищої освіти, з одного боку, та здобувачів бакалаврату та спеціалістів програм першої вищої освіти з іншого.

Теоретичне підґрунтя. У зарубіжних дослідженнях активно обговорюються різноманітні аспекти цифровізації освіти. Одним із найважливіших питань є оцінка впливу змішаного навчання та моделі «перевернутий клас» на освітні результати здобувачів. Розглядаються різні моделі змішаного навчання та аналізуються зарубіжні дослідження його ефективності у загальній освіті порівняно з традиційно-очним та дистанційним. Результати є неоднозначними: низка досліджень підтверджують його переваги, інші не підтверджують, дизайн досліджень також критикується. При цьому під змішаним навчанням розуміється поєднання очного навчання з цифровими та онлайн-форматами.

На цей час одним з найбільш популярних підходів у змішаному навчанні є модель «перевернутий клас», що передбачає поєднання позакласної самостійної підготовки здобувачів за допомогою відеозаписів лекцій та різноманітних онлайн навчальних матеріалів з очними сесіями, спрямованими на актуалізацію самостійно вивченого контенту та розвиток бажаних компетенцій за допомогою інтерактивних видів діяльності. Цілу низка емпіричних досліджень, головним чином зарубіжних, присвячено оцінці ефективності її застосування у вищій освіті у різних аспектах щодо різноманітних курсів. Досліджувалися самоефективність, автономія та навчальне навантаження, а також віддалені освітні результати здобувачів моделі «перевернутий клас» порівняно з традиційно-очним навчанням. Відмінностей у навчальному навантаженні та у показниках автономії не виявлено, самоефективність здобувачів у «перевернутих класах» була достовірно вищою, а час на підготовку до іспиту значно менший. Через 10 місяців після курсу віддалені результати та самоефективність не показали відмінностей [11].

В аналітичному огляді переваг і недоліків моделі «перевернутий клас» показано, що перевагою цієї моделі, що найчастіше повідомляється, є покращення успішності здобувачів. Більшість проблем цієї моделі пов'язано із позааудиторною діяльністю, наприклад, неадекватною підготовкою здобувачів до очних занять [10].

Як правило, акцент робиться на дослідженнях, де здобувачам надавалися відео-лекції перед очними сесіями. При цьому також розраховувалися розміри ефекту, аналізувалися можливі модератори та систематичні помилки публікації. Метааналіз досліджень на вибірках здобувачів різних спеціальностей показав, що результати здобувачів у «перевернутих класах» були значно кращими, ніж при традиційно-очному підході, у балах іспитів (після втручання між групами і як зміни показників до і після втручання) та в оцінках курсу, але не об'єктивно структурованих балах клінічних досліджень. Аналіз підгруп показав, що перевага «перевернутих класів» не спостерігалася у рандомізованих контрольованих дослідженнях, у країнах за межами США, а також у більш ранні роки публікації (2013 та 2014 рр.). Кумулятивний аналіз та мета-регресія показали тенденцію до поступового покращення результатів за роками [12]. Тим часом, ще не проводилися порівняльні дослідження освітніх результатів здобувачів на різних рівнях вищої освіти, які завершили електронні курси.

Методи дослідження: тестування, експеримент.

Результати та обговорення

У пілотному емпіричному дослідженні можливостей електронного навчального курсу «Математичні методи у психології» як цифрового освітнього ресурсу змішаного навчання за моделлю «перевернутий клас» підтверджено достовірний зв'язок між позитивною оцінкою здобувачами своїх освітніх досягнень та їхнім позитивним ставленням до нового формату. Освітні результати здобувачів після проходження електронного курсу статистично значно покращилися. Результати здобувачів у групі змішаного навчання у форматі електронного курсу на виході у середньому є достовірно вищими, ніж у групі традиційно-очного навчання. Дослідження із квазі-кспериментальним дизайном проведено в Уманському державному педагогічному університеті імені Павла Тичини. Вибірка склала N = 396 здобувачів психолого-педагогічних та психологічних напрямів та спеціальностей, з них N1 = 213 здобувачів магістратури та програм другої вищої освіти (ЕГ1, «Магістратура та ВВ») та N2 = 183 здобувачів 3-го курсу бакалаврату та спеціалістів (ЕГ2, «Перша вища»). Усі здобувачі пройшли навчання у розроблених електронних навчальних курсах (ЕНК): «Математичні методи у психології».

Контекстні дані про вибірці збиралися за допомогою анкети зворотного зв'язку, доступ до якої відкривався після завершення курсу. Г ендерних відмінностей між групами немає (p = 0,613): в ЕГ1 21,1% чоловіків і 78,9% жінок, в ЕГ2 18,6% юнаків і 81,4% юнок. Обидві групи достовірно різняться віком (критерій Хи-квадрат, р<0,001). Група ЕГ1 це, переважно, дорослі люди: 16,0% у ній становлять здобувачі у віці 20-24 років, 12,2% 25-29 років, 29,1% 30-34 року й 42,7% 35 років і більше, тоді як у ЕГ2 переважає молодь 16,9% у віці до 20 років, 81,4% 20-24 роки і лише 1,6% це респонденти 25 років і старші. Обидві групи також достовірно різняться характером зайнятості (Хи-квадрат, р<0,001). В ЕГ1 проти ЕГ2 робота пов'язана з спеціальністю, де вони навчаються у 51,2% vs 5,5%, не пов'язана у 32,9% vs 41,5%, а 16,0% vs 53,0% нині взагалі працюють.

Обидва електронні курси спрямовано на розвиток компетенцій та базових навичок кількісного аналізу емпіричних даних у науково-дослідній та науково-практичній діяльності в SPSS і містять 3 однакові модулі, присвячені основним методам математичної статистики, а курс для магістратури ще й 4-й додатковий модуль «Багатомірні статистичні методи», призначений для сучасних здобувачів. Порівнювались думки та освітні результати здобувачів, які завершили 3 обов'язкові модулі. Освітні результати оцінювалися за допомогою 5 тестів усередині ЕНК вхідного тесту, 3-х навчальних тестів до модулів, підсумкового тесту та індивідуального кейс-завдання (ІКЗ) за варіантами, що містять 6 кейс-завдань. Завдання у різних варіантах відрізнялися наборами даних. Здобувачі виконували кейс-завдання у SPSS, які згодом оцінювалися та коментувалися. Ті з них, які завершили курс, заповнювали анонімну анкету зворотного зв'язку. Через 1,5-4 місяці вони повторно проходили тестування у відділі моніторингу якості професійної освіти (ВМЯПО) для оцінки віддалених результатів. Вхідний тест, підсумковий тест та тест у ВМЯПО є однаковими.

Вивчення обох курсів відбувалося у змішаному форматі за моделлю «перевернутий клас», що передбачає перехід від навчання з акцентом на викладання до акценту на керування навчанням за допомогою ресурсів платформи LMS Moodle. Лекції викладача були записані на відео та пропонувалися здобувачам для самостійного перегляду під час підготовки до семінарів поряд з презентаціями, роликами з демонстрацією роботи у SPSS, файлами даних та виведення SPSS, посиланнями на літературу в електронній бібліотеці УДПУ та статтями з наукових журналів категорії Б, що ілюструють застосування вивчених методів у реальних дослідженнях, а семінари проходили у повному обсязі. На семінарах здобувачі, індивідуально працюючи з презентаціями як з орієнтиром, актуалізували інформацію: відповідали на запитання викладача, брали участь у колективному обговоренні найскладніших питань, але, найголовніше, вирішували в SPSS автентичні кейс-завдання у галузі психолого-педагогічних досліджень, навчалися вибирати методи аналізу даних та інтерпретувати результати. Підтримувалися взаємодія та взаємодопомога здобувачів: якщо здобувач на семінарі відчував труднощі при роботі зі SPSS, він піднімав руку і йому допомагали однокурсники. При парній роботі за комп'ютером здобувачі виконували по черзі кейс-завдання, асистуючи один одному.

Завдання дослідження полягали у тому, щоб порівняти безпосередні результати вхідного тесту, підсумкового тесту та загальної оцінки за курс у здобувачів обох категорій та виявити їхню схожість та відмінності; оцінити різницю між віддаленими результатами здобувачів обох категорій; оцінити розміри ефекту та індекси покращення для виміряних параметрів; перевірити психометричні характеристики тесту досягнень. Дослідницьке питання полягало у тому, як співвідносяться освітні результати вивчення електронних курсів кількісного аналізу емпіричних даних за моделлю «перевернутий клас» у здобувачів психологічних та психолого-педагогічних напрямків та спеціальностей, які мають та не мають бек-граунду у вигляді першої вищої освіти. Аналіз даних виконано у SPSS V23 з використанням методів описової статистики, критерію Манна-Уітні, критерію Вілкоксона, біномного критерію, коефіцієнта рангової кореляції Спірмена. Розрахунок розмірів ефекту та індексів покращення проводився за методикою WWC Version 4.1 Procedures Handbook, представленою на порталі IES What Works Clearinghouse [13]. Спочатку порівняли освітні результати здобувачів магістратури та програм другої вищої освіти (ЕГ1, «Магістратура та ВВ», N1 = 234) та здобувачів 3-го курсу бакалаврату та фахівців (ЕГ2, «Перша вища», N2 = 190) за 3ма параметрами за вхідним тестом, за підсумковим тестом та загальною оцінкою за ЕНК. Результати порівняння за критерієм Манна-Уітні наведено у табл. 1.

самоосвіта саморозвиток цифровий освітній середовище

Таблиця 1

Порівняння освітніх результатів здобувачів 2-х категорій за вхідним тестом, підсумковим тестом та загальною оцінкою за ЕНК за критерієм Манна-Уїтні (N = 424)

Параметр

ЕГ1 Магістратура і ВВ

ЕГ2 Перша вища

Статистика U Манна-Уїтні

p-значення

M1

SD1

M2

SD2

Тест вхідний

33,91

10,82

34,77

9,83

20270,7

0,325

N1

= 226

N2 =

= 190

Тест підсумковий

84,84

10,25

83,45

11,17

20342

0,234

N1

= 230

N2 =

= 190

Загальна оцінка за

84,13

9,95

82,92

8,35

19592,7

0,035*

ЕНК

N1 = 234

N2 = 190

Примітка. *Відмінності є статистично значущими лише на рівні p<0,05.

Таблиця 1 показує, що ні на вході, ні на виході між здобувачами обох груп тестів відмінностей не виявлено. Здобувачі магістратури та програм другої вищої показали достовірно найкращі результати за загальною оцінкою за ЕНК (p<0,05), проте за абсолютною величиною різниця у середніх є невеликою (M1 = 84,13 vs M2 = 82,92). Стандартні відхилення (SD1 vs SD2) по кожному з 3-х параметрів в обох групах є приблизно однаковими, отже, розсіювання тестових балів навколо групових середніх також не відрізняється. Зауважимо, що в ЕГ1 вісім здобувачів не проходили вхідний тест, а чотири здобувачі завершили ЕНК без проходження підсумкового тесту, тому обсяги вибірки здобувачів ЕГ1 за цими параметрами становлять 226, 230 та 234 здобувачі відповідно, тоді як обсяг вибірки ЕГ2 не змінювався та становив 190 здобувачів.

Щоб оцінити вплив втручання навчання в ЕНК в обох групах на предметні результати, також було зіставлено показники за вхідним та підсумковим тестами один з одним за критерієм Вілкоксона (табл. 2).

Таблиця 2

Порівняння освітніх результатів за вхідним та підсумковим тестами у кожній із 2-х груп здобувачів за критерієм Вілкоксона (N = 412)

Категорія студентів

Тест

Середнє M

Стандартне відхилення SD

Статистика Z Вілкоксона

p-значення

ЕГ1: Магістратура і ВВ (N1 = 222)

Тест входной

33,91

10,84

-12,919

0,000***

Тест итоговый

84,86

10,25

ЕГ2: Перша вища (N2 = 190)

Тест входной

34,77

9,83

-11,951

0,000***

Теститоговый

83,45

11,19

Примітка. *** Відмінності є статистично значущими лише на рівні p<0,001.

Як видно із таблиці 2, відмінності між показниками підсумкового тесту та вхідного тесту є високо достовірними (p<0,001) в обох групах, причому показники підсумкового тесту у середньому є достовірно вищими на 50,95 процентних пунктів в ЕГ1 та на 48,66 в ЕГ2. Стандартне відхилення в ЕГ1 не змінилося, а в ЕГ2 збільшилося лише небагато, що свідчить про приблизно однакове розсіювання тестових балів навколо групових середніх та порівнянної однорідності результатів на вході та на виході. Обсяг вибірки ЕГ1 скоротився до N1 = 222 (при порівнянні з табл. 1) з допомогою тих 12-ти здобувачів, які проходили якийсь із цих 2-х тестів.

Таблиця 3

Порівняння освітніх результатів здобувачів 2-х категорій за вхідним, підсумковим

Параметр

ЕГ1 Магистратура і ВВ (N1 = 149)

ЕГ Перша (N2 = 1

2 вища 139)

Статистика U Манна-Уїтні

p-значення

M1

SD1

M2

SD2

Тест вхідний

33,01

9,48

34,11

9,82

10047

0,663

Тест підсумковий

85,52

9,84

83,13

11,17

9003

0,083

Тест у ВМЯПО

57,17

18,96

55,85

17,86

9945,6

0,562

Однак найцікавішим було порівняти віддалені результати після 1,5-4 місяців після завершення ЕНК. Якщо вхідний та підсумковий тести здобувачі виконували самостійно усередині ЕНК без зовнішнього контролю, то тестування віддалених результатів проводилося у відділі моніторингу якості професійної освіти (ВМЯПО) у присутності співробітника цього відділу, тому результати цього тесту можна вважати незалежною оцінкою. Тестування у ВМЯПО проходили не усі студенти, які завершили ЕНК, тому при аналізі віддалених результатів вони відсіялися, а обсяги вибірок скоротилися до N1 = 149 (ЕГ1, «Магістратура та ВВ») та N2 = 139 (ЕГ2, «Перша вища»). Оскільки через відсів могли з'явитися відмінності на вході, було вирішено знову порівняти обидві групи між собою за 3 параметрами (табл. 3), а також показники вхідного тесту,

Примітка. ***Відмінності статистично значущі У зарубіжних дослідженнях для оцінки результативності втручання прийнято використовувати індекси розміру ефекту, коефіцієнти покращення та визначати їхню статистичну значущість. У порівнянні з іншими статистичними критеріями ці індекси мають такі переваги. По-перше, вони підсумкового тесту і тесту в ВМЯПО у кожній групі (табл. 4). У табл. 3 відображено відсутність відмінностей між здобувачами ЕГ1 та ЕГ2 за усіма 3 досліджуваними параметрами. Табл. 4 демонструє ту саму тенденцію в обох групах: показники вхідного тесту є низькими, на виході вони достовірно підвищуються у середньому приблизно на 50 відсоткових пунктів, а віддалені результати в ВМЯПО у середньому є достовірно нижчими приблизно на 30 процентних. пунктів, ніж за підсумковим тестом, але усе ж таки достовірно вищими, ніж за вхідним. За усіх 3-х порівняннях відмінності є достовірними лише на рівні значущості p<0,001. Зауважимо, що віддалені освітні результати є сильно розпорошеними навколо групових середніх: стандартне відхилення для тесту в ВМЯПО є майже вдвічі вищим, ніж для результатів вхідного та підсумкового тестів.

Таблиця 4

Порівняння безпосередніх та віддалених освітніх результатів у кожній з 2-х груп здобувачів за критерієм Вілкоксона (N = 288)

Категорія студентів

Тест

Середнє M

Стандартне відхилення SD

Min

Max

p-значення

ЕГ1: Магістратура і ВВ (N1 = 149)

Тест вхідний

33,01

9,48

1

56

0,000***

Тест підсумковий

85,52

9,84

56

100

Тест у ВМЯПО

57,17

18,96

16

97

ЕГ2: Перша вища (N2 = 139)

Тест вхідний

34,11

9,82

1

66

0,000***

Тест підсумковий

83,13

11,17

53

100

Тест у ВМЯПО

55,85

17,86

22

97

По перше, лише на рівні p<0,001. виражені у стандартних одиницях, що дозволяє порівнювати ефект втручань для різних тестів. По-друге, вони дозволяють розрахувати розмір ефекту без врахування вхідного зрізу у 2-х порівнюваних групах, і з врахуванням вхідних даних, тобто. «Розмір ефекту для оцінки покращення». По-третє, методика дозволяє розрахувати ефект впливу з врахуванням квазіекспериментального дизайну, або «розмір ефекту лише на рівні кластера», тобто. з врахуванням того, що вибірка складена із кількох підвиборок групп здобувачів, результати усередині яких можуть бути одноріднішими. Нарешті, переведення розмірів ефекту у коефіцієнти або індекси покращення дозволяє їх чітко інтерпретувати. Розрахунок розмірів ефекту та індексів покращення було виконано за методикою WWC Version 4.1 Procedures

Handbook, представленою на порталі IES What Works Clearinghouse [13]. Розмір ефекту розраховувався за формулою g Хеджеса, де як умовна «група втручання» розглядалася ЕГ1 («Майстратура і ВВ»), а як «група порівняння» ЕГ2 («Перша вища»). Результати розрахунку розмірів ефекту та індексів поліпшення для даних вхідного тесту (претесту), підсумкового тесту (посттесту) та загальної оцінки за ЕНК для ЕГ1 та ЕГ2 по всій вибірці подано у таблиці 5.

Таблиця 5

Розміри ефекту та індекси покращення для даних вхідного тесту, підсумкового тесту та загальної оцінки за ЕНК в ЕГ1 та ЕГ2 по усій вибірці (N = 424)

Група, індекс

Статистика

Тест

Примітки

Тест вхідний

Тест підсумковий

Загальна оцінка за ЕНК

ЕГ1 Магістратура і друга вища

Середнє M1

33,90

84,85

84,12

ЕГ1 взято як «групу втручання»

Стд. відх. SD1

10,83

10,24

9,94

N1

226

230

234

ЕГ2 Перша вища

Середнє M2

34,78

83,44

82,93

ЕГ2 взято як «групу порівняння»

Стд. відх. SD2

9,81

11,18

8,36

N2

190

190

190

Розмір ефекта

g Хеджеса

-0,085

0,132

0,128

Розраховані за формулою g Хеджеса і SE(g) без врахування тесту вхідного

Стандартна помилка розміру ефекта

SE(g)

0,098

0,098

0,097

t-статистика

T

1,391

1,349

Без врахування кластеризації

p-значення

P

0,164

0,178

Розмір ефекта

g1

0,214

Порівнювались показники теста підсумкового у 2-х

Стандартна помилка розміру ефекта

SE(g1)

0,129

Індекс покращення 1

U3 50%

58,47%-50% = 8,47%

групах з врахуванням теста вхідного Розраховано розмір ефекта для оцінки покращення

t-статистика

t

2,172

Без врахування кластеризації

p-значення

p

0,030*

t-статистика з корекцією на кластеризацію

ta

1,023

Корекцію на кластеризацію розраховано, так як

p-значение с коррекцией на кластеризацию

p

0,307

розмір еффекта без врахування кластеризації є статистично значущим

Розмір ефекта

g2

0,143

Порівнювались показники загальної оцінки за ЕНК у 2-х

Стандартна помилка розмеру ефекта

SE(g2)

0,125

Індекс покращення 2

U3 50%

55,68% - 50% = 5,68%

групах з врахуванням теста вхідного Розраховано розмір ефекта для оцінки покращення

t-статистика

t

1,456

Без врахування кластеризації

p-значення

p

0,146

Спочатку було розраховано розміри ефекту для ЕГ1 порівняно з ЕГ2 за вхідним тестом (g = -0,085), підсумковим тестом (g = 0,132) та загальною оцінкою за ЕНК (g = 0,128). Вони відображають той факт, що на вході здобувачі магістратури та програм другої вищої у середньому мали нижчі бали, але на виході вже вищі бали, ніж здобувачі програм першої вищої, проте на 8,47 процентних пункти правіше медіанного здобувача «Першої вищої» (який, за визначенням, має 50-й процентиль), тобто він мав би у цій групі ранг 58, ефект не є значущим навіть без врахування кластеризації (p = 0,164 та p = 0,178 для вихідних показників). Далі було розраховано обсяг ефекту та її рівень значущості для підсумкового тесту з врахуванням результатів вхідного (g1 = 0,214, p = 0,030) без поправки на кластеризацію, тобто. ігноруючи той факт, що об'єднана вибірка складається із кількох підвибірок груп здобувачів. Оскільки ефект є достовірним, для кращої інтерпретації було розраховано для нього індекс покращення - 8,47%, який є різницею у процентильному ранзі між середнім членом «групи втручання» і середнім членом «групи порівняння» у розподілі «групи порівняння». У нашому випадку індекс покращення означає, що медіанний здобувач «Магістратури та ВВ» виявився б 47, який відображає більш високий результат. Оскільки ефект є достовірним, згідно з методикою WWC далі було розраховано розмір ефекту з корекцією на кластеризацію, який називається «розмір ефекту лише на рівні кластера», та її pзначення (p = 0,307), і він виявився статистично не значущим. Розмір ефекту для загальної оцінки за ЕНК з врахуванням вхідного тесту також виявився статистично значущим (g2 = 0,143, p = 0,146). Після цих коментарів стає достатньо зрозумілим зміст таблиці 6, в якій представлено розміри ефекту та індекси покращення для даних вхідного, вихідного та тесту у ВМЯПО з відсіванням тих здобувачів, хто не проходив тестування віддалених результатів.

Таблиця 6

Розміри ефекту та індекси покращення для даних вхідного тесту, підсумкового тесту

Группа, індекс

Статистика

Тест

Примітки

Тест вхідний

Тест підсумковий

Тест ВМЯПО

ЕГ1 Магістратура і друга вища

Середнє M1

33,01

85,52

57,17

ЕГ1 взято як «групу втручання»

Стд. відх. SD1

9,48

9,84

18,96

N1

149

149

149

ЕГ2 Перша вища

Середнє M2

34,11

83,13

55,85

ЕГ2 взято як «групу порівняння»

Стд. відх. SD2

9,82

11,17

17,86

N2

139

139

139

Розмір ефекта

g1

0,333

Порівнювались показники теста підсумкового у 2-х групах з врахуванням теста вхідного. Розраховано розмір ефекта для оцінки покращення

Стандартна помилка розміру ефекта

SE(g1)

0,157

Індекс покращення 1

U3 50%

63,00%-50% = 13,00%

t-статистика

t

2,796

Без врахування кластеризації

p-значення

p

0,006 **

р-статистика з корекцією на кластеризацію

ta

1,444

Корекцію на кластеризацію розраховано, так як розмір ефекта без врахування кластеризації є статистично значущим

p-значення з корекцією на кластеризацію

p

0,150

Розмір ефекта

g2

-0,056

Порівнювались показники теста в ВМЯПО у 2-х групах з врахуванням теста підсумкового. Розраховано розмір ефекта для оцінки покращення

Стандартна помилка розміру ефекта

SE(g2)

0,157

Індекс покращення 2

U3 50%

47,72%-50% = -2,28%

t-статистика

t

-0,483

Без врахування кластеризації

p-значенняе

p

0,629

Розмір ефекта

g3

0,131

Порівнювались показники теста у ВМЯПО у 2-х групах з врахуванням теста вхідного. Розраховано розмір ефекта для оцінки покращення

Стандартна помилка розмеру ефекта

SE(g3)

0,140

Індекс покращення 3

U3 50%

55,25%-5 0% = 5,25%

t-статистика

t

1,118

Без врахування кластеризації

p-значення

p

0,264

Як видно з таблиці 6, студенти «Магістратури та ВР» показують достовірно кращі результати порівняно з групою «Перша вища» за підсумковим тестом з врахуванням вхідного тесту (розмір ефекту g1 = 0,333,p = 0,006). Індекс покращення дорівнює 13%. Величина ефекту, що дорівнює 0,333, означає, що ранг середнього здобувача групи «Магістратури та ВВ» буде відповідати 63-му процентилю у групі «Перша вища», або, еквівалентно, медіанний здобувач магістратури та програм другої вищої освіти мав би ранг на 13 процентних пунктів вище, ніж середній здобувач програм першої вищої освіти, якому, за визначенням, відповідає 50-й процентиль. Однак корекція на кластеризацію дає p = 0,150 і ефект стає недостовірним. Розмір ефекту для групи «Магістратура та ВР» у порівнянні з групою «Перша вища» за тестом в ВМЯПО з урахуванням результатів підсумкового тесту не значущий (g2 = -0,056, p = 0,629), як і за тестом у ВМЯПО з врахуванням вхідного тесту (g3 = 0,131, p = 0,264). Таким чином, віддалені результати обох категорій здобувачів не відрізняються.

Висновки

Таким чином, відмінностей між здобувачами обох категорій в освітніх результатах вхідного тесту, підсумкового тесту та загальної оцінки за ЕНК не виявлено. На вході здобувачі магістратури та програм другої вищої у середньому мали нижчі бали, але на виході вже вищі бали, ніж здобувачі програм першої вищої освіти, проте розмір ефекту без врахування вхідних результатів не є значущим. Виявлено одну й ту саму тенденцію у здобувачів обох категорій: на вході результати з тесту досягнень є низькими, на виході вони достовірно і сильно зростають, а потім через 1,5-4 місяці достовірно знижуються, залишаючись при цьому достовірно вищими за вхідні результати. При цьому віддалені результати є сильно розсіяними між тим безпосередніми: стандартне відхилення зростає майже удвічі. Розмір ефекту підсумкового тесту є достовірним з врахуванням результатів вхідного тесту без поправки на кластеризацію, тобто. ігноруючи той факт, що об'єднана вибірка складається із кількох підвибірок груп здобувачів.

Індекс покращення означає, що медіанний здобувач програм магістратури та другої вищої освіти виявився б на 8,47 процентних пунктів правіше медіанного здобувача першої вищої освіти, тобто він мав би у цій групі вищий результат. Розмір ефекту із корекцією на кластеризацію є статистично значущим. Розмір ефекту для загальної оцінки за електронний курс з врахуванням вхідного тесту також виявився статистично значущим. Після відсіву здобувачів, які не проходили тестування віддалених результатів, отримано достовірний розмір ефекту та індекс покращення за підсумковим тестом з врахуванням вхідного тесту лише без корекції на кластеризацію. Здобувачі магістратури та другої вищої освіти показують значно кращі результати у порівнянні з групою першої вищої освіти. Однак при корекції на кластеризацію ефект стає недостовірним. Розмір ефекту за віддаленими результатами з врахуванням як підсумкового тесту, і з врахуванням вхідного тесту теж є недостовірним. Таким чином, віддалені результати обох категорій здобувачів не відрізняються. Психометричні характеристики тесту досягнень у сфері кількісного аналізу емпіричних даних вважатимуться задовільними. В обох групах отримано слабкий і середній прямий зв'язок між результатами цього тесту, загальною оцінкою за електронний курс та двома тестами з нематематичних дисциплін: найкращі показники за одними тестами асоційовані з найкращими показниками з інших тестів.

Подальші дослідження передбачають удосконалення електронних курсів щодо мотивування здобувачів, використання активних та інтерактивних компонентів, а також індивідуалізації методики навчання. Також було б інтересним порівняти різні аспекти змішаної та online вищої освіти.

Список використаних джерел

1. Арешонков В.Ю. (2020) Цифровізація вищої освіти: виклики та відповіді. Вісник НАПН України. №2(2), 1-6.

2. Биков В., Спірін О., Пінчук О. (2020) Сучасні завдання цифрової трансформації освіти. Вісник кафедри ЮНЕСКО «Неперервна професійна освіта ХХІ століття». №1, 27-36.

3. Гуревич Р.С., Кадемія М.Ю., Опушко Н.Р, Ільніцька Т.С., Плахотнюк Г.М. (2021) Роль цифрових технологій навчання в епоху цивілізаційних змін. Сучасні інформаційні технології та інноваційні методики навчання в підготовці фахівців: методологія, теорія, досвід, проблеми. Випуск 62, 28-38.

4. Іванюк І.В. (2021) Виклики дистанційного навчання в Україні в умовах карантину Covid-19. Вісник Національної академії педагогічних наук України. №3(2), 1-4.

5. Кадемія, М.Ю. (2020) Від цифровізації економіки до дигіталізації навчання / Р.С. Гуревич, М.Ю. Кадемія, Н.Р. Опушко // Педагогічна преса // Трудова підготовка в сучасній школі, 8-12.

6. Карташова Л., Пліш І. (2020) Цифровий порядок денний розвитку освіти: спрямованість на формування цифрових компетентностей. Науковий вісник Мукачівського державного університету. Серія «Педагогіка та психологія». №1(11), 135-139.

7. Крамаренко І.С., Фонарюк О.В., Зацерківна М.О. (2022) Цифровізація освіти нові виклики та перспективи розвитку. Журнал «Перспективи та інновації науки» (Серія «Педагогіка», Серія «Психологія», Серія «Медицина». №2(7), 392-404.

8. Крупник І.Р., Бабатіна С.І., Крупник Г.А. (2022) Особливості ставлення здобувачів вищої освіти до дистанційного навчання. Інформаційні технології і засоби навчання. Том 91, №5, 98-112.

9. Перекрест М.І. (2021) Цифровізація української освіти.

10. Akcayir G., Akcayir M. (2018) The flipped classroom: A review of its advantages and challenges. Computers & Education. Vol. 126, 334-345.

11. Bouwmeestera R.A.M., de Kleijnb R.A.M., van den Bergc I.E.T., ten Cated O.Th.J., van Rijena H.V.M., Westervelde H.E. (2019) Flipping the medical classroom: Effect on workload, interactivity, motivation and retention of knowledge. Computers & Education. Vol.139,118-128.

12. Chen K.S., Monrouxe L., Lu Y.H., Jenq C.C., Chang Y.J., Chang Y.C. et al. (2018) Academic outcomes of flipped classroom learning: A meta-analysis. Medical Education. Vol. 52. №9, 910-924.

13.IES What Works Clearinghouse. Handbooks and other resources.

References

1. Areshonkov V.Ju. (2020) Cyfrovizacija vyshhoi' osvity: vyklyky ta vidpovidi [Digitization of higher education: challenges and answers]. Visnyk NAPN Ukrai'ny. №2(2), 1-6.

2. Bykov V., Spirin O., Pinchuk O. (2020) Suchasni zavdannja cyfrovoi' transformacii' osvity [Modern tasks of digital transformation of education]. Visnyk kafedry JuNESKO «Neperervna profesijna osvitaHHIstolittja». №1, 27-36.

3. Gurevych R.S., Kademija M.Ju., Opushko N.R, Il'nic'ka T.S., Plahotnjuk G.M. (2021) Rol' cyfrovyh tehnologij navchannja v epohu cyvilizacijnyh [The role of digital learning technologies in the era of civilizational changes]. Suchasni informacijni tehnologii' ta innovacijni metodyky navchannja v pidgotovci fahivciv: metodologija, teorija, dosvid, problemy. Vypusk 62, 28-38.

4. Ivanjuk I.V. (2021) Vyklyky dystancijnogo navchannja v Ukrai'ni v umovah karantynu Covid-19 [Challenges of distance learning in Ukraine under the conditions of the Covid-19 quarantine]. Visnyk Nacional'noi' akademii' pedagogichnyh nauk Ukrai'ny. №3(2), 1-4.

5. Kademija, M.Ju. (2020) Vid cyfrovizacii' ekonomiky do dygitalizacii' navchannja [From the digitalization of the economy to the digitalization of education] / R.S. Gurevych, M.Ju. Kademija, N.R. Opushko // Pedagogichna presa // Trudova pidgotovka v suchasnij shkoli, 8-12.

6. Kartashova L., Plish, I. (2020) Cyfrovyj porjadok dennyj rozvytku osvity: sprjamovanist' na formuvannja cyfrovyh kompetentnostej [The digital agenda of education development: focus on the formation of digital competences]. Naukovyj visnykMukachivs'kogo derzhavnogo universytetu. Serija «Pedagogika ta psyhologija». №1(11), 135-139.

7. Kramarenko, I.S., Fonarjuk, O.V., Zacerkivna, M.O. (2022) Cyfrovizacija osvity novi vyklyky ta perspektyvy rozvytku [Digitization of education new challenges and prospects for development]. Zhurnal «Perspektyvy ta innovacii' nauky» (Serija «Pedagogika», Serija «Psyhologija», Serija «Medycyna». №2(7), 392-404.

8. Krupnyk, I.R., Babatina, S.I., Krupnyk, G.A. (2022) Osoblyvosti stavlennja zdobuvachiv vyshhoi osvity do dystancijnogo navchannja [Peculiarities of the attitude of higher education applicants to distance learning]. Informacijni tehnologii' i zasoby navchannja. Tom 91, №5, 98-112.

9. Perekrest, M.I. (2021) Cyfrovizacija ukrai'ns'koi' osvity [Digitization of Ukrainian education].

10. Akcayir G., Akcayir M. (2018) The flipped classroom: A review of its advantages and challenges. Computers & Education. Vol. 126, 334-345.

11. Bouwmeestera R.A.M., de Kleijnb R.A.M., van den Bergc I.E.T., ten Cated O. Th.J., van Rijena H.V.M., Westervelde H.E. (2019) Flipping the medical classroom: Effect on workload, interactivity, motivation and retention of knowledge. Computers & Education. Vol. 139,118-128.

12. Chen K.S., Monrouxe L., Lu Y.H., Jenq C.C., Chang Y.J., Chang Y.C. et al. (2018) Academic outcomes of flipped classroom learning: A meta-analysis. Medical Education. Vol. 52. №9, 910924.

13. IES What Works Clearinghouse. Handbooksand other resources.

Размещено на Allbest.Ru


Подобные документы

  • Адаптація як діяльність, спрямована на засвоєння умов оточуючого середовища. Особливості і етапи здійснення психолого-педагогічного супроводу студентів груп нового набору у період адаптації. Ставлення студентів до різних форм викладання нового матеріалу.

    статья [59,9 K], добавлен 02.03.2011

  • Психологічний аналіз проблеми саморозвитку підлітків, феномен саморозвитку як психолого-педагогічна проблема. Суть, механізми та структура саморозвитку, психологічні умови формування здатності до саморозвитку, процедура та опис методик дослідження.

    дипломная работа [2,2 M], добавлен 29.11.2011

  • Аналіз різних підходів в обґрунтуванні явища психологічного благополуччя особистості, його складових і основних рівнів прояву. Зв’язок благополуччя з іншими близькими психологічними феноменами. Когнітивно-емоційна оцінка людиною якості свого життя.

    статья [52,4 K], добавлен 18.08.2017

  • Роль ігор у процесі підвищення комунікативної компетентності студентів. Впровадження в навчальний процес методів активізації навчання. Використання ігрових методів навчання у процесі пізнавальної діяльності студентів. Навчання творчості в системі освіти.

    курсовая работа [70,6 K], добавлен 26.08.2013

  • Характеристика рівнів та форм емпатії. Пізнавальний, моральний та комунікативний альтруїзм. Тест "емпатичні здібності": поняття, головна мета. Співвідношення рівня емпатії з функціональною міжпівкульною асиметрією у студентів різних факультетів.

    контрольная работа [19,9 K], добавлен 05.05.2012

  • Механізм психологічного захисту - неусвідомлюваний засіб поведінки, що відіграє важливе значення у формуванні особистості, створюючи суттєві передумови до уникнення тривожності і напруженості. Основні механізми его-захисту серед дівчат-першокурсниць.

    статья [14,4 K], добавлен 31.08.2017

  • Завдання та види діяльності психологічної служби в системі освіти. Соціально-педагогічна допомога незахищеним категоріям вихованців, учнів і студентів з метою подолання ними життєвих труднощів. Робота практичного психолога та педагога навчального закладу.

    контрольная работа [29,7 K], добавлен 08.04.2012

  • Психологічний портрет молодшого школяра. Роль батьків у становленні внутрішніх сил дитини. Педагогіка партнерства сім’ї та школи як складова модернізації системи освіти. Моделювання взаємодії закладу освіти з родинами учнів: експериментальний підхід.

    курсовая работа [264,1 K], добавлен 21.10.2019

  • Проблема комп'ютеризації освіти в літературі з психології й педагогіки. Психолого-педагогічні проблеми застосування комп'ютерів у процесі навчання. Роль та місце персональних комп'ютерів у індивідуалізованому навчанні. Позитиви і комп'ютеризації освіти.

    курсовая работа [56,3 K], добавлен 14.08.2010

  • Емоційно-вольові процеси та їх вплив на природу психіки. Геніальність як вищий ступінь обдарованості людини. Сучасна особистість як феномен постіндустріального суспільства. Державна політика в сфері освіти. Концепції особистості у зарубіжній психології.

    контрольная работа [36,6 K], добавлен 03.04.2014

Работы в архивах красиво оформлены согласно требованиям ВУЗов и содержат рисунки, диаграммы, формулы и т.д.
PPT, PPTX и PDF-файлы представлены только в архивах.
Рекомендуем скачать работу.