Моніторинг НУШ - Результати та рекомендації перший етап, 2019-2020 рр. - Заплотинська Олена 2020

Методика зважування даних моніторингу
Додатки

Моніторинг впровадження реформи «Нова українська школа» реалізовувався на основі вибіркової методології. Для забезпечення репрезентативності результатів цього дослідження для всієї України було сформовано систему статичних ваг (далі - ваги).

Оскільки дослідження є багатоцільовим та проводилося серед різних груп респондентів, відповідно, для кожної з них були сформовані окремі ваги, а саме:

1. Ваги директорів закладів освіти, які репрезентують керівників усіх закладів середньої освіти України із класами третього року навчання, за винятком шкіл-інтернатів, які не входили до цільової групи цього дослідження. Загалом директорів 12 940 навчальних закладів (відповідно до статистики 2019-2020 н.р.).

2. Ваги вчителів третіх класів, які репрезентують усіх вчителів третіх класів середніх навчальних закладів України, за винятком шкіл-інтернатів, які не входили до цільової групи цього дослідження. Загалом 20 976 вчителів третіх класів (відповідно до статистики 20192020 н.р.).

3. Ваги учнів третіх класів, які репрезентують усіх дітей, які навчаються у третьому класі у середніх навчальних закладів України, за винятком шкіл-інтернатів, які не входили до цільової групи цього дослідження. Загалом 418 809 учнів (відповідно до статистики 2019-2020 н.р.).

4. Ваги батьків учнів третіх класів, які репрезентують усіх батьків, діти яких навчаються у третьому класі середніх навчальних закладів України, за винятком шкіл-інтернатів, які не входили до цільової групи цього дослідження. Загалом 418 809 осіб, що відповідає загальній кількості учнів третіх класів.

Побудована система статистичних ваг враховує дизайн вибірки, рівень відмов від участі в опитуванні кожної із груп респондентів, а також статистичну інформацію за 2019-2020 н.р. щодо кількості закладів загальної середньої освіти, кількості класів та учнів третього року навчання. Для розповсюдження результатів дослідження на генеральну сукупність кожному респонденту був присвоєна статистична вага, яка показує скількох осіб із генеральної сукупності він представляє.

У загальному випадку статистична вага і-го респондента розраховується w_і за формулою:

де - базова вага школи (величина, обернена до імовірності відбору), в якій досліджено і-го респондента; - базова вага класу (величина, обернена до імовірності відбору), в якому досліджено і-го респондента; - базова вага респондента (величина, обернена до імовірності відбору); k_1i - коефіцієнт коригування статистичних ваг для урахування відмов від участі; k_2i - коефіцієнт коригування статистичних ваг для узгодження результатів дослідження з даними статистики.

Слід зауважити, оскільки дизайн вибірки стратифікований за типом навчального закладу та типом населеного пункту, то й розрахунки статистичних ваг проводилися окремо в межах кожної страти.

Страта І - пілотні школи. У моніторингу взяли участь 25 шкіл, які представляють 129 пілотні школи генеральної сукупності.

Страта ІІ - спеціалізовані. У моніторингу взяли участь 30 шкіл, які представляють 1525 спеціалізованих шкіл, ліцеїв, гімназій генеральної сукупності.

Страта ІІІ - загальноосвітні. У моніторингу взяли участь 35 шкіл, які представляють 1458 загальноосвітніх шкіл генеральної сукупності, які знаходяться у містах із чисельністю 100 тис. осіб та більше.

Страта IV - загальноосвітні школи малих міст. У моніторингу взяли участь 29 шкіл, які представляють 1890 загальноосвітніх шкіл генеральної сукупності, які знаходяться у містах і чисельністю до 100 тис. осіб та СМТ.

Страта V - сільські загальноосвітні школи. У моніторингу взяли участь 30 шкіл, які представляють 7938 загальноосвітніх шкіл генеральної сукупності, які знаходяться у сільській місцевості.

Директори навчальних закладів

Статистичні ваги директорів середніх навчальних закладів - це ваги школи, скориговані на відмову від участі в інтерв'юванні та на дані статистики:

де - статистичні ваги i-го директора (школи); - базова вага школи, в якій працює i-й директор; k_1i - коефіцієнт коригування статистичних ваг для урахування відмов від інтерв'ювання; k_2i - коефіцієнт коригування статистичних ваг для узгодження результатів інтерв'ювання з даними статистики.

З-поміж усіх 150 відібраних шкіл від участі відмовилася 1 школа зі страти загальноосвітні школи малих міст, тому ваги усіх шкіл цієї страти були збільшені в 1,04 рази, що відповідає частці цієї школи у генеральній сукупності. Для шкіл з інших страт коефіцієнт коригування на відмови дорівнює 1, оскільки відмов не було.

Статистика за 2019-2020 н.р. щодо кількості шкіл не надто змінилася, як порівняти з даними за 2018-2019 н.р., тому коефіцієнти коригування близькі до 1 (див. табл. 1).

Статистичні ваги директорів шкіл сумарно за стратами дають оцінки кількості директорів середніх закладів, що відповідають значенням, наведеним в останньому стовпчику таблиці 1.

Таблиця 1: Показники коригування ваг директорів на дані статистики

Вчителі третіх класів

Оскільки статистики щодо кількості педпрацівників, які у 2019-2020 н.р. навчають дітей у третьому класі, немає, то ми виходимо з припущення, що в одному класі викладає один вчитель. За такого припущення статистичні ваги вчителів - це ваги класу, що взяв участь у моніторингу, скориговані на відмову від участі в анкетуванні та на дані статистики:

де - статистичні ваги i-го вчителя (класу); - статистичні ваги школи, в якій працює i-й вчитель; - базова вага класу, в якому працює i-й вчитель; k_1i - коефіцієнт коригування статистичних ваг для урахування відмов від анкетування; k_2i - коефіцієнт коригування статистичних ваг для узгодження результатів анкетування з даними статистики.

У кожній школі для моніторингу відбирався 1 клас, а, відповідно, й 1 вчитель. Серед усіх 149 шкіл, які взяли участь у дослідженні, ніхто з вчителів не відмовився від анкетування. Тож етап коригування на відмови проводити не потрібно.

Таблиця 2: Показники коригування ваг вчителів на дані статистики

Порівнюючи статистику за 2019-2020 н.р. та за 2018-2019 н.р., слід відмітити незначне зменшення кількості класів у школах для усіх п'яти страт, тому коефіцієнти коригування менші від 1, але не сильно (див. табл. 2). Найбільше зменшення класів спостерігається для сільських ЗОШ, майже 20.

Статистичні ваги вчителів сумарно за стратами дають оцінки кількості третіх класів середніх закладів, що відповідають значенням, наведеним в останньому стовпчику таблиці 2.

Учні третіх класів

Статистичні ваги учнів розраховуються як добуток ваг школи, класу та безпосередньо самого учня, скориговані на відмову від участі в анкетуванні та на дані статистики:

де - статистичні ваги i-го учня; - статистичні ваги школи, де навчається i-й учень; - статистичні ваги класу, де навчається i-й учень; - базові ваги iго учня; k_1i - коефіцієнт коригування статистичних ваг для урахування відмов від анкетування; k_2i - коефіцієнт коригування статистичних ваг для узгодження результатів анкетування з даними статистики.

Анкетуванню підлягають усі учні відібраному класу, тож імовірність відбору учня, а, відповідно, і його базові ваги, рівні 1.

Статистичні дані містять тільки інформацію щодо кількості учнів певного року загалом по школі, а не окремо по кожному класу. У цьому випадку єдиним джерелом інформації щодо кількості учнів у класі були відповіді вчителів. З певних причин не усі учні заповнили та віддали анкети опитування: хтось був відсутнім в школі, а хтось не захотів заповнювати чи віддавати свій запитальник. Загалом рівень відмов учнів становить від 10% для пілотних шкіл та сільських ЗОШ і майже до 16,5% для ЗОШ великих міст (див. табл. 3).

Таблиця 3: Показники коригування ваг учнів

За даними, отриманими від вчителів про наповнюваність класів, ми скоригували показники кількості учнів третіх класів у порівнянні із статистикою 2019-2020 н.р., близько 5% для пілотних, спеціалізованих шкіл та ЗОШ великих міст, 11,5% для ЗОШ малих міст та 32% для сільських ЗОШ (див. табл. 3). Це відхилення цілком логічне, оскільки у сільських школах навчається значно менше дітей, ніж у міських школах, і, відповідно навантаження на школу (відношення кількості учнів третіх класів до кількості шкіл) значно менше - 14,7 учнів для сільських ЗОШ порівняно навіть із 47,3 учнів для ЗОШ малих міст, не кажучи уже про 69,4 учнів для ЗОШ великих міст. Так, як невід'ємними складовими статистичних ваг учнів є ваги школи та класу, тож автоматично виходить переоцінка кількості учнів сільських шкіл.

Статистичні ваги учнів сумарно за стратами дають оцінки кількості учнів третіх класів, що відповідає значенням, наведеним в останньому стовпчику таблиці 3.

Батьки учнів третіх класів

Статистики щодо кількості осіб, діти яких навчаються у третьому класі, немає, то при розрахунку статистичних ваг батьків ми виходимо із припущення, що тут наша цільова аудиторія - це один дорослий: мати, батько або опікун дитини, яка навчається у третьому класі. Тож розмір генеральної сукупності батьків для цілей нашого дослідження рівний кількості учнів третіх класів. За такого припущення статистичні ваги батьків - це статистичні ваги учня, скориговані на відмову від участі в анкетуванні:

де - статистичні ваги батька/матері i-го учня; - статистичні ваги відповідного i-го учня; k_1i - коефіцієнт коригування статистичних ваг для урахування відмов від анкетування.

Рівень відмові серед батьків в три рази вищий, ніж серед учнів і в середньому складає 31,5 (див. табл. 4).

Таблиця 4: Показники коригування ваг батьків

Статистичні ваги батьків сумарно за стратами дають оцінки кількості учнів третіх класів, що відповідає значенням, наведеним в останньому стовпчику таблиці 4.