Не існує ідеального рейтингу, але не краще знати хоча б частину реальності, ніж нічого не знати?

шкільні

Автор є директором INEKO

Нещодавно ми реєструємо кілька статей, в яких критикується рейтинг шкіл, автором якого є INEKO (наприклад, тут і тут). Критики закликають до зниження рейтингу, приблизно з такими аргументами:

Рейтинг не вимірює якість шкіл і тому вводить батьків в оману

Істина полягає в тому, що рейтинги не визначають всебічно якість. Іншими словами, це може частково відображати це, а може і не відображати. Ми звертаємо вашу увагу на це у всіх наших результатах, що повідомляють про рейтинг. Рейтинг при виборі школи повинен бути лише допоміжним показником. Щоб уникнути введення батьків в оману, ми продовжуватимемо виправляти журналістів, які міняють рейтинги на якісні.

Рейтинги не вимірюють додану вартість шкіл, тобто різницю між результатами учнів при вступі та виході зі школи

За кордоном показники доданої вартості використовуються як стандартний показник якості школи. Ми ще не маємо загальнодоступних даних, які б дозволили нам виміряти додану вартість. Тим не менше, вже у 2015 році Міністерство освіти виміряло додану вартість середніх шкіл та внутрішньо повідомило ці школи про результати. З моменту запуску рейтингу в 2012 році INEKO рекомендує міністерству виміряти та опублікувати інформацію про додану вартість, щоб отримати кращу картину якості шкіл. Навіть зараз ми будемо запитувати у Міністерства дані про додану вартість для загальноосвітніх шкіл, і якщо воно нам їх надасть, ми їх опублікуємо.

Ми вважаємо, що дані про абсолютні результати настільки ж цікаві та важливі для батьків, як і дані про додану вартість. Без доданої вартості ви не знаєте, чи рухає школа дітей у бажаному напрямку і наскільки вона рухає їх. Без абсолютних результатів ви не знаєте, до якого рівня школа може рухати дітей. Однак, як показав аналіз Інституту освітньої політики при Міністерстві освіти, у наших середніх школах існує відносно високий зв’язок між результатами та доданою вартістю, що лише підтверджує, що результати з результатів можуть принаймні частково свідчити якість:

"Загалом, школи, учні яких досягли дуже хороших результатів в ECMS (зовнішня частина іспиту на матурі), також досягли результату, що перевищує рівень очікувань щодо рівня доданої вартості. Точно так само, навпаки, коли школи з поганими результатами зрілості здебільшого досягли рівня PHV нижче середнього (додана вартість в освіті) ".

Рейтинг дає картину занадто вузької шкільної діяльності, цілі освіти мають набагато ширший обсяг

Рейтинг INEKO для початкових шкіл складається на основі результатів Тестування 9 з математики та словацької мови (вага 80 відсотків) та надзвичайних результатів у різних конкурсах та проектах, визначених Міністерством освіти, перелік яких знаходиться тут (вага 20 відсотків ). У гімназіях та середніх професійних школах (SOŠ) це результати випуску з математики, словацької, англійської та німецької (вага 60 відсотків у гімназіях та 40 у SOŠ, відповідно), рівень безробіття випускників з урахуванням регіональних різниці (25 та 50 відсотків відповідно) та надзвичайні результати у різних конкурсах та проектах (15 та 10 відсотків відповідно). Ми розраховуємо результати за останні чотири роки із зменшенням ваги для більш віддаленого періоду.

Ми погоджуємось, що цілі освіти набагато ширші. Вони також включають знання з інших предметів та розвиток навичок, багато з яких неможливо охопити тестами. В даний час, однак, немає якісних даних, необхідних для включення в оцінку, що охоплює більш широку картину реальності. Проте, на наш погляд, результати, за якими ми стежимо, охоплюють важливу частину інформації, яку повинні знати батьки.

Примітно, що декілька критиків часто посилаються на результати тестів PISA ОЕСР як на відповідні аргументи, що показують якість системи освіти у міжнародному порівнянні. Однак ці тести також складаються лише на межі реальності, зокрема для моніторингу математичної, читацької та наукової грамотності. Ми не розуміємо, як відомостей у випадку тестів PISA може бути достатньо для того, щоб одна людина оцінила якість освіти в країні, і в той же час приблизно одного і того ж вузького розділу недостатньо у випадку тестування 9 або Рейтинг INEKO навіть для часткового оцінювання шкільних результатів навчання.

Нам здається, що якщо хтось хоче скасувати рейтинги шкіл за Тестуванням 9 або за методологією INEKO, оскільки вони занадто "вузькі", вони також повинні вимагати скасування рейтингу за тестами PISA чи іншими міжнародними тестами, такими як PIRLS. 4 курс початкових шкіл) або TIMSS (з'ясування знань та вмінь з математики та природознавства учнів 4 курсу початкових шкіл). Однак, на наш погляд, скасування цих рейтингів буде контрпродуктивним, оскільки це суттєво знизить наш рівень знань про різні системи освіти (у випадку міжнародних тестів) або про результати навчання в наших школах (у випадку національних випробування та вимірювання).

Критики часто вимагають ідеального рейтингу, але такого ніколи ні в чому не існує. Навіть у рейтингу корупції, ділового середовища, лікарень чи гравців НХЛ. Це завжди лише шматочок реальності. Однак не краще знати хоча б частину реальності, ніж нічого не знати?

Вони обманюють на тестах, тому не мають інформативної цінності

Аргумент масового шахрайства необґрунтований, а опубліковані до цього підозри спростовані. Можливо, деякі школи обманюють. Однак використовувати це як аргумент для скасування рейтингу за результатами випробувань здається нам вимагати скасування ПДВ, оскільки кілька підприємців уникають цього. Крім того, шахрайство можна порівняно ефективно виявити шляхом аналізу окремих даних. Ми поки цього не робимо, оскільки не маємо достатніх ресурсів. Однак у Словаччині це повинен робити Національний інститут сертифікованих освітніх вимірювань (NÚCEM). Якщо хтось вважає, що він не робить роботу належним чином, він повинен критикувати його за це, а не вимагати зняття рейтингу. Наприклад, INEKO виступає за публікацію назв шкіл, де доведено шахрайство.

Рейтинги збільшують відмінності між школами, що суперечить суспільним інтересам

Аргумент ґрунтується на тому, що інформацію про рейтинги часто можуть знаходити багатші батьки більш умілих дітей, які концентруватимуть більш умілих дітей у кращих школах, а менш вправних та бідних - у гірших. Як варіант, кращі школи можуть спробувати позбутися слабших учнів. Це проблема, особливо в початкових школах, оскільки суспільним інтересам є надання всім дітям приблизно однакових шансів отримати базову освіту.

Тому держава повинна вжити заходів для подолання розриву, наприклад, для підтримки відсталих шкіл. Однак він не може їх ідентифікувати без вимірювання результатів. Держава могла б усунути інформаційну нерівність шляхом обов’язкового інформування всіх батьків про результати школи. І проблема відкладення слабших учнів хоч би частково вирішила б більший наголос на доданій вартості шкіл.

Відмінності між школами в Словаччині існують вже давно і страшні навіть без нашого рейтингу. Можливо навіть, що без рейтингу заможніші батьки з кращими контактами були б ще вигіднішими у виборі школи, ніж сьогодні, коли рейтинг безкоштовно пропонують ЗМІ та наш портал. Крім того, без рейтингу ми навіть не знали, збільшуються чи зменшуються відмінності між школами, і ми не змогли б вжити необхідних заходів та оцінити їх наслідки.

На наш погляд, було б шкідливим скасувати рейтинг та залишити батьків без інформації та ризикувати покласти свою дитину до школи з небажаними результатами. Цей ризик є відносно високим з огляду на існуючі відмінності. Просто публікація цих відмінностей може створити тиск для їх пом’якшення. Те саме стосується вимірювання доданої вартості та покращення якості вимірювання.

Згідно із зарубіжним досвідом, рейтинги та конкуренція між школами можуть знизити якість освіти

Професійна література наводить приклади позитивного та негативного впливу рейтингу чи конкуренції на якість освіти. Останні тенденції досить влучно описує вже згаданий аналіз Інституту освітньої політики:

"У галузі освіти однією з міжнародних тенденцій останніх років є тиск на посилення відповідальності шкіл та вчителів за результати, досягнуті їх учнями (так звана підзвітність). З метою моніторингу цієї відповідальності найчастіше використовуються результати стандартизованих тестів, які, як передбачається, забезпечують кількісні, достатньо об'єктивні та одночасно точні дані про успішність учнів (OECD 2008, Вимірювання вдосконалення результатів навчання) ".

Висновок

Замість позиції, згідно з якою рейтинг слід відхиляти за недосконалість, ми вважаємо, що раціональною є позиція, яка підтримує все, що можна зробити, щоб зробити рейтинг ще більш точним. Наприклад, збір та публікація даних, необхідних для вимірювання доданої вартості, моніторинг індивідуальних навчальних шляхів студентів, публікація заробітної плати випускників середньої школи, розширення кола предметів та перевірених навичок, вдосконалення тестових питань та доповнення ними, наприклад, для учнів соціального походження або виявити шахрайство.

Ми вважаємо, що шкодою буде залишити школи без зворотного зв’язку та тиску батьків, які питають про причини кращих чи гірших результатів. У нас була ситуація, коли результати весь час до їх публікації були тихими. Загальне невдоволення рівнем нашої освіти, а також міжнародні порівняння показують, що це був не найкращий спосіб.

На жаль, критики рейтингового запиту щодо вдосконалення бази даних та методології оцінки рідко чують. Набагато частіше вони вимагають, щоб держава вирішувала проблеми в освіті з більш щедрим фінансуванням. Так багато з них хочуть грошей, але вони не хочуть, щоб ми вимірювали, що за це отримуємо.

Якби INEKO припинив публікувати рейтинги шкіл, рейтинги регулярно з’являлися б у газетах виключно за результатами Тестування 9 за один рік. І без контексту мова не повинна йти про якість, а також без адаптації для малих шкіл, які, можливо, мають нерівні результати через малу вибірку. Як ми писали вище, наші рейтинги складаються набагато ширше, з урахуванням малих шкіл і з урахуванням того, що це лише допоміжний показник, а не всебічна оцінка якості.