Реклама

Непізнаний світ

20 червня 2018
nevdoma-astrologia Людина завжди прагнула дізнатися про своє майбутнє, при цьому в хід ішли найрізноманітніші способи. Одним з них є астрологія – наука про те, як небесні тіла та їх взаємне положення відносно один одного і Землі впливають на долю людини щодо місця та...
30
20 червня 2018
300-spartancv--pershii-dosvd-propagan Розглядати ту чи іншу історичну подію слід з огляду на час, у який воно відбувалося. Однак, існують деякі події або явища, які лежать «поза часом», оскільки оповідають про вічні цінності, не мінливих у людської цивілізації протягом...
20


ЗНО

Про результати попереднього аналізу проведення зовнішнього незалежного оцінювання з англійської мови

Коментар Українського центру оцінювання якості освіти щодо аналізу попередніх результатів основної сесії зовнішнього незалежного оцінювання з англійської мови.

Фахівцями Українського та регіональних центрів оцінювання якості освіти було проведено аналіз попередніх результатів основної сесії зовнішнього незалежного оцінювання з англійської мови, зокрема характеристик як окремих частин сертифікаційної роботи, так і сукупності завдань №1 - 58 тесту.

Усі розрахунки були здійснені за результатами обробки більш ніж 95% бланків відповідей типу А (усі завдання тесту крім завдання №59, частина «Письмо») учасників тестування. Крім того, було проаналізовано відповідність характеристик техніки, яку було використано в пунктах проведення ЗНО, встановленим вимогам.

Дослідження показало, що успішність учасника тестування на завданнях з аудіювання прямо пов’язана з його/її успішністю із виконання інших завдань тесту (коефіцієнт кореляції між результатами розділу аудіювання й загальною кількістю балів за виконання бланку А становить 0,81).

Аналіз попередніх результатів тестування вказує на те, що частина «Розуміння мови на слух» (аудіювання) тесту з англійської мови має високі психометричні характеристики. Розподіл результатів учасників тестування наближається до нормального, що свідчить про належну якість цієї частини тесту.

Дані на графіку засвідчують, що аудіювання відповідає рівню підготовки учасників тестування, більш за те права асиметрія графіка указує на те, що блок аудіювання є відносно легким для учасників тестування (серед учасників тестування більше тих, хто отримав від 9 до 16 балів, ніж тих, хто отримав від 0 до 8 балів).

Показовим є те, що лише 0,02 % учасників тестування отримали 0 балів, тоді як максимальну кількість балів (16 балів) отримали 1,4 % учасників. Варто зазначити, що від нуля до чотирьох балів отримали 7,1% учасників тестування, від 13 до 16 балів – 11,9%.

Якщо ж говорити про психометричні характеристики завдань на аудіювання, то з 16 завдань одне (№ 14) виявилося дуже легким, його виконали понад 80 % учасників тестування, одне – легким (№ 1), його виконали 79 % учасників тестування, усі інші – оптимальними (їх виконали від 40 до 59% учасників тестування).

До Українського центру також надходили численні скарги про нібито нерівність умов, у яких перебували учасники тестування під час прослуховування аудіозаписів, знаходячись в різних аудиторіях або на різних місцях аудиторії. Усього тестування проходило в 6 028 аудиторіях, з яких у 5 989 було від 5 до 15 учасників.

Аналіз результатів учасників з таких аудиторій (аудиторії, в яких було від 5 до 15 учасників) показав, що у 74,2% аудиторій принаймні один учасник набрав від 13 до 16 балів (із 16 можливих) за аудіювання. Вибірковий аналіз решти аудиторій засвідчує, що рівень виконання частини аудіювання тесту відповідає потенційним можливостей учасників, які знаходилися в аудиторії (показник кореляції між аудіювання й іншою частиною результатів за виконання бланка А є високою).

Зауваження про різні умови тестування від осіб, які працювали біля потенційних джерел шуму (вікон), на віддалених від аудіопристрію місцях тощо також не підтвердилися – розподіл результатів учасників тестування красномовно свідчить про відсутність будь-яких суттєвих відмінностей у результатах здобутих учасниками на різних місцях в аудиторії (див. графік нижче).

Учасники, які в закладах освіти вивчали англійську мову на рівні стандарту, а не на профільному рівні, указували на високу складність для них частини «Розуміння мови на слух». Дані аналізу підтверджують, що учасники тестування, які вивчали англійську на профільному рівні, мають вищі результати з аудіювання ніж ті, які вивчали цей предмет на рівні стандарту. Однак різниця в результатах, на думку фахівців, є природньою і зумовлена різним рівнем підготовки цих категорій учасників.

Окрім звернень щодо високої складності завдань на аудіювання, до Українського центру також надходили скарги про невідповідність окремих завдань частини тесту «Використання мови» вимогам навчальним програмам. Фахівці центру проаналізували психометричні характеристики всіх завдань цього розділу й підтвердили необхідність ретельного змістовного аналізу завдань № 51, № 55 та № 58 під час формування шкали переведення тестових балів учасників тестування, які навчалися на рівні стандарту, у шкалу 1–12 балів результатів державної підсумкової атестації.

Відповідна інформація буде розглядатися на засіданні експертної комісії з питань визначення результатів зовнішнього незалежного оцінювання, що використовуються як державна підсумкова атестація, при Українському центрі оцінювання якості освіти.

З огляду на вищезазначене варто наголосити, що психометричні характеристики як тесту з англійської мови загалом, так і його окремих складників відповідають заданим проектною специфікацією тесту вимогам, а пропозиції щодо виключення окремих частин тесту під час визначення тестових балів учасників з англійської мови є необґрунтованими.

Щодо техніки, яка використовувалася на пунктах тестування: фактів використання аудіопристроїв, які за своїми параметрами не відповідають нормативним вимогам, не встановлено, як і випадків повного зриву частини тесту аудіювання в окремих аудиторіях.

У пунктах проведення ЗНО було подано 65 апеляційних заяв, проте більшість заявників не висловили бажання пройти тестування повторно під час додаткової сесії, а лише зазначали про неналежні умови тестування. Регламентні комісії при регіональних центрах оцінювання якості освіти вивчили всі обставини, викладені в апеляційних заявах, за результатами чого задоволено 4 такі заяви (заявники отримали можливість пройти тестування під час додаткової сесії).

Висновки

Ґрунтовний аналіз змістовних і процедурних аспектів тестування основної сесії зовнішнього незалежного оцінювання з англійської мови дає підстави стверджувати, що системних проблем, які б могли розглядатися як критичні для визначення результатів учасників тестування, не виявлено. Окремі ускладнення, що виникали на пунктах проведення тестування, вчасно були усунуті, що забезпечило можливість усім учасникам пройти тестування на рівних, зокрема й під час виконання частини завдань на аудіювання.

У свою чергу питання, пов’язані зі змістом окремих тестових завдань, будуть взяті до уваги під час розрахунку шкал визначення результатів учасників тестування.

Упевнені, що навчальні досягнення випускників з англійської мови будуть об’єктивно й справедливо оцінені. Український центр протягом усіх років свого понад десятирічного існування докладав і зараз продовжує докладати максим зусиль для забезпечення якісних інструментів і процедур оцінювання випускників шкіл і завжди відкритий на конструктивний діалог у разі виникнення проблем.

За матеріалами Українського центру оцінювання якості освіти.


Новіші інформаційні сюжети:



Реклама

Непізнаний світ

20 червня 2018
nevdoma-astrologia Людина завжди прагнула дізнатися про своє майбутнє, при цьому в хід ішли найрізноманітніші способи. Одним з них є астрологія – наука про те, як небесні тіла та їх взаємне положення відносно один одного і Землі впливають на долю людини щодо місця та...
30
20 червня 2018
300-spartancv--pershii-dosvd-propagan Розглядати ту чи іншу історичну подію слід з огляду на час, у який воно відбувалося. Однак, існують деякі події або явища, які лежать «поза часом», оскільки оповідають про вічні цінності, не мінливих у людської цивілізації протягом...
20


Реклама GOOGLE