Page 63 - 6286
P. 63
Перше, що впадає в око – результати експериментальних ви-
пробувань перебувають в якісному протиріччі з основним по-
ложенням моделі Раша. Дійсно, ймовірність Р правильного ви-
конання завдання 2 слабкими студентами ( = 0 логітів, точка " ")
виявилася вищою, ніж показали набагато сильніші студен-ти ( = 2
логіта, точка "●"). Зрозуміло, що в такий ситуації не можна
розраховувати на прийнятне узгодження експерименту й теорії.
Суцільною лінією на рис. 6.2 показано результат підбору
характеристичної кривої, що відповідає найбільшій узгодженості з
експериментом для даного завдання. Видно, що узгодити
результати тестування з теоретичною моделлю не вдається. Точка
"", яка відповідає студентам з низьким рівнем знань, лежить
набагато вище, а точка "●", що характеризує студентів із високим
рівнем знань лежить значно нижче характеристичної кривої. Такий
результат є парадоксальним, оскільки показує, що слабші студенти
виконують завдання краще, ніж більш підготовлені. Скоріш за все,
це є наслідком простого вгадування. Таке завдання підлягає
вилученню з тесту, або його перероблюють для узгодження з
теоретичною моделлю. Звичайно, що перед переробкою треба
розібратися: що спричинило негативний результат – завдання
сформульоване невдало або тема "Неінерціальні системи відліку"
була незрозумілою для більшості студентів.
6.2. Оптимізація наповнення тесту
завданнями різної складності
Розглянемо спосіб удосконалення тестів, що базується на по-
рівнянні діаграми розподілу студентів за рівнями знань із діа-
грамою розподілу завдань за рівнем складності. Діаграми буду-
ють за результатами статистичної обробки даних, що отримані
при тестуваннях. Типовий їх вигляд показано на рис. 6.3.
Діаграма у верхній частині рисунку характеризує розподіл
студентів за рівнем знань. Вона побудована за принципом гісто-
грами, тобто складається зі стовпчиків, розташування, ширину
та висоту яких установлюють відповідним чином. У даному ви-
падку по осі абсцис відкладені значення рівня знань студентів у
безрозмірних одиницях – логітах. Тому розташування кож-
63