Анализ статистических методов, используемых при разработке теста диагностики индивидуального прогресса

Диагностический комплект для мониторинга индивидуального прогресса учащихся школы апробировался на 10 пилотных площадках, расположенных в Самарской области, республики Чувашия, городах Томск, Москва, Красноярск. Апробация основывалась на трех тестовых срезах, которые проводились в 2003-2005 годах. В каждом тестировании участвовало около 2700 учащихся 2-4 и 6-9 классах.

Задача первого среза заключалась в первичном опробовании массива разработанных тестовых заданий. Поэтому на этом этапе статистические методы не использовались.

Задачей второго и третьего срезов являлось как получение данных об учащихся, так и статистическое подтверждение качества тестовых задач.

Для проведения соответствующего анализа были отобраны данные двукратного выполнения одного и того же набора заданий одними и теми же учащимися. То есть, по сути, была применена процедура повторного тестирования и сопоставления результатов двух идентичных срезов. При этом, для сохранения возможности сравнения данных, полученных на разном предметном материале (математика, физика и т.д.), из выборки исключались учащиеся, которые выполняли тест не полностью (например, решали задания по математике, но не решали по физике).

В итоге общая выборка испытуемых составила 4106 человек, из них 734 человека – учащиеся начальной школы и 3372 – учащиеся основной школы.

Напомним, что нас будет интересовать тест по математике в основной школе, в апробации которого участвовало 1140 учеников.

Решая вопрос о валидности теста, авторы исходили из того, что в данном случае говорить о содержательной валидности не имеет смысла, поскольку измеряемый объект (компетентность) на сегодня не имеет устоявшегося общепринятого описания. В то же время, поскольку в основу построения тестового инструмента положена специально разработанная для данного проекта теоретическая схема, желательна проверка ее адекватности. В литературе такого рода валидность теста называется конструктной, или концептуальной. Для проверки конструктной валидности авторами было сформулировано несколько гипотез относительно возможных результатов тестирования, которые были подвергнуты эмпирической проверке. Рассмотрим их:

Уровни заданий положительно связаны с мерой их статистической трудности.

Тестируемый параметр (мера опосредствования) имеет тенденцию прогрессировать и повторное тестирование (при достаточном временном интервале) должно фиксировать прирост результатов.

Результаты тестирования по разным предметам специфичны и не должны сильно коррелировать между собой.

Результаты тестирования с помощью данного инструмента не должны сильно коррелировать с данными классических тестов умственного развития типа ШТУР.

При проверке первые две гипотезы являлись основными, вторые две – вспомогательными. Для проверки гипотез вычислялся ряд первичных характеристик для теста. Главной целью статистической обработки на данном этапе было подтверждение или опровержение гипотез для проверки конструктной валидности.

Для проверки третьей и четвертой гипотез вычислялся коэффициент корреляции между достижениями по разным предметам, который показал, что корреляция является незначительной. Это означает, что школьные достижения предметно специфичны, и для получения полной картины продвижения ребенка необходимо учитывать весь набор основных предметов.

Социально – педагогические условия благоприятной адаптации учащихся начальной школы в среднем звене
Практически любой учитель скажет, что начало пятого класса — сложный период, и не только для ребенка, но и для учителей, и для родителей. Проблем много, и они не ограничиваются рамками учебного процесса, но связаны и с организацией жизни в школе в целом. «Создание социально-педагогических условий, ...

Исторические подходы к обучению азбуке
Еще в середине XIX века обучение чтению для русских детишек было нелегкой задачей. Метод, с помощью которого учили педагоги того времени, назывался буквослагательным, и был он очень длительным и трудоемким. Сначала малыши заучивали буквы: аз, буки, веди, глаголь, добро и т. д. Вызубрив весь алфавит ...

Сущность и значение деятельности и общения в воспитательном процессе
Развитие любого человека происходит в процессе воспитания, когда предшествующее поколение передает накопленный опыт последующему, которое его приумножает и обогащает. Воспитание — процесс целенаправленного формирования личности. В современной педагогической литературе и практике понятие "воспи ...