Классические шкалы оценки знаний

Развитие образования » Оценка качества теста » Классические шкалы оценки знаний

Страница 3

По другой версии, коэффициент надёжности определяется как

,

где — дисперсия ошибок измерения, — дисперсия набранных баллов, т. е. время в таком определении коэффициента надёжности вообще не упоминается.

Сомнительность подобных вычислений с математической точки зрения связана с тем, что исходные данные изначально получены по шкале баллов, на которой бывает задано отношение порядка, и даже линейного порядка, но не определены арифметические операции. Следовательно, сложение и вслед за ним вычисление средних, взвешенных средних, дисперсий и корреляций на шкале баллов не определено. Ещё одно предположение, понятное с прагматической точки зрения, но с явно неадекватным теоретическим обоснованием, сводится к утверждениям о нормальном распределении ответов и, следовательно, с распределением «сырых баллов» на шкале действительных чисел. Предположение о логнормальном распределении тех же баллов часто кажется более правдоподобным, но содержательно обычно тоже не обосновывается. Эти предположения позволяют использовать при статистической обработке результатов хорошо известные методы, но математическая корректность всех последующих вычислений после этого предположения не обсуждается.

В литературе широко обсуждаются многие проблемы традиционного подхода к построению шкал (метрик) знаний как баллов за выполнение некоторых специально подобранных наборов заданий.

Прежде всего, практически невозможно доказать test-to-test- и intertest-валидность, следовательно, вопрос о сравнении и тем более об общем учёте результатов измерений, выполненных по разным методам, остаётся открытым.

Многократно отмечены «эффекты края», т. е. относительная устойчивость результатов ближе к медиане распределения ответов и неустойчивые результаты по краям этого распределения, что обычно объясняется возрастанием роли инородных факторов как в «нижней», так и в «верхней» части распределения. В качестве борьбы с этими эффектами обычно предлагается эмпирически обоснованная рекомендация задать некоторый «доверительный квантиль» распределения , обычно предлагается принять , или , и при попадании ответа ниже или выше вносить поправки на нестабильность, главным образом, завышать полученные оценки по эмпирически подобранным поправочным формулам.

В случае закрытых вопросов возможны ситуации случайного угадывания, для коррекции данных в этом случае предлагается вносить поправки вида

,

где — результат после коррекции, — результат (в баллах или другим шкалам) ответа на -й вопрос до коррекции, — количество возможных ответов на -й вопрос, w — количество невыполненных заданий в серии измерений. Эта формула обосновывается эмпирически, в частности, обсуждается вопрос о целесообразности учёта в этой формуле невыполненных заданий, для которых соответствующее значение , что уменьшает значение , и идут дискуссии о содержательном смысле подобных поправок.

Страницы: 1 2 3 4 5 6 7

Преподавание уголовного права в школе
Одной из ведущих отраслей российского права является уголовное право, регулирующее важную сферу человеческих отношений, определяя, какие поступки людей опасны для общества, государства, человека, и устанавливая наказания за их совершение. Рассматривая особенности российского уголовного закона, обуч ...

Профессионально–педагогическая направленность обучения студентов
Курсы педагогического института по высшей математике должны: 1) в первую очередь освещать на современном научном уровне те вопросы, которые учитель излагает в школе; 2) обеспечивать широкий кругозор студентов в математике, знакомство по мере возможности с современной математикой и её задачами. Поэт ...

Примерный дидактический материал по автоматизации и дифференциации свистящих звуков
Автоматизация звука. Воспитатель рисует в тетради ребенка картинки, в названиях которых звук с находится в определенной позиции: в начале слова: сани, совы, солома, сад, сын, сом, суп, сук, сапоги, салют, самокат, сабля, судно, стакан, скала, солонка, стул, скамейка, стол; в середине: оса, бусы, ус ...

Навигация

Copyright © 2019 - All Rights Reserved - www.creativeeducation.ru