Классические шкалы оценки знаний

Развитие образования » Оценка качества теста » Классические шкалы оценки знаний

Страница 3

По другой версии, коэффициент надёжности определяется как

,

где — дисперсия ошибок измерения, — дисперсия набранных баллов, т. е. время в таком определении коэффициента надёжности вообще не упоминается.

Сомнительность подобных вычислений с математической точки зрения связана с тем, что исходные данные изначально получены по шкале баллов, на которой бывает задано отношение порядка, и даже линейного порядка, но не определены арифметические операции. Следовательно, сложение и вслед за ним вычисление средних, взвешенных средних, дисперсий и корреляций на шкале баллов не определено. Ещё одно предположение, понятное с прагматической точки зрения, но с явно неадекватным теоретическим обоснованием, сводится к утверждениям о нормальном распределении ответов и, следовательно, с распределением «сырых баллов» на шкале действительных чисел. Предположение о логнормальном распределении тех же баллов часто кажется более правдоподобным, но содержательно обычно тоже не обосновывается. Эти предположения позволяют использовать при статистической обработке результатов хорошо известные методы, но математическая корректность всех последующих вычислений после этого предположения не обсуждается.

В литературе широко обсуждаются многие проблемы традиционного подхода к построению шкал (метрик) знаний как баллов за выполнение некоторых специально подобранных наборов заданий.

Прежде всего, практически невозможно доказать test-to-test- и intertest-валидность, следовательно, вопрос о сравнении и тем более об общем учёте результатов измерений, выполненных по разным методам, остаётся открытым.

Многократно отмечены «эффекты края», т. е. относительная устойчивость результатов ближе к медиане распределения ответов и неустойчивые результаты по краям этого распределения, что обычно объясняется возрастанием роли инородных факторов как в «нижней», так и в «верхней» части распределения. В качестве борьбы с этими эффектами обычно предлагается эмпирически обоснованная рекомендация задать некоторый «доверительный квантиль» распределения , обычно предлагается принять , или , и при попадании ответа ниже или выше вносить поправки на нестабильность, главным образом, завышать полученные оценки по эмпирически подобранным поправочным формулам.

В случае закрытых вопросов возможны ситуации случайного угадывания, для коррекции данных в этом случае предлагается вносить поправки вида

,

где — результат после коррекции, — результат (в баллах или другим шкалам) ответа на -й вопрос до коррекции, — количество возможных ответов на -й вопрос, w — количество невыполненных заданий в серии измерений. Эта формула обосновывается эмпирически, в частности, обсуждается вопрос о целесообразности учёта в этой формуле невыполненных заданий, для которых соответствующее значение , что уменьшает значение , и идут дискуссии о содержательном смысле подобных поправок.

Страницы: 1 2 3 4 5 6 7

Авторский элективный курс "основы медицинских знаний": задачи и содержание программы
Авторский элективный курс "Основы медицинских знаний" предлагается для учащихся, проявивших интерес к физиологии, анатомии и другим биологическим дисциплинам. Курс рассчитан на 17 часов. Занятия по предпрофильному обучению будут способствовать овладению учащимися системой медицинских знан ...

Мультимедийное программное обеспечение
Программное обеспечение - наряду с аппаратными средствами, важнейшая составляющая информационных технологий, включает компьютерные программы и данные, предназначенные для решения определённого круга задач и хранящиеся на машинных носителях. Программное обеспечение представляет собой либо данные для ...

Состояние проблемы развития основ изограмотности у детей младшего дошкольного возраста
С первых же занятий у детей воспитывается устойчивый интерес к рисованию, который к четырем годам принимает более целенаправленный характер. Интерес к результатам данной деятельности формируется постепенно, так как в начале года дети, создавая рисунок, полностью поглощены процессом деятельности и м ...

Навигация

Copyright © 2021 - All Rights Reserved - www.creativeeducation.ru