RUS  ENG
Полная версия
ЖУРНАЛЫ // Управление большими системами // Архив

УБС, 2021, выпуск 89, страницы 45–72 (Mi ubs1068)

Управление в социально-экономических системах

Экспериментальные исследования тестовых вопросов на основе точечного коэффициента

Н. С. Калмыковa, Ю. В. Сидельниковab

a ФГБУН Институт проблем управления им. В.А. Трапезникова РАН, Москва
b Московский авиационный институт (национальный исследовательский университет)

Аннотация: Экспериментально проверяется наличие объективной составляющей сложности задачи. С этой целью введен и экспериментально исследован так называемый «точечный коэффициент», позволяющий оценить уровень сложности задачи заданной в виде тестового вопроса. Именно на основе ответов на эти вопросы оценивается уровень сложности задачи. Предложены и экспериментально апробированы гипотезы, характеризующие динамику изменений значений точечного коэффициента. Также проверена устойчивость полученных выводов, базирующихся на результатах расчетов по двум качественно различным коэффициентам относительно числа опрашиваемых участников. Экспериментально найден и проверен критерий для определения тестового вопроса как задачи третьего уровня сложности. Основанием этого является характер изменения диапазона разброса значений гистограммного коэффициента. Проведено экспериментальное исследование наличия когнитивных искажений при оценивании экспертами некоторых задач тестового характера. Предложены возможные направления дальнейших разработок.

Ключевые слова: экспертные оценки, тестовый вопрос, точечный коэффициент.

УДК: 303.833.5+303.832.32
ББК: 65.054. 3+ 16.23+ 87.256.643

Поступила в редакцию: 31 августа 2020 г.
Опубликована: 31 января 2021 г.

DOI: 10.25728/ubs.2021.89.2



© МИАН, 2024