Модуль анализа качества теста.

Данный модуль Места Преподавателя предназначен для оценки качества тестов с помощью методов классической тестовой теории.

Подробнее о том, как можно оценить качество теста и какие методы для этого используются, можно прочитать на этом же сайте в разделе Теория тестирования. Модуль анализа качества тестов построен с применением информации опубликованной в данном разделе. Прочитайте, и возможно Вы лучше поймете назначение и принципы работы данного модуля.

Кроме того, всем кто интересуется теорией тестирования, историей тестов, методами оценки качества тестов, советую подписаться на нашу почтовую рассылку. Сделать это можно >>здесь<<. Там же можно подробнее узнать о содержании рассылки.

Теперь непосредственно перейдем к описанию модуля.

Данный модуль состоит из пяти взаимодополняющих друг друга страниц.

Первая страница.
Первичная оценка теста.

На данной странице разработчик теста может поработать с матрицей результатов тестирования и бегло оценить различные характеристики тестовых заданий. В матрице все правильные варианты ответов пользователя представлены 1, а неправильные 0.

При первом запуске модуля анализа качества теста, страница будет содержать лишь пустую таблицу (матрицу результатов).

Для заполнения данной матрицы в частности, и для начала анализа теста в целом, необходимо предварительно выбрать, какой тест мы хотим проанализировать. Для выбора теста, в верхней части окна модуля, располагаются два списка выбора: с наименованием дисциплин и номерами тестов, которые доступны в данный момент пользователю модуля для анализа.

Рис. 1. Матрица результатов модуля анализа качества теста.

Кроме того, в правом верхнем углу расположена кнопка "Загрузить из файла...", которая позволяет загрузить матрицу результатов из внешнего файла. Внешний файл должен представлять из себя отформатированный специальным образом файл Microsoft Excel 97. Пример такого файла включен в комплект поставки комплекса программ и находится в одной папке с исполняемым модулем Места Преподавателя.

Справа от списка выбора "Тест" располагается кнопка "Рассчитать", которая инициализирует процесс расчета всех необходимых параметров, по которым разработчик теста делает вывод о качестве теста. Другими словами, после нажатия на данную кнопку, все страницы модуля анализа качества теста будут заполнены характеристиками выбранного теста.

Рис. 2. Нижняя часть матрицы результатов.

Матрицу результатов тестирования можно сортировать как по строкам, так и по столбцам.

По столбцам матрицу результатов можно сортировать тремя различными способами:

• по уникальному идентификатору тестового задания;
• по числу правильных ответов на тестовое задание(самые сложные тестовые задания будут стоять в начале матрицы);
• по числу неправильных ответов на тестовое задание(самые простые тестовые задания будут стоять в начале матрицы);

Список выбора режима сортировки матрицы результатов по столбцам находится справа внизу, сразу под матрицей.

Для сортировки матрицы результатов по строкам, достаточно нажать левую кнопку мыши на одном из заголовков любого столбца. Слева от названия столбца появиться треугольник, показывающий направление сортировки.

Имеется возможность быстрого поиска тестового задания по его уникальному идентификатору (слева внизу, сразу под матрицей).

Кроме того, в нижней части первой страницы, расположены три переключателя.

Первый из них позволяет задействовать фильтр тестовых заданий. Данный фильтр помогает "на глаз" оценить коррелируемость двух тестовых заданий.

Второй и третий переключатели относятся к категории, так называемых, "цветовых фильтров", которые очень интенсивно используются в данном модуле анализа качества теста.

Основное преимущество "цветовых фильтров" заключается в том, что разработчик теста может избавиться от утомительной работы с числами и перейти к более абстрактной работе с цветами.

"Цветовые фильтры" способны резко повысить эффективность работы разработчика теста, так как ему не придется вдумываться в смысл каждого числа, а достаточно лишь посмотреть на его цвет.

"Цветовые фильтры" объединяют, часто уникальные числа, в менее уникальные цветовые группы.

Для матрицы результатов тестирования, "цветовые фильтры" не столь полезны, как для рассматриваемой далее корреляционной матрицы, так как матрица результатов тестирования достаточно однородна (0 и 1). Но даже в матрице результатов их использование совсем не лишнее.

Рис. 3. Матрица результатов модуля анализа качества теста с включенными "цветовыми фильтрами".

Действие первого цветового фильтра понятно и без комментария.

При включении второго цветового фильтра, в матрице результатов будут выделены столбцы, в которых расположены тестовые задания с трудностью больше, чем указано в критерии для данного цветового фильтра (на рис. 3. критерий 0,700).

И на последок, пара интересных возможностей.

Если Вы нажмете правую кнопку мыши находясь на заголовке одного из столбцов матрицы, то Вы сможете увидеть тестовое задание с указанным идентификатором, которое будет загружено в интерфейс Места Пользователя.

Если Вы сделаете двойной щелчок мыши (левой кнопкой) находясь на заголовке одной из строк матрицы, то Вы сможете увидеть кому принадлежат данные результаты тестирования (данная строка в матрице).

Куда дальше
	Корреляционная и детерминационная матрицы >>