←3. Типичные ошибки при разработке тестовых заданий
Оглавление
4.2. Оценка заданий в рамках экспертизы→

4. ЭКСПЕРТИЗА ТЕСТОВЫХ ЗАДАНИЙ


4.1. Содержательная экспертиза


Экспертиза тестовых заданий является обязательным условием для создания тестов вне зависимости от уровня их применения. После того как задачи будут подготовлены, следует проверить их объективность и корректность формулировки. Задачу или вопрос можно считать объективными или корректно сформулированными, если мнения ряда экспертов о назначении задачи, вопроса, о правильности формулировки и пригодности вариантов ответов совпадают между собой.

В качестве экспертов тестовых заданий могут быть выступать специалисты с большим опытом работы. Первым этапом экспертизы является обсуждение теста на заседаниях кафедр. Самым простым вариантом экспертизы может быть такой, когда экспертам предлагается по трех- или пятибалльной шкале оценить задания с точки зрения:

соответствия целям тестирования (отвечает – частично отвечает – не отвечает);

– однозначности формулировки (однозначна – не совсем однозначна – неоднозначна);

– пригодности вариантов ответов (подходят – частично подходят – не подходят).

Если хотя бы один из экспертов оценивает задачу как частично соответствующую тесту, ее исключают. Если процент такой оценки ниже, то задача пересматривается и корректируется.

Более качественным вариантом содержательной экспертизы тестовых заданий является другой вариант, когда экспертам предлагается оценить тестовые задания по нескольким параметрам. Такую экспертизу должны проходить все тестовые задания на заседаниях кафедр. Методическими комиссиями по предмету оцениваются следующие составляющие задания:


Таблица 4.1


Элементы содержательной экспертизы тестовых заданий


Составляющие тестового задания

Способ

отметки

позитивной оценки

Способ отметки негативной оценки

1. Соответствие задания программам и стандартам обучения

+ или «ДА»

задание изымается

2. Соответствие задания заявленной теме

+ или «ДА»

задание изымается

3. Время на выполнение задания

+ или «ДА»

Прописывается время, необходимое для выполнения заданий, по мнению эксперта

4. Сложность задания (предполагаемое количество испытуемых в %, которые могут справиться с заданием)

+ или «ДА»

Прописывается сложность, по мнению эксперта

5. Правильность решения

(правильность ответа)

+ или «ДА»

По усмотрению эксперта задание изымается или надписывается правильный ответ

6. Оценка приемлемости варианта


+ или «ДА»

Эксперт дописывает предложения по исправлению варианта

7. Оценка предлагаемого варианта невербальной поддержки

+ или «ДА»

Замечания и предложения экспертов


Кроме содержательной экспертизы тестовых заданий, необходима и тестологическая экспертиза, в которой должны проверяться соответствие содержания задания и формы, правильность пространственного и логического расположения элементов заданий и другие элементы задания, которые не относятся к содержанию предмета.

Аспекты тестирования могут касаться как содержательной, так и технической стороны вопроса. Конвертация, например, выявляет многие негативные стороны технического исполнения теста – использование не обозначенных в OLE-библиотеке редакторов при создании теста, использование сканирования там, где есть возможность без него обойтись, нарушение инструкций, прилагаемых к программному продукту и т. п., поэтому может служить одним из этапов технической экспертизы.