Введение в курс составления тестов

Введение в курс составления тестов.

Еловикова Дарья

При всей общеупотребительности понятия «тест» под ним понимаются нередко совершенно разные диагностические

методики или существенно различающиеся задания.

ТЕСТ — система взаимосвязанных заданий для контроля усвоения знаний, сформированности умений, навыков учащихся по определённому учебному материалу или практических знаний.

Обозначим терминологически следующие понятия:

ТЕСТОВОЕ ЗАДАНИЕ (тест-задание) — один из составляющих элементов структуры дидактического теста, включающий в себя краткую инструкцию для обследуемого, тестовую задачу, эталон ответа (или описание чёткого алгоритма выполняемых обследуемым действий). В наиболее распространённых тестах закрытого типа в структуру тестового задания входят варианты ответа (как правильные, эталонные, так и отвлекающие, «дистракторы»).

СУБТЕСТ — группа тестовых заданий, предназначенных для выявления одного из элементов структуры умений, навыков, значимого психического качества, либо относительно самостоятельного раздела знаний (по теме, по разделу, по предмету).

БАТАРЕЯ ТЕСТОВ — серия специально подобранных для диагностики тестов, каждый из которых является самостоятельной методикой со своими диагностическими характеристиками и возможностями. Обычно батареи тестов в дидактическом тестировании применяются при входном и итоговом контроле уровней подготовки поступающих или выпускников, а также при переходе учащихся с одной ступени обучения на другую.

знание фактов, их причин, различий;·

знание научных и иных проблем по изучаемой теме;·

знание фундаментальных понятий по теме, их определений, представление об объеме и содержании понятий, знание практических применений понятий;·

знание основных правил, закономерностей и законов, их формулировок, условий и границ проявления, специфики применения;·

знание теорий, опытных фактов, послуживших основой их разработки; основных положений, уравнений, доказательств, выводов, практических приложений, прогностических возможностей.

Проверять знания – значит проверять:

владение фактами: установление их причин, взаимосвязей;·

владение проблематикой: формулирование проблем по теме, умение отыскивать возможные пути решения проблемы;

владение понятиями: узнавание, определение понятий, раскрытие их объема, характеристика количественного состава объектов, их классификация, взаимосвязи, практическое применение понятий;·

владение правилами, закономерностями и законами: узнавание, формулирование, раскрытие содержания, раскрытие действий, связанных с применением;·

владение теориями: узнавание, отыскание опытных фактов, необходимых для разработки теории, раскрытие содержания теории (характеристика основных положений, уравнений, доказательств, выводов, осуществление на основе теории практических действий.

Проверять умения – значит проверять:

построения и осуществления алгоритма операций выполнения конкретных действий в структуре умения;·

моделирования практического выполнения действий, составляющих данное умение;·

выполнения комплекса действий, составляющих данное умение;· самоанализа результатов выполнения действий в сопоставлении с целью деятельности;·

времени выполнения умения.

Проверять наличие навыков – значит проверять навыки:·

Во-первых, он должен быть надежным. Надежность теста означает «согласованность» оценок у обследуемых лиц при их повторном тестировании тем же самым тестом или его эквивалентной формой.

РЕКОМЕНДАЦИИ ПО СОСТАВЛЕНИЮ ТЕСТОВЫХ ЗАДАНИЙ.

Во-вторых, он должен быть валидным. Исследование валидности должно давать ответ на вопрос, действительно ли данный тест измеряет то, для измерения чего он предназначен.

В педагогической практике используются четыре основных вида тестовых заданий:

Задания на соответствие

Задания на установление правильной последовательности

Открытые

Закрытые

Соответствие между автором и его произведением:

Пример ТЗ на соответствие:

Автор Книга

1.Эко а)Имя розы

2. Веллер б)Приключения Звягина

3. Гарсиа Маркес в)Полковнику никто не пишет

4. Коэльо г)Властелин колец

д)Вечер в Византии

е)Алхимик

Установите правильную последовательность действий бурильщика при бурении шпура:

установить бур в бурильную машину

продуть шланги сжатым воздухом

включить машину на полную мощность

соединить буровую штангу с коронкой

подключить шланги к бурильной машине

включить машину на небольшую подачу

забурить шпур

Пример ТЗ на установление правильной последСлайд 22овательности:

Настоящая фамилия В.И.Ленина -…

Компьютер – это_________автоматическое__________устройство для______________и передачи ________________

Примеры ТЗ открытого типа:

В соответствии с Женевскими конвенциями 1949 г.комбатантами являются:

А- все лица, включая гражданское население в период вооруженного конфликта;В- все лица, входящие в состав вооруженных сил;

С- лица, входящие в состав вооруженных сил и имеющие право непосредственно принимать участие в боевых действиях;

Д- медицинский и интендантский персонал, духовенство, юристы, журналисты.

Пример закрытого ТЗ:

1. ТЗ должно быть представлено в форме краткого суждения, сформулированного четким языком и исключающего двойное толкование.

2. Тест должен проверять конкретный заявленный объем знаний, умений, навыков.

Рекомендуемые требования к составлению тестовых заданий

3. Число заданий в тесте должно быть согласовано со временем выполнения теста и НЕ должно быть слишком мало (по 1-2мин. на задание).

4. Содержание ТЗ НЕ должно содержать повторов, двойных отрицаний, сленга и непреднамеренных подсказок.

5. В тексте ТЗ НЕ должно отражаться субъективного мнения или понимания.

6. Нельзя использовать сокращения и аббревиатуры, за исключением стандартизованных.

7. В формулировке ТЗ НЕ должно быть повелительного наклонения (выберите, вычислите, укажите и т.д.).

8. В заданиях закрытого типа НЕ должно быть заведомо ложных ответов.

9. Недопустимы ответы типа: все выше перечисленное верно, все указанные ответы неверны, и т.д.

10. Формулировка ТЗ должна быть выражена в повествовательной форме (вопрос исключается).

11. Лучше «длинный» вопрос и «короткие» ответы, чем наоборот.

В первой группе должно быть не менее 2-х элементов.

Количество элементов второй группы должно превышать количество в первой, но не более, чем в 2 раза и должно быть не более 8.

Вторая группа должна содержать дистракторы (ложные суждения)

Дополнительные требования к ТЗ на соответствие.

1. Каждое задание должно быть нацелено только на одно дополнение, место для которого обозначается точками.

2. Пропускаем ключевой элемент, знание которого является наиболее существенным.

3. Пропуски лучше ставить как можно ближе к концу задания.

Дополнительные требования к открытым ТЗ

1. Все ответы к одному заданию должны быть приблизительно одной длины.

2. Повторяющиеся слова в ответах вводятся в основной текст задания.

3. Ни один из дистракторов не должен быть частично правильным заключением, превращающимся при определенных дополнительных условиях в правильный ответ.

4. Все ответы должны быть параллельными по конструкции и грамматически согласованными с основной частью задания.

Дополнительные требования к закрытым ТЗ

При проведении тестового контроля знаний, умений и

навыков тестируемый должен получить

минимальный объем информации с советами и

требованиями по проведению тестирования,

своего рода памятку-инструкцию.

1. Для наиболее эффективной работы с тестами рекомендуем ознакомиться со следующими правилами:

2. Проработайте весь тест, отвечая только на те вопросы, которые не вызывают сомнений в ответе, выполните эти задания.

3. Потом подумайте над остальными вопросами, только не слишком долго размышляйте. Помните, что время тестирования ограничено и по статистике, именно первая реакция оказывается правильной.

4. Не отчаивайтесь и попробуйте угадать, использовав эрудицию и интуицию, ответы на оставшиеся вопросы. Так как при подсчете результатов тестирования все равно учитываются только правильные ответы, вы этим не ухудшите результат, а приобретете дополнительные шансы.

5. Сначала нужно прочитать каждое задание внимательно идо конца! Необходимо прочитать и понять, что от тебя требуется.

Она может включать в себя следующую информацию:

- задавать вопросы по процедуре выполнения теста;

- выполнять работу самостоятельно;

- в рамках процедуры выбирать темп и порядок выполнения работы.

Вы имеете право:

- пользоваться любыми справочными материалами и другими материалами и инструментами;

- разговаривать с кем бы то ни было, получать консультации во время работы над тестом, отвлекать других.

Во время тестирования запрещается:

Специфика работы по созданию ТЗ заключается в том, что, в большинстве случаев априорно невозможно оценить качество создаваемого ТЗ. Оценка качества ТЗ определяется в процессе их использования в учебном процессе. Эта работа заключается в выявлении ТЗ, не соответствующих заданному уровню сложности и их удалению из банка ТЗ, либо измене их статуса.

Трудность задания — процент испытуемых, верно выполнивших данное задание. Наиболее эффективным считают задание с уровнем трудности 50%. Если все задания такие, то максимальна дифференцирующая способность теста и распределение баллов за выполнение теста близко к нормальному.

Следует стремиться к отбору заданий с трудностью 40-60%. Предлагается включать в тест 20% тестовых заданий малой трудности (более 70% правильных ответов), 70% средней трудности (29 – 69% правильных ответов) и 10% тестовых заданий большой трудности (менее 25% правильных ответов).Выбор неверного ответа большим количеством сильных студентов говорит о том, что что-то не так с этим ответом.

Выбор неверного ответа малым количеством студентов говорит о его малом правдоподобии.

В хороших заданиях правильный ответ выбирает максимальное число испытуемых, а выборы неправильных ответов распределены равномерно. «Хороший» неверный ответ выбирается большим числом слабых студентов. Невыполнение задания — тоже сигнал к анализу причин. Если его выполнило менее 5% (остальные в принципе не выполняли) – следует внимательно посмотреть – почему.

Наконец, ТЗ для текущего контроля и самоконтроля не должны совпадать с используемыми в учебном процессе ТЗ для итогового контроля знаний.