Меню Рубрики

Типы, формы и виды тестовых заданий. Виды тестов и формы тестовых заданий - лекция Типы тестовых заданий с примерами

Любой тест представляет собой совокупность тестовых заданий . Тестовое задание – основная составляющая часть теста, которая состоит из инструкции для учащихся, текста задания, имеет однозначный правильный ответ и характеризуется набором показателей.

С точки зрения разработчика тестовые задания имеют следующую структуру:

1. Инструкция .

2. Текст задания (в том числе предлагаемые варианты ответов) . 3. Правильный ответ .

Инструкция содержит указания, что надо делать испытуемому, как выполнять задание, где отмечать, как дописывать, сообщается общее время тестирования и т.д. Если тест имеет различные формы заданий, то при смене форм, перед каждым субтестом дается дополнительная инструкция по выполнению новой формы задания. Задания в субтесте рекомендуется располагать по нарастанию трудности.

После инструкции в тесте располагаются пронумерованные тестовые задания. Задания могут формулироваться как в утвердительной, так и в вопросительной форме и содержать или не содержать варианты ответов. Тестовое задание должно иметь однозначный правильный ответ.

Тестовые задания подразделяются по типам, формам и видам. В пользу разнообразия форм тестовых заданий можно привести следующие доводы:

— задания разной формы делают процесс тестирования менее монотонным, отодвигают порог наступления утомления, и в тест можно поместить большее количество заданий, что увеличивает его надежность;

— для разных элементов содержания образования подходят разные по форме задания, поэтому сведение многообразия учебного материала к одной форме заданий заведомо делает подобные тесты не соответствующими содержанию обучения и, тем самым, менее качественными (даже при большом количестве заданий).

Перед рассмотрением различных видов тестовых заданий вспомним 4 уровня усвоения знаний, выделенных В.П.Беспалько .

I. Уровень знакомства с учебным материалом (ведущие познавательные действия – узнавание, распознавание, различение).

II. Уровень репродуктивного воспроизведения (воспроизведение учебной информации по памяти или смыслу в знакомой ситуации, действие по образцу).

III. Уровень воспроизведения в измененной ситуации (собственные примеры, ситуации из жизни) – основной уровень в школе.

IV. Уровень творческого применения знаний с формированием нового знания.

Соответственно четырем уровням усвоения знаний формируются и тестовые задания четырех уровней. Тем самым снимаются возражения некоторых педагогов по поводу примитивности и простоты тестовых заданий.

Тестовые задания I уровня представляют собой задания на опознание, различение или классификацию объектов, явлений, понятий. Учащемуся необходимо определить, относится отдельно взятый объект к данному классу (виду) или нет. Более сложная форма – «выборочный» тест, когда выполнение задания осуществляется в условиях «помехи», создаваемой сходными вариантами ответов. Часто в таких тестовых заданиях используются «неполные» ответы, с пропуском существенных деталей.

Тестовые задания II уровня нередко составляются как «тесты-подстановки», в них учащиеся должны воспроизвести слово, фразу, формулу или другой элемент знания, пропущенный в тексте. Более сложны «конструктивные» тесты, в которых ученик должен воспроизвести (сконструировать) требуемое в полном объеме. Новой информации из теста он не получит.

Тестовые задания III уровня специально разрабатываются для проверки определенных умений и содержат «типовые» вопросы и задачи. Обучающий эффект тестовых заданий третьего уровня состоит в том, что учащийся в ходе выполнения не просто повторяет уже отработанные действия, но преобразует их в связи с ситуацией.

Тестовые задания IV уровня выявляют умение учащихся ориентироваться и принимать решения в проблемных ситуациях. Работая с такими заданиями, школьник приобретает новые знания и умения как следствие расширения и трансформации усвоенного.

По способу формулирования различают 6 основных видов тестовых заданийи 2 дополнительных .

Возможные типы и виды тестовых заданий представлены на рис. 1. За основу взята классификация тестовых заданий А.Н.Майорова .

Рис.1. Типы и виды тестовых заданий.

Помимо этого, любое из представленных на схеме тестовых заданий по форме выражения информации может быть:

вербальным , т.е. информация выражена словами;

невербальным – информация выражена рисунком, схемой, видеофрагментом, слайдом и др. подобными формами.

Выбор типа задания влияет на результаты обучения. Так, задания закрытого типа содержат варианты готовых ответов, из которых учащиеся должны самостоятельно выбрать правильный (правильные). Ответ на такое задание легко фиксировать и однозначно оценивать. В отличие от заданий открытого типа они содержат подсказку, что повышает их обучающую функцию, но снижает объективность контроля. Задания альтернативных ответов несут в себе максимальную подсказку; для повторения материала и для закрепления знаний они наиболее полезны.

Задания открытого типа предполагают самостоятельный ответ учащихся без каких-либо ограничений и подсказок. Это широко известные традиционные вопросы, применяемые при устном и письменном опросе. Они позволяют проверять любые уровни знаний, но их трудно однозначно оценить.

Задания закрытого типа

Тестовые задания закрытого типа имеют варианты готовых ответов на поставленный вопрос, и надо выбрать один (или несколько) правильных ответов из ряда предлагаемых. Все варианты ответов должны быть правдоподобными, но могут содержать типичные ошибки и затруднения.

1. Задания альтернативных ответов (АО).

К каждому заданию дается только два варианта ответов: «Да» или «Нет» («верно» – «неверно»). Испытуемый должен выбрать один из них.

Форма задания:

Утверждение 1 Утверждение 2 Утверждение 3 Утверждение 4 Да Да Да Да Нет Нет Нет Нет

При составлении такого задания формулировать основной текст надо таким образом, чтобы не возникало возможности двусмысленного ответа (и «да», и «нет»).

Инструкция.

Задание. Квадратное уравнение с отрицательным дискриминантом не имеет действительных корней

Варианты ответа:

а) да; б) нет.

В этом задании могут появиться двусмысленные ответы: «да» (не имеет), «нет» (у него нет действительных корней). И теми, и другими испытуемыми подразумевался один и тот же ответ. Задание необходимо переделать. Ниже приводится один из вариантов переделанного задания.

Инструкция. Выберите ответ «да» или «нет».

Задание. Квадратное уравнение с отрицательным дискриминантом имеет действительные корни

Варианты ответа:

а) да; б) нет.

Ответ становится однозначным, но задание все равно составлено неудачно.

У одиночного задания альтернативных ответов (см. пример 2) очень высока вероятность угадывания правильного ответа (50%). Поэтому такие задания лучше использовать длинными сериями к одному элементу знаний (см. пример 3) – шансы дать верные ответы на 10 таких вопросов, уже невелики.

Инструкция. Выберите ответ «да» или «нет». (Если вы согласны с утверждением – «да», а если не согласны – «нет».)

Задание. Биосфера – это часть...

Варианты ответа:

Ответ : да – нет – нет – нет – да – нет.

Задания альтернативных ответов формулируются в форме утверждений, поскольку предполагают согласие или несогласие, которое можно отнести к утверждениям.

Задания АО больше всего подходят для выявления знаний сложных определений, правил, проверки понимания сложных графиков, диаграмм, схем.

2. Задания множественного выбора.

Это самый распространенный вид заданий, применяемый в тестах достижений. Испытуемый должен выбрать один правильный (иногда – несколько правильных) ответ из предложенных вариантов, либо один (несколько) неправильных. Оптимально предлагать в заданиях данного вида 5 вариантов ответов, минимальное количество возможных вариантов ответа – 3, иначе возрастает вероятность простого угадывания.

Остальные варианты ответов – неправильные, но правдоподобные, – называются дистракторами (от англ. Distract –отвлекать). Неправильные ответы рекомендуется составлять на основе типичных ошибок обучаемых. Поиски правдоподобных однородных и оригинальных ответов составляют главную трудность для разработчиков.

Форма задания:

Вопрос (утверждение):

А. Вариант ответа 1

Б. Вариант ответа 2

В. Вариант ответа 3

Г. Вариант ответа 4

Д. Вариант ответа 5

Инструкция. Укажите номер правильного ответа.

Задание. К какой группе веществ относится серная кислота?

Варианты ответа :

1. Не электролит.

2. Слабый электролит.

3. Электролит средней силы.

4. Сильный электролит.

Ответ: 4.

Расположение в ответах характеристик силы электролита по степени возрастания (убывания) не приводит к потере времени при чтении, что более удачно в сравнении с хаотичной по этому признаку расстановкой ответов. Задания лучше формулировать в повествовательной форме.

Пример 5.

Инструкция. Выберите верный ответ.

Задание. Катер плывет по реке, скорость течения равна а , скорость катера в стоячей воде равна b . Какая из формул выражает время, затраченное катером, чтобы спуститься вниз по течению на 30 км и вернуться обратно? (Время стоянки не учитывать).

Варианты ответа :

а) ; б) ; в) ; г) .

Ответ: б).

Это хорошее задание для проверки знания формул и умения выполнять математические и другие познавательные операции. Выбрать верный ответ можно, только совершив определенные действия.

Инструкция. Выберите верный ответ.

Задание. Империя – это …

Варианты ответа .

а) большое государство.

б) государство, управляемое императором.

в) государство, состоящее из метрополий и колоний.

г) сильное государство.

д) недемократическое государство.

Ответ: в).

Строго говоря, согласно словарным определениям верен и ответ б). Но засчитывается только ответ в). Проверяющий получает искаженные данные о знаниях испытуемого. Верный ответ должен быть единственным. В варианте ответа б) слово «императором» можно заменить «царем».

3. Задания на восстановление соответствия.

В заданиях на восстановление соответствия испытуемому необходимо определить соответствия между элементами двух множеств. Элементами множеств могут служить как вербальные, так и невербальные формы выражения знаний (рисунки, графики, условные обозначения и др.)

Поскольку в таких заданиях существуют два ряда объектов, разумно один из них обозначать цифрами, а другой – буквами, что помогает избежать путаницы при выполнении заданий.

Этот тип заданий достаточно разнообразен по форме предъявления материала и может быть успешно использован по всем учебным предметам и предметным областям.

Инструкция. Соотнесите схемы и значения общего сопротивления цепи.

Варианты ответа:

1. 4,4 Ом
2. 4,5 Ом
3.~ 1,9 Ом
4.~ 7,3 Ом
5.~ 1,7 Ом
Ответ: I. II. III. IV. V. 3 1 2 5 4

У задания, приведенного в примере 7, есть существенный недостаток: для того, чтобы дать правильный ответ, совсем необязательно вычислять сопротивления всех 5 схем. Достаточно вычислить 4 сопротивления, а пятой схеме поставить в соответствие оставшееся пятое численное значение.

Инструкция. Соотнесите написанное в столбцах 1 и 2.

Задание. Кто написал?

Варианты ответа:


Это задание неудачное по двум причинам. Слишком короткая и некорректная формулировка вопроса, что требует дополнительных пояснений. Но главное, каждому произведению поставлен один автор, и при 4-х правильных ответах пятый ответ будет неизбежно правильным. Лучше подобное задание предложить в следующем варианте.

Инструкция. Укажите буквой, какому автору принадлежат книги, указанные в списке (оставьте незаполненной графу напротив книги, автор которой не указан в левом списке).

Ответ: Г, А, Б, – , – , В.

Предъявление списков неравной длины уменьшает вероятность угадывания правильного ответа.

Заданиям на соответствие, как и альтернативным заданиям, присущ недостаток – опасность тривиального тестирования. Знание автора произведения является не столь важным (но все-таки необходимым) по сравнению с умениями анализировать произведение или выразить свое отношение к его проблематике.

Поэтому задания на восстановления соответствия используют для быстрой проверки знания фактов, событий, дат, персоналий, формул, наличия умений и навыков в конкретной области. Это могут быть:

— список растений (животных) и таксономический ряд – в биологии;

— слова и соответствующие части речи или орфограммы и пр.– в филологии;

— даты, события, личности и др. – в истории;

— формулы, правила, законы и конкретные случаи их применения – в точных науках;

— причинно-следственные связи, субъект-объектные отношения и т.п. – в психологии, философии, социологии;

Все выше названные вербальные элементы знаний могут быть соотнесены с невербальными (звуковыми и видеофрагментами, рисунками, фотографиями, картами и т.п.).

При составлении заданий на восстановление соответствия необходимо соблюдать также следующие требования:

1) Элементы каждого из двух множеств должны быть выбраны по одному основанию.

2) Число элементов одного списка не должно превышать 10.

3) Оба списка необходимо располагать на одной странице, не допуская переноса отдельных элементов.

4. Задания на восстановления последовательности.

Эти задания можно рассматривать как вариант заданий на восстановление соответствия с одной особенностью: нужно перечислить поданное в списке в правильной последовательности. Тестовые задания на установление правильной последовательности предназначены для оценки уровня владения последовательностью действий, процессов и т.п. Элементы, связанные с определенной задачей, приводятся в заданиях в произвольном порядке, а ученик должен установить правильный порядок предложенных элементов и указать его заданным способом в специально отведенном для этого месте.

Пример 10.

Инструкция. Расположите в правильной последовательности (в столбце ответов поставьте соответствующие буквы).

Задание. Расположите этапы зародышевого развития позвоночных животных в правильном порядке:

Варианты ответа:

Правильный ответ :

1. Б.
2. А.
3. В.
4. Д.
5. Г.

Задания на восстановление последовательности незаслуженно редко используются в тестировании. Это очень качественная форма тестовых заданий, обладающая краткостью и простотой проверки, экономит время работы и составителя, и испытуемого.

Данные тестовые задания подходят для любого предмета, где присутствуют алгоритмическая деятельность, анализируются временные события, логика исследования. Это может быть:

— порядок технологических операций, спортивных действий – в технологических дисциплинах и спорте;

— восстановление временных последовательностей событий;

— этапы словообразования и т.п. для уроков русского (иностранного) языка;

— последовательность анализа художественного произведения для уроков литературы;

— алгоритмы решения задач для точных наук, логика исследования объектов (явлений);

— этапы развития философской мысли в философии и многое др.

Следует отметить очень низкую вероятность угадывания верных ответов.

5. Задания группировки.

Данная форма тестового задания является модификацией заданий на восстановление последовательности. В таком заданиипредлагается составить из фрагментов 2-3 небольших рассказа, в каждом из которых описывается одно понятие (закономерность, событие). Начала рассказов объединены в группу А (в произвольном порядке), следующие фрагменты – в группы Б, В и т.д.

Тестовые задания группировки удобны тем, что позволяют охватить признаки сходства и различия родственных понятий, требуют разнообразной аналитико-синтетической деятельности, связанной с сопоставлением, выделением существенных признаков, анализом.

Принцип группировки оптимален для установления последовательности протекания событий и явлений, описания свойств изучаемого объекта, сопоставления характеристик и условий с последующими выводами и обобщениями.

Можно использовать любой описательный материал, допускающий логическое структурирование. Задания-группировки удобны для проверки знания алгоритма какой-либо деятельности, а также для оценки глубины усвоения при обобщении материала. Следует отметить также низкую вероятность угадывания правильного ответа, свойственную этому виду заданий.

Форма задания:

Инструкция. С оставьте тексты из фрагментов А, Б, В.

Задание.

А. 1) Начало первого текста…

2) Начало второго текста…

3) Начало третьего текста…

Б. 1) продолжение третьего текста…

2) продолжение первого текста…

3) продолжение второго текста…

В . 1) окончание третьего текста.

2) окончание второго текста.

3) окончание первого текста.

Правильный ответ: А1 Б2 В3; А2 Б3 В2; А3 Б1 В1.

Пример 11.

Инструкция. С оставь текст из фрагментов А, Б, В, Г, Д.

Задание.

А. 1) Деление клетки…

2) Обмен веществ в клетке необходим для…

3) Растения называют…

Б. 1) производителями органического вещества потому, что…

2) сложный процесс…

3) снабжения клетки…

В . 1) связанный с ростом и...

2) строительным материалом и энергией...

3) в процессе фотосинтеза создают …

Г . 1) размножением клеток...

2) обеспечивающих рост и жизнедеятельность клетки...

3) из неорганических веществ (углекислого газа, воды) в присутствии света …

Д. 1) продолжается непрерывно, пока клетка жива.

2) органическое вещество крахмал и кислород.

3) двумя способами – бесполым и половым.

Правильный ответ: А1 Б2 В2 Г3 Д2 и т.д.

В заключение обзора заданий закрытого типа отметим их основные преимущества:

— отсутствуют факторы, связанные с субъективными оценками;

— на качество ответа не влияет, умеют ли испытуемые хорошо формулировать ответы, т.к. выбираются готовые ответы.

— возможна машинная обработка ответов и анализ результатов, поэтому тестирование проводится быстро.

Задания открытого типа

Тестовые задания открытого типа рассчитаны на ответ в свободной форме. Обычная алгоритмическая программа, используемая для оценивания результатов закрытых тестов, для тестов открытого типа непригодна. Как правило, открытые тестовые задания используются для выявления эвристических, креативных умений и оцениваются экспертами.

К ним относятся задания двух видов.

1. Задания свободного изложения.

Они предполагают свободные ответы испытуемых по сути задания. На ответы не накладываются ограничения, однако, формулировка заданий должна обеспечивать наличие только одного правильного ответа. Компьютерная проверка таких заданий затруднена, оценивают ответы эксперты.

Пример 12.

Инструкция. Закончи предложение. Вместо многоточия можно вписать словосочетание, фразу, предложение или даже несколько предложений.

Задание. Имя существительное – это …

Ответ. Ответ считается правильным, если содержит следующие ключевые слова или их синонимы: «часть речи», «обозначает предметы», «отвечает на вопросы кто? что?».

2. Задания дополнения (или другое название: задания с ограничением на ответы).

В этих заданиях тестируемые должны также самостоятельно сформулировать ответы на вопросы, но их возможности ограничены (задано количество слов, знаков, символов, которые можно использовать при ответе).

Пример 13.

Инструкция. Впиши пропущенные слова. Одному пропуску соответствует только одно слово.

Задание. Самостоятельная часть речи, обозначающая предмет и отвечающая на вопросы кто? что? – это … …

Ответ. Имя существительное.

Правильный ответ задается достаточно однозначно, поэтому задания дополнения могут включаться в компьютерный тест (правильность ответа может быть проверена при помощи компьютера).

Задания на дополнение имеют ограниченную сферу применения. С помощью таких заданий проверяются остаточные знания, умения воспроизводить и применять знания в знакомой ситуации, ограничена возможность проверки понимания изученного материала, т.е. задание можно отнести к I или II уровню сложности, в то время как задание свободного изложения может иметь от II до IV уровня сложности.

При составлении заданий дополнения следует придерживаться специфических правил:

— использовать не более 3-х пропусков подряд;

— дополнять нужно самое важное, знание чего и необходимо проверить;

— дополнения лучше ставить в конце предложения.

3. Тестовое задание-дискуссия.

Является разновидностью тестового задания свободного изложения. Особенностью тестового задания-дискуссии является формулировка заданий в виде проблемных вопросов, требующих альтернативного выбора ответа с последующим обоснованием своей позиции в свободной форме.

Пример 14.

Инструкция. Будь судьей в споре! Выбери и аргументируй верный ответ.

Варианты ответов:

1. Да, т.к. …

2. Нет, т.к. …

Ответ обосновать в свободной форме.

Верный ответ : нет, если в аргументации содержатся следующие ключевые слова или их синонимы: «млекопитающее», «дышит легкими», «теплокровное».

Иногда возможен и третий вариант ответа:

3. Ни то, ни другое, т.к. …

Основной трудностью при составлении заданий открытого типа является соблюдение главного требования к тестовым заданиям – наличие однозначного правильного ответа.

Существует несколько приемов, позволяющих формализовать свободный ответ, сделать его однозначным. Покажем это на конкретных примерах.

Пример 15.

Инструкция. Закончите предложение.

Задание. Инерция – это …

Ответ. «… явление сохранения равномерного прямолинейного движения при компенсации всех внешних воздействий на тело».

Это пример неудачно сформулированного ответа. Задание с таким вариантом ответа невозможно обработать. Вероятность точного (дословного) совпадения с контрольным образцом ответа мала.

Ответы «явление», «сохранение равномерного прямолинейного движения», «движение при компенсации внешних воздействий» могут считаться частично правильными, что нарушает основное требование к тестовым заданиям (единственности верного ответа) и приводит к субъективным оценкам.

В данном случае возможно несколько вариантов выхода из создавшегося положения.

1. Попытаться переформулировать задание, чтобы ответ стал однозначным, например:

Задание. «Явление сохранения равномерного прямолинейного движения при компенсации всех внешних воздействий на тело называется …».


По наиболее часто встречающейся в отечественной и зарубежной литературе классификации предтестовых заданий выделяют :

Задания с выбором, в которых студенты выбирают правильный ответ из данного набора ответов;

Задания с конструируемым ответом, требующие от студента самостоятельного получения ответов;

Задания на установление соответствия, выполнение которых связано с выявлением соответствия между элементами двух множеств;

Задания на установление правильной последовательности, в которых от студента требуется указать порядок элементов, действий или процессов, перечисленных в условии.

Предложенные четыре формы тестовых заданий являются основными и наиболее распространенными, но абсолютизировать их нет никаких оснований. Часто специфика содержания контролируемого предмета требует использования новых форм, более адекватных целям разработки тестов. Обычно такие инновации строятся на основе сочетания отдельных элементов перечисленных основных форм.

Вне зависимости от формы задания в тесте должны подчиняться общим требованиям:

Каждое задание имеет свой порядковый номер, который может изменяться после статистической оценки трудности задания и выбора стратегии предъявления заданий теста;

Каждое задание имеет эталон правильного ответа (эталон оценивания для заданий со свободно конструируемым ответом);

Все элементы в задании располагаются на четко определенных местах, фиксированных в рамках выбранной формы;

Для заданий разрабатывается стандартная инструкция по выполнению, которая не меняется в рамках каждой формы и предваряет формулировку заданий в тесте;

Для каждого задания разрабатывается правило выставления дихотомической или политомической оценки, общее для всех заданий одной формы и сопровождающееся инструкцией по проверке со стандартизованными процедурами подсчета сырых (первичных) баллов по тесту.

Процесс тестовых измерений предельно стандартизируется, если:

Ни одному студенту не дается никаких преимуществ перед другими;

Заранее разработанная система подсчета баллов применяется ко всем ответам студентов без исключения;

В тест включены задания одной формы либо разных форм с регламентированными весовыми коэффициентами, значения которых получены статистическим путем;

Тестирование различных групп испытуемых проводится в одинаковое время в сходных условиях;

Группа тестируемых выровнена по мотивации;

Все испытуемые выполняют одни и те же задания.

Последнее условие не исключает возможности списывания, подсказки и других нарушений, поэтому обычно стараются создать несколько параллельных по содержанию и трудности вариантов одного теста. В целом выбор формы заданий и число вариантов теста зависят от содержания контролируемого курса, целей контроля, требуемого уровня надежности теста. В частности, при аттестации стараются включить больше заданий с выбором ответа, поскольку они в силу высокой технологичности и благодаря автоматизированным процедурам проверки позволяют увеличить охваченный в тесте объем содержания, длину теста, надежность и содержательную валидность результатов педагогических измерений.

5.2. Задания с выбором одного или нескольких правильных ответов

В заданиях с выбором (или закрытые задания – название, используемое в некоторой отечественной литературе методического характера) можно выделить основную часть, содержащую постановку проблемы, и готовые ответы, сформулированные преподавателем. Среди ответов правильным чаще всего бывает только один, хотя не исключаются и другие варианты с выбором нескольких правильных, в том числе и в разной степени, ответов.

Неправильные, но правдоподобные ответы называются дистракторами. Если в задании два ответа, один из которых дистрактор, то вероятность случайного выбора правильного ответа путем угадывания равна 50%. Число дистракторов выбирают таким, чтобы задание не стало слишком громоздким и трудно читаемым, но вместе с тем стараются не допустить слишком большой вероятности угадывания правильного ответа. Поэтому чаще всего в заданиях бывает 4 или 5 дистракторов, хотя в отдельных случаях, когда есть такая необходимость, их число может достигать 6–7.

Задания с двумя ответами обычно используют для экспресс-диагностики, например в автоматизированных контрольно-обучающих программах для входа в обучающий модуль, при адаптивном тестировании или для самоконтроля, когда испытуемому необходимо оперативно выявить пробелы в собственных знаниях. Использование заданий с двумя и тремя ответами в итоговом контроле приводит к росту ошибки измерения из-за угадывания, поэтому их никогда не включают в аттестационные тесты, куда для большей надежности помещают все задания с одинаковым числом ответов.

Если дистракторы сформулированы некорректно, без малейшей привлекательности даже для самых слабых испытуемых группы, то они перестают выполнять свою функцию, и на деле получается задание не с запланированным, а с меньшим числом ответов. В самом плохом случае, когда все дистракторы в задании не работают, большинство студентов выполнит задание верно, выбрав единственный правдоподобный правильный ответ. В идеале каждый дистрактор должен в равной мере привлекать всех испытуемых, выбирающих неправильный ответ. Мера привлекательности дистракторов оценивается после первой апробации теста на репрезентативной выборке испытуемых с помощью подсчета долей студентов, выбравших каждый из дистракторов в качестве правильного ответа. Конечно, точное равенство долей является определенной идеализацией, практически недостижимой при эмпирической проверке, но тем не менее, создавая задания, к этому равенству нужно стремиться.

Углубленный анализ частоты выбора каждого дистрактора студентами с различным уровнем подготовленности позволяет сделать вывод о валидности неправильных ответов. Если дистрактор чаще привлекает слабых студентов, выполнивших верно незначительное число заданий в тесте, то он считается валидным. В противном случае, когда дистрактор кажется привлекательным в основном сильным студентам, его валидность невысока, и задание подлежит переработке. В целом можно сказать, что тестовое задание считается «хорошо работающим», если знающие студенты выполняют его правильно, а незнающие выбирают любой из дистракторов с равной вероятностью.

Если тестирование проводится с помощью бланков, то задания с выбором одного правильного ответа сопровождаются инструкцией: «ОБВЕДИТЕ НОМЕР (БУКВУ) ПРАВИЛЬНОГО ОТВЕТА».

Задания с несколькими правильными ответами обычно используют в текущем контроле для проверки классификационных и фактуальных знаний, хотя встречаются случаи, когда специфика содержания дисциплины вынуждает включать их в итоговые тесты. Они сопровождаются специальной инструкцией, подчеркивающей необходимость выбора всех правильных ответов и имеющей вид: «ОБВЕДИТЕ НОМЕРА ВСЕХ ПРАВИЛЬНЫХ ОТВЕТОВ».

Когда дистракторов слишком мало, а правильных ответов намного больше, то их легко угадать. В качестве выхода из подобной ситуации можно включить в число ответов только один неправильный, а студентов попросить выбрать один ошибочный ответ, если это не противоречит дидактическим целям контроля и допускается содержанием предмета. В этом случае инструкция имеет вид: «ОБВЕДИТЕ НОМЕР НЕПРАВИЛЬНОГО ОТВЕТА».

Иногда по замыслу автора при разработке задания закладываются несколько правильных ответов, среди которых есть более правильный и менее предпочтительный. В этом случае задание сопровождается инструкцией: «ОБВЕДИТЕ НОМЕР НАИБОЛЕЕ ПРАВИЛЬНОГО ОТВЕТА».

При компьютерной выдаче заданий инструкция может иметь вид: «ДЛЯ ОТВЕТА НАЖМИТЕ КЛАВИШУ С НОМЕРОМ (БУКВОЙ) ПРАВИЛЬНОГО ОТВЕТА».

Обычно если все задания сформулированы в одной форме, то инструкция приводится в начале теста. В противном случае, когда в тест включены задания разных форм, инструкция меняется при каждом изменении формы. Легко представить, насколько осложнит выполнение теста чередование инструкций на выбор правильного и неправильного ответов. Невнимательные студенты, не умеющие концентрировать внимание на изменяющейся инструкции, неизбежно запутаются и выполнят часть заданий неправильно даже в том случае, когда они наверняка знают верный ответ. Поэтому в тесте рекомендуется менять инструкцию как можно реже – ровно столько раз, сколько требует стратегия предъявления заданий теста.

Задания с выбором имеют ряд преимуществ, связанных с быстротой их выполнения, простотой подсчета итоговых баллов по тесту, возможностью автоматизации процедур проверки ответов студентов и вытекающей отсюда минимизацией субъективного фактора при оценивании результатов выполнения теста. С их помощью можно более полно охватить содержание проверяемой учебной дисциплины и, следовательно, повысить содержательную валидность теста. Несомненным достоинством формы заданий с выбором является ее универсальность, она годится практически для любого предмета.

К числу недостатков заданий с выбором следует отнести эффект угадывания, характерный для слабо подготовленных испытуемых при ответах на наиболее трудные задания теста. Хотя возможность угадывания действительно существует, тестологи с ним научились бороться, используя различные методы. Иногда вводят специальные инструкции, ориентирующие испытуемых на пропуск незнакомого задания вместо ответа путем догадки. В других случаях добавляют специальные весовые коэффициенты, близкие к нулю, в подсчете баллов слабых студентов, полученных по наиболее трудным заданиям теста. Иногда применяют специальную формулу для коррекции индивидуальных баллов с поправкой на догадку. Последний метод и поясняющая его формула приводятся в конце этой главы.

Определенные трудности возникают при использовании заданий с выбором для проверки умений продуктивного уровня, связанных с применением знаний в незнакомой ситуации, творческими аспектами подготовки и случаями, когда требуется преобразование условий поставленной перед студентами задачи. Тогда задания с выбором готовых ответов использовать чаще всего невозможно. В случае массового аттестационного тестирования, когда необходимо привлечь эффективные компьютеризованные технологии для подсчета баллов испытуемых и получить высокую объективность результатов педагогического измерения, достоинства заданий с выбором явно перевешивают недостатки. Поэтому такая форма нередко доминирует при разработке итоговых аттестационных тестов.

Задания с выбором ответа должны удовлетворять ряду требований, выполнение которых позволяет повысить качество теста:

В тексте задания должна быть устранена всякая двусмысленность или неясность формулировок;

Основная часть задания формулируется предельно кратко, желательно не более одного предложения из 7–8 слов;

Синтаксическая конструкция задания предельно упрощается без ущерба для корректности содержания и однозначного его понимания учащимися;

В основную часть задания включают большую часть условия задания, а для ответа оставляют не более 2–3 наиболее важных ключевых слов для сформулированной в условии проблемы;

Все ответы к одному заданию должны быть приблизительно одной длины либо правильный ответ может быть короче других, но не во всех заданиях теста;

Из текста задания исключаются все вербальные ассоциации, способствующие выбору правильного ответа с помощью догадки;

Частота выбора номера места для правильного ответа в различных заданиях теста должна быть примерно одинакова либо номер места для правильного ответа выбирается случайным образом;

Все дистракторы к каждому заданию должны быть равновероятно привлекательными для испытуемых, не знающих правильного ответа.

При разработке заданий необходимо обеспечить их относительную независимость, исключающую цепочную логику выполнения, когда ответ из одного задания служит условием для другого задания теста. Тесты учебных достижений не могут содержать задания-ловушки, присутствующие в психологических тестах.

Проще всего подбирать дистракторы в заданиях с двумя ответами посредством отрицания того, что является верным. Однако не рекомендуется вместо дистракторов использовать слова «да – нет», поскольку в противном случае довольно трудно сформулировать утверждения, на которые можно дать недвусмысленный ответ.

ПРИМЕРЫ ЗАДАНИЙ

Задание 1

ЕСЛИ ВЫЧИТАЕМОЕ УВЕЛИЧИЛИ НА 12 ЕДИНИЦ, А РАЗНОСТЬ ТАКЖЕ УВЕЛИЧИЛАСЬ НА 15 ЕДИНИЦ, ТО УМЕНЬШАЕМОЕ

А. Увеличилось

Б. Уменьшилось


Задания с тремя ответами, также как и с двумя ответами, обычно используют в экспресс-диагностике. Иногда три ответа появляются вследствие удаления неработающих дистракторов. В целом их можно считать неудачными, поскольку они недостаточно кратки, и вместе с тем в них высока вероятность угадывания правильного ответа.

Задание 2

ВЫСОКИЕ ТЕМПЫ УРБАНИЗАЦИИ В ЛАТИНСКОЙ АМЕРИКЕ СВЯЗАНЫ С

A. Быстрым экономическим ростом

Б. Усилением роли крупных городов

B. Массовой миграцией населения из деревень в города


В большинстве тестов встречаются задания с 4–5 ответами, из которых один верный. При умелой разработке они достаточно краткие, и в них невысока вероятность угадывания правильного ответа (0,25 при четырех ответах и 0,20 при пяти).

Задание 3

ПРЕДПОЛОЖЕНИЕ О ТОМ, ЧТО ДЕНЬГИ ЯВЛЯЮТСЯ СПЕЦИФИЧЕСКИМ ТОВАРОМ, СООТВЕТСТВУЕТ ТЕОРИИ ДЕНЕГ

A. Номиналистической

Б. Металлической

B. Количественной

Г. Трудовой


Задание 4

КАКАЯ СТРУКТУРА ПРЕДСТАВЛЯЕТ СОБОЙ РЕШЕТЧАТУЮ ОРГАНИЗАЦИЮ, ПОСТРОЕННУЮ НА ПРИНЦИПЕ ДВОЙНОГО ПОДЧИНЕНИЯ ИСПОЛНИТЕЛЕЙ?

A. Проектная

Б. Системная

B. Матричная

Г. Функциональная

Д. Географическая


Задание 5

ФУНКЦИЮ МЕРЫ СТОИМОСТИ ВЫПОЛНЯЮТ:

A. Металлические деньги

Б. Идеальные деньги

B. Реальные деньги

Г. Мысленно представляемые деньги

Д. Кредитные деньги


Иногда задание с выбором имеет двойную структуру, предлагая набор высказываний или положений, которые оцениваются путем сопоставления с предлагаемыми ответами. Например, в задании 6 высказывания, характеризующие понятие «Управление», должны сопоставляться с различными вариантами их истинности.

Задание 6

КАКИЕ ВЫСКАЗЫВАНИЯ ДАЮТ ХАРАКТЕРИСТИКУ ПОНЯТИЯ «УПРАВЛЕНИЕ»?

1. Процесс распределения и движения ресурсов в организации с заранее заданной целью, по заранее разработанному плану и с непрерывным контролем результатов деятельности.

2. Совокупность методов, принципов, средств и форм управления организациями с целью повышения эффективности деятельности.

A. Только первое

Б. Только второе

B. Ни первое, ни второе


Несмотря на кажущуюся привлекательность, в содержательном плане задание 6 неудачно сформулировано, поскольку может привести к неоднозначной трактовке ответов студентов. Выбор двух ответов А и Б равносилен выбору ответа Г, хотя ответы к заданию всегда должны обладать свойством относительной независимости и, образно говоря, отрицать друг друга.

Другой пример модификации формы задания с выбором ответов приводится в задании 7, где выбранный ответ предлагается мысленно подставить на место прочерка в основной части.

Задание 7

МЕНЕДЖМЕНТ – ЭТО КООРДИНАЦИЯ _________ РЕСУРСОВ С ЦЕЛЬЮ РЕШЕНИЯ ПОСТАВЛЕННЫХ УПРАВЛЕНЧЕСКИХ ЗАДАЧ.

A. Информационных

Б. Людских

B. Временных

Г. Материальных


Даже в условиях хорошо организованного процесса тестирования один вариант теста невозможно применять из-за списывания, подсказок и других подобных нежелательных эффектов. Поэтому всегда приходится разрабатывать 5–8 параллельных вариантов теста, для которых можно использовать фасетные задания. Под фасетом понимается форма, обеспечивающая представление нескольких вариантов одного и того же элемента содержания теста. Каждый испытуемый получает из фасета только один вариант задания. При этом все испытуемые группы выполняют однотипные задания, но с разными элементами фасета и, соответственно, с разными ответами. Таким образом, решаются одновременно две задачи: устраняется возможность списывания и обеспечивается параллельность вариантов тестов. Например, в задании 8 содержатся два задания теста, получаемые для каждого из городов, приведенных в фигурных скобках.

Задание 8

К ДВОРЦОВЫМ КОМПЛЕКСАМ ОКРЕСТНОСТЕЙ

{Москвы

Санкт–Петербурга}

ОТНОСЯТСЯ:

1) Павловск, Ораниенбаум

2) Архангельское, Царицыно

3) Петергоф, Гатчина

4) Царское Село, Стрельня


В задании 9 автор предлагает выбрать тот элемент, который не имеет отношения к предмету экономической теории, что не вполне оправданно дидактическими целями контроля, но в данном случае допускается содержанием предмета.

Задание 9

ПОЛОЖЕНИЯ, НЕ ИМЕЮЩИЕ ОТНОШЕНИЕ К ПРЕДМЕТУ ЭКОНОМИЧЕСКОЙ ТЕОРИИ

A. Экономическое благо

Б. Неограниченность ресурсов

B. Максимизация удовлетворения потребностей Г. Эффективное использование ресурсов

Д. Правовые отношения


Такие задания, а также задания с несколькими правильными ответами, как в задании 10, обычно стараются не включать в аттестационные тесты, результаты которых используются для принятия административно-управленческих решений в образовании.

Задание 10

УКАЖИТЕ ТРИ ИНТЕГРАЛЬНЫХ ПАРАМЕТРА СРЕДЫ, ВЛИЯЮЩИЕ НА ФУНКЦИЮ ПРИНЯТИЯ РЕШЕНИЯ

A. Неопределенность

Б. Сложность

B. Динамичность

Г. Определенность

Д. Ограниченность


Появление частично правильных ответов студентов, возникающих при выборе не всех запланированных верных ответов в каждом таком задании теста, приводит к снижению объективности и сопоставимости тестовых баллов. Если избежать нескольких правильных ответов невозможно, то для повышения стандартизации оценочных процедур вводят определенное решающее правило. Например, если испытуемый выбирает все правильные ответы, то он получает 1 балл, во всех других случаях – 0 баллов.

При подсчете результатов выполнения заданий с выбором одного правильного ответа обычно предпочитают дихотомическую оценку. За правильное выполнение задания испытуемый получает 1 балл, а за неправильный ответ или пропуск – 0. Суммирование всех единиц позволяет вычислить индивидуальный (первичный или сырой) балл испытуемого, который в случае дихотомической оценки просто равен количеству правильно выполненных заданий в тесте. Если правильный ответ не единственный, то чаще всего используется политомическая оценка, которую устанавливают пропорционально числу правильно выбранных ответов.

Если тест состоит из заданий с выбором, то индивидуальные баллы испытуемых будут существенно искажены эффектом случайного угадывания ответов. Поэтому сырые баллы стараются скорректировать, вводя поправки на догадку. Формула коррекции баллов, полученных в результате выполнения заданий с ответами, из которых только один верный, имеет вид

X" i = X i – [W i / (k – 1)]

где i – номер любого испытуемого группы; X" i - скорректированный балл i -го испытуемого; X i - тестовый балл до коррекции; W i – число невыполненных (неправильно выполненных, пропущенных и недостигнутых) заданий теста, а X + W i = n , где n - число заданий в тесте.

При выполнении заданий с двумя ответами k – 1 = 1, поэтому для каждого испытуемого вычисляется разность между числом правильно выполненных и невыполненных им заданий теста. С увеличением количества дистракторов к заданию число вычитаемых баллов уменьшается, что вполне естественно, так как чем больше дистракторов, тем труднее угадать правильный ответ.

Сама по себе формула коррекции обладает определенными недостатками, снижающими точность тестовых измерений. Это связано с тем, что в основу ее построения положен ряд искусственных предположений, нередко не согласующихся с реальной процедурой выполнения теста. В частности, далеко не в полной мере выполняется предположение о том, что все неправильные ответы являются следствием случайного угадывания. Столь же условно другое предположение об одинаковой вероятности выбора каждого ответа задания теста.

В процессе создания заданий отдельные требования к форме неосознанно нарушаются. Как правило, это бывает связано с тем, что все внимание разработчика поглощено содержанием, а не формой. Нарушение отдельных требований порождает ряд характерных недостатков, возникающих даже у опытных авторов в процессе работы над заданиями теста. К числу наиболее распространенных недостатков предтестовых заданий можно отнести:

Отсутствие логической корректности в формулировках заданий теста, приводящее к незапланированным правильным ответам;

Нарушение правильных пропорций в форме задания, когда ответы намного длиннее основной части задания;

Нарушение требования краткости, вызванное включением лишних слов или представлением в тестовой форме того содержания, которое не годится для проверки с помощью теста;

Выбор ответов по разным основаниям;

Просчеты разработчиков заданий, способствующие угадыванию правильных ответов без выполнения заданий теста.

Например, неудачным можно считать задание 11, в котором приведена короткая основная часть и длинные ответы в силу того, что разработчик явно напрасно переставил их местами. Если само определение кругооборота капитала, данное на втором месте под буквой «Б», поместить в начало задания, то ответы могут состоять только из одного или нескольких слов.

Задание 11

КРУГООБОРОТ КАПИТАЛА – ЭТО

A. Непрерывное и последовательное движение денежного капитала

Б. Последовательное превращение капитала из одной функциональной формы в другую

B. Возвращение авансированной стоимости

Г. Функционирование товарного капитала


Неудачно подобраны ответы в задании 12, если рассматривать их безотносительно к содержательным просчетам автора. Если первые три ответа сравнивают между собой объем выпуска продукции монополиста и конкуренцию, то четвертый нацелен на установление причинной связи между объектами.

Задание 12

ОБЪЕМ ВЫПУСКА ПРОДУКЦИИ МОНОПОЛИСТА ПО СРАВНЕНИЮ С СОВЕРШЕННОЙ КОНКУРЕНЦИЕЙ БУДЕТ

Б. Меньше

B. Такой же

Г. Зависит от конъюнктуры рынка


Отсутствует содержательная и логическая корректность в задании 13, где из восьми приведенных параметров в ответах используются только пять.

Задание 13

КАКИЕ ДВА ПАРАМЕТРА НЕ ИСПОЛЬЗУЮТСЯ ДЛЯ АНАЛИЗА ОТЛИЧИЙ КУЛЬТУР СТРАН ДРУГ ОТ ДРУГА?

1. Взаимоотношение человека и окружающей среды

2. Оценка времени

3. Природа людей

4. Манера общения

5. Оценка степени активности

6. Свобода доступа информации

7. Взаимоотношение людей

8. Отношение к обладанию пространством


A. Четвертый и шестой

Б. Третий и шестой

B. Третий и пятый

Г. Четвертый и седьмой


Задание 14

A. Чутко реагирует на изменение внешней среды и изменяется в соответствии с ними

Б. Воспринимает из внешней среды все новые тенденции и обязательно применяет их в своей деятельности

B. Открыта для любых нововведений, необходимых собственнику

Г. Чутко реагирует на поведение конкурентов и воспринимает наиболее эффективные принципы решения управленческих задач


Задание 15, хотя и выглядит довольно громоздко, выгодно отличается от большинства приведенных выше примеров, поскольку содержит постановку проблемы, а не нацелено, как чаще всего бывает, на проверку фактологического или понятийного материала.

Задание 15

КАК БУДЕТ ВЫГЛЯДЕТЬ ЦЕЛЕВАЯ ФУНКЦИЯ В МАТЕМАТИЧЕСКОЙ МОДЕЛИ ПРОЦЕССА УПРАВЛЕНИЯ ПРИМЕНИТЕЛЬНО К СЛЕДУЮЩЕЙ ЗАДАЧЕ:

Фирма производит два напитка: «Тоник» и «Тархун». Объем производства ограничен количеством вспомогательных добавок и производственной мощностью. Производство 1 л «Тоника» занимает 0,02 часа работы оборудования, производство 1 л «Тархуна» занимает 0,04 часа. Расход вспомогательных добавок 0,01 кг/л у «Тоника» и 0,04 кг/л у «Тархуна». Ежедневный ресурс времени работы оборудования 24 часа. Ресурс вспомогательных добавок 16 кг в сутки. Прибыль от реализации 1 л «Тоника» 0,1 р/л, а у «Тархуна» – 0,3 р/л.

Сколько продукции «Тоник» и «Тархун» нужно производить ежедневно с целью максимизации ежедневной прибыли?

A. 0,01 х 1 + 0,04 х 2 > max

Б. 0,02 х 1 + 0,03 х 2 > max

B. 0,02 х 1 + 0,04 х 2 > max

Г. 0,03 х 1 + 0,01 х 2 > max

5.3. Задания с конструируемым ответом

В заданиях с конструируемым ответом (встречаются также названия: задания на дополнение, открытые задания) готовые ответы не даются, их должен придумать или получить сам студент. Задания с конструируемым ответом бывают двух видов, один из которых предполагает получение испытуемым строго регламентированных по содержанию и форме представления правильных ответов. Второй – задания со свободно конструируемыми ответами, в которых испытуемые составляют развернутые ответы, произвольные по содержанию и форме представления и включающие полное решение задачи с пояснениями, микросочинения (эссе) и т.д.

Задания с конструируемыми ответами кажутся студентам более трудными, так как в них исключается догадка. Действительно, легче выбрать правильный ответ из предложенных, основываясь иногда не столько на знаниях, сколько на интуиции, чем самому его сформулировать или найти в процессе решения поставленных проблем. Но именно это свойство исключительно привлекательно для педагогов, особенно для тех, кто привык в своей работе опираться на традиционные средства контроля и не доверяет тестам.

В заданиях первого вида обычно ответ бывает достаточно кратким: в виде слова, числа, формулы, символа и т.д. Для разработки заданий с конструируемым регламентированным ответом необходимо мысленно сформулировать вопрос, затем записать четкий и краткий ответ, в котором на месте ключевого слова, символа или числа ставится прочерк. В силу однозначности правильного ответа проверка результатов выполнения заданий с конструируемым регламентированным ответом носит довольно объективный характер, ее осуществляют в компьютерной форме с последующей перепроверкой всех неправильных ответов студентов экспертным путем. Ответы на задания приводятся на месте прочерка или заносятся студентами в специальный бланк.

Например: Впишите правильный ответ.

Задание 1

Определение конечных показателей, которые должны быть достигнуты, и соответствующих средств, необходимых для получения определенных конечных результатов, включает в себя функции ___________________ .


Задание 2

Форма влияния, предполагающая маскировку настоящих намерений и целей – _______________.


При выполнении заданий с конструируемым регламентированным ответом нередко появляются частично правильные и правильные в разной степени ответы. Дописывая ответ на месте прочерка, испытуемый может предложить синонимы пропущенного запланированного разработчиком слова или изменить порядок следования элементов в пропущенной формуле, что значительно затрудняет автоматизированную проверку и оценку результатов тестируемых. По этим причинам в процессе проверки нередко приходится разрабатывать дополнительные соглашения об оценках для частично правильных ответов.

Задания с конструируемыми регламентированными ответами должны удовлетворять ряду требований:

Каждое задание необходимо нацелить только на одно дополняемое слово, символ и т.д., место для которого рекомендуется обозначить прочерком или точками;

Прочерк ставится на месте ключевого элемента, знание которого является наиболее существенным для контролируемого материала;

Все прочерки в заданиях для одного теста рекомендуется делать равной длины;

Место для ответа лучше отводить в конце задания или как можно ближе к концу;

После прочерка, если это возможно, указываются единицы измерения;

Текст задания должен обладать предельно простой синтаксической конструкцией и содержать минимальное количество информации, необходимое для правильного выполнения задания.

Задания второго вида со свободно конструируемым ответом не имеют никаких ограничений по содержанию и форме представления ответов. За отпущенное время тестируемый может писать что угодно и как угодно на специальных бланках для ответов. Несомненно, такие условия выполнения во многом близки к традиционным письменным работам, и потому задания со свободно конструируемым ответом воспринимаются положительно абсолютным большинством педагогов. Они интересны и разнообразны в содержательном плане.

Разработка заданий второго типа неоправданно может показаться легкой. На самом деле трудно не сформулировать задание, а предложить эталон оптимального ответа вместе со стандартизованными правилами оценки результатов его выполнения. Например, формулировка задания по истории с развернутым ответом достаточно кратка.

Задание 3

НАЗОВИТЕ ОСНОВНЫЕ ЗАДАЧИ, КОТОРЫЕ РЕШАЛИСЬ ВО ВНЕШНЕЙ ПОЛИТИКЕ РОССИИ В XVII В. (УКАЖИТЕ НЕ МЕНЕЕ ДВУХ ЗАДАЧ). ПРИВЕДИТЕ ПРИМЕРЫ ВОЙН, ПОХОДОВ И ЭКСПЕДИЦИЙ XVII В., ПРЕДПРИНИМАВШИХСЯ ДЛЯ РЕШЕНИЯ ЭТИХ ЗАДАЧ (НЕ МЕНЕЕ ТРЕХ ПРИМЕРОВ).


Но для того чтобы задание попало в тест, его автору необходимо стандартизовать процедуру проверки, а это объемная работа, вызывающая подчас много нареканий из-за неоднозначности результатов ее выполнения.

В естественных науках предложить эталон выполнения вместе с оценочными критериями гораздо легче. Например, к заданию 4 можно предложить следующие критерии для оценки результатов выполнения

Задание 4

ПРИ КАКИХ ЗНАЧЕНИЯХ X СООТВЕТСТВЕННЫЕ ЗНАЧЕНИЯ ФУНКЦИЙ f (x ) = log 2 x и g (x ) = log 2 (3 – x ) БУДУТ ОТЛИЧАТЬСЯ МЕНЬШЕ, ЧЕМ НА 1?


Проверка заданий с развернутыми ответами проводится экспертами в соответствии со стандартизованными инструкциями, содержащими эталон оптимального ответа с описывающими его характеристиками и признаками качества, как в приведенном примере. К эталону должны прилагаться оценочные категории для выставления политомической оценки, нуждающиеся в апробации и статистическом обосновании качества, поскольку среди них могут быть как не работающие, так и снижающие дифференцирующий эффект теста.

Задания с развернутыми ответами требуют значительных затрат преподавательского труда при проверке, когда экспертам приходится анализировать множество правильных в разной степени ответов и сравнивать их с эталоном, не принимая во внимание полноту, внешнее оформление ответов, орфографические ошибки и все то, что не входит в критерии для выставления политомической оценки. Иногда проверку стараются стандартизовать путем разработки компьютерных экспертных программ .

Вне автоматизированных систем проверка результатов выполнения заданий с развернутыми ответами довольно субъективна, а согласование оценок нескольких экспертов затруднено, поэтому обычно такие задания занимают не более 10–15% от общей длины аттестационного теста.

Задания со свободно конструируемым ответом в основном предназначены для оценки когнитивных умений. Их следует разрабатывать только в тех случаях, когда нельзя использовать более простые формы;

Длина и сложность ответа может варьироваться в широких пределах (вплоть до нескольких страниц текста ответа, обоснования приведенного решения проблемы и т.д.). В инструкции желательно ввести ограничения на максимальную длину ответа для каждого задания;

Формулировка задания должна включать постановку проблемы, эталон выполнения и оценочные критерии. Постановочная часть должна быть настолько четкой, чтобы минимизировать возможные отклонения в правильных ответах студентов от планируемого разработчиком эталона выполнения;

Выбор временных рамок для выполнения каждого задания должен позволять студенту сформулировать достаточно развернутый ответ и успеть его записать.

Надежность оценок результатов выполнения заданий со свободно конструируемыми ответами можно повысить, если:

Грамотно составлять задание, руководствуясь приведенными выше рекомендациями;

Использовать при проверке только разработанную стандартизованную схему оценивания не более чем с тремя оценочными категориями (0, 1, 2);

Обучить экспертов по проверке заданий пользовать стандартизованными критериями оценивания;

Привлекать не менее двух экспертов для проверки каждого задания и приглашать третьего эксперта в случае расхождений оценок первых двух более чем на один балл;

Использовать принципы анонимности проверяемых работ и независимости экспертных суждений;

Не смотреть на оценку, данную предыдущему заданию, при оценивании последующего.

Задания типа эссе можно оценивать в соответствии со следующим:

Простыми схемами оценивания, когда критерии строятся с ориентацией на содержание ответов студентов;

Усложненными схемами оценивания, учитывающими при экспертизе содержание ответов, характеристики качества представления текста, его полноту и стиль или любые другие факторы, кажущиеся важными разработчику задания;

При любой схеме оценивания задания со свободно конструируемыми ответами нуждаются в политомической оценке, что иногда неоправданно завышает их общий вес в балле по тесту. Для того чтобы избежать такого завышения и для уменьшения влияния субъективного компонента, число критериев оценивания обычно стараются сделать достаточно малым, ограничиваясь политомическими оценками, например, от 0 до 3 или от 0 до 2.

Для заданий с кратким регламентированным ответом, сформулированных в виде незаконченных утверждений и предъявляемых без специальных бланков для ответа, обычно используют инструкцию, состоящую из одного слова: «ДОПОЛНИТЕ». В тех случаях, когда для ответов к заданиям с кратким регламентированным ответом необходимо давать ответы в специальных бланках, а не рядом с заданиями, инструкция может иметь вид: «ОТВЕТЫ К ЗАДАНИЯМ ЗАПИШИТЕ В БЛАНКЕ ОТВЕТОВ СПРАВА ОТ СООТВЕТСТВУЮЩИХ НОМЕРОВ ЗАДАНИЙ. КАЖДУЮ БУКВУ ПИШИТЕ В ОТДЕЛЬНОЙ КЛЕТОЧКЕ В СООТВЕТСТВИИ С ПРИВЕДЕННЫМИ ОБРАЗЦАМИ НА БЛАНКЕ ОТВЕТОВ».

Инструкция для заданий со свободно конструируемым ответом обычно имеет произвольную форму. Главное сказать столько, чтобы в максимальной степени облегчить и стандартизовать работу экспертов при проверке результатов тестирования для снижения влияния субъективных факторов и повышения надежности педагогических измерений. В самом общем виде для предметов гуманитарного цикла инструкция может иметь вид: «ДЛЯ ОТВЕТОВ НА ЗАДАНИЯ ИСПОЛЬЗУЙТЕ ОТДЕЛЬНЫЙ БЛАНК ОТВЕТОВ. ЗАПИШИТЕ СНАЧАЛА НОМЕР ЗАДАНИЯ, А ЗАТЕМ РАЗВЕРНУТЫЙ ОТВЕТ НА НЕГО. ОТВЕТЫ ЗАПИСЫВАЙТЕ РАЗБОРЧИВО».

5.4. Задания на установление соответствия

Задания на соответствие имеют специфический вид, где под инструкцией располагаются элементы двух множеств, соответствие между которыми предлагается установить испытуемому. Слева обычно приводятся элементы задающего множества, содержащие постановку проблемы, справа – элементы, подлежащие выбору.

Соответствие между элементами двух столбцов может быть взаимно однозначным, когда каждому элементу справа соответствует только один элемент слева. Если число элементов в двух столбцах одинаковое, то для последнего элемента задающего множества выбор не произойдет. Встречаются случаи, определяемые спецификой содержания предмета, когда для нескольких элементов левого столбца выбираются одни и те же элементы справа, поэтому их может оказаться меньше, чем слева. И наконец, оптимальным является задание, в котором правое множество содержит больше элементов, каждый из которых выбирается только один раз. Например, удачное задание 1, а не удачное 2, поскольку число элементов для выбора справа равно числу элементов в левом столбце.

Задание 1

К КАЖДОМУ ИЗ ТРЕХ ЭЛЕМЕНТОВ (1, 2, 3) ПОДБИРАЕТСЯ ОДИН СООТВЕТСТВУЮЩИЙ ЭЛЕМЕНТ ИЗ ПРАВОЙ ЧАСТИ С БУКВАМИ (А, Б, В, Г, Д, Е, Ж, З, И, К).

Определите соответствие ролей менеджера трем блокам согласно модели Г. Минцберга


Ответы можно представить в виде таблицы, в таком случае отпадает необходимость в подробной инструкции, подобной той, которая приведена для задания 1.


Задание 2

УСТАНОВИТЕ СООТВЕТСТВИЕ



Лишние элементы правого столбца, не подлежащие выбору при правильных ответах, называются дистракторами. Как и в заданиях с выбором ответов, наибольшие трудности при разработке связаны с подбором правдоподобных избыточных элементов в правом множестве. Мера правдоподобности каждого дистрактора устанавливается эмпирически.

При разработке заданий на соответствие следует руководствоваться следующими правилами:

Задание формулируется так, чтобы все содержание можно было выразить в виде двух множеств с соответствующими названиями;

Элементы задающего столбца располагаются слева, а элементы для выбора – справа;

Желательно, чтобы каждый столбец имел определенное название, обобщающее все элементы столбца;

Необходимо, чтобы правый столбец содержал хотя бы несколько дистракторов. Еще лучше, если число элементов правого множества будет примерно в два раза больше числа элементов левого столбца;

Необходимо, чтобы все дистракторы в одном задании были равновероятно правдоподобны;

Элементы столбцов должны быть выбраны по одному основанию для включения только гомогенного материала в каждое задание теста.

В аттестационном тесте задания на соответствие малоэффективны в силу их громоздкости, не позволяющей охватить большой объем содержания.

К заданиям на соответствие прилагается стандартная инструкция, состоящая из двух слов: «УСТАНОВИТЕ СООТВЕТСТВИЕ». Иногда инструкцию делают развернутой, особенно в тех случаях, когда есть отдельный бланк ответов. Например, инструкция может иметь вид: «БУКВЫ, СООТВЕТСТВУЮЩИЕ ЗАДАННЫМ ЭЛЕМЕНТАМ, ЗАПИШИТЕ СНАЧАЛА В ТАБЛИЦУ, ПРИВЕДЕННУЮ В ТЕКСТЕ ЗАДАНИЯ, А ЗАТЕМ ПЕРЕНЕСИТЕ ИХ В БЛАНК».

Результаты выполнения заданий на соответствие оцениваются либо дихотомической, либо политомической оценкой. При дихотомическом оценивании 1 балл выставляется за все правильно установленные соответствия в задании теста. Если хотя бы одно соответствие неверно, то за частично правильно выполненное задание на соответствие испытуемый получает 0 баллов. Другой способ заключается в выставлении по одному баллу за каждое правильное соответствие, тогда при проверке заданий на соответствие используется политомическая оценка, и общее количество баллов за задание равно числу правильно установленных соответствий.

5.5. Задания на установление правильной последовательности

Тестовые задания четвертой формы предназначены для оценки уровня владения последовательностью действий, процессов и т.п. В таких заданиях в произвольном порядке приводятся элементы, связанные с определенной задачей, а испытуемый должен установить правильный порядок предложенных элементов и указать его заданным способом в специально отведенном для этого месте.

Стандартная инструкция к заданиям четвертой формы имеет вид: «УСТАНОВИТЕ ПРАВИЛЬНУЮ ПОСЛЕДОВАТЕЛЬНОСТЬ». Иногда инструкцию включают в текст задания.

Задание 1

РАСПОЛОЖИТЕ ИМЕНА РУССКИХ ПОЛКОВОДЦЕВ В ХРОНОЛОГИЧЕСКОЙ ПОСЛЕДОВАТЕЛЬНОСТИ ИХ ДЕЯТЕЛЬНОСТИ. ЗАПИШИТЕ БУКВЫ, КОТОРЫМИ ОБОЗНАЧЕНЫ ИМЕНА, В ПРАВИЛЬНОЙ ПОСЛЕДОВАТЕЛЬНОСТИ В ПРИВЕДЕННУЮ В ТЕКСТЕ ЗАДАНИЯ ТАБЛИЦУ, А ЗАТЕМ ПЕРЕНЕСИТЕ ИХ В БЛАНК.

A) Дмитрий Пожарский

Б) Алексей Ермолов

B) Михаил Скобелев

Г) Алексей Орлов


Задание 2

УСТАНОВИТЕ ПРАВИЛЬНУЮ ПОСЛЕДОВАТЕЛЬНОСТЬ МЕХАНИЗМА ВЫДОХА, РАССТАВИВ НОМЕРА В ОТВЕДЕННЫХ МЕСТАХ:

? – спадение легких

? – торможение центра дыхательных мышц в спинном мозге

? – возбуждение центра выдоха в продолговатом мозге

? – расслабление диафрагмы и вспомогательных мышц

? – уменьшение грудной полости


Во многих случаях задания на установление правильной последовательности крайне нетехнологичны либо не применимы в силу специфики содержания предмета. Они громоздки и нередко допускают неоднозначную последовательность ответов, поэтому не рекомендуются к использованию в аттестационных тестах.

5.6. Сравнительная характеристика форм тестовых заданий

В процессе разработки теста у автора всегда возникает вопрос: остановиться ли на какой-нибудь одной форме заданий либо принять решение о совмещении различных форм в одном тесте? А если остановиться на одной, то какой отдать предпочтение? Выбор автора во многом определяется спецификой содержания учебной дисциплины, целями создания и применения теста. Немало здесь зависит от технологии проверки, сбора и обработки эмпирических данных, от технического и материального обеспечения процесса применения теста. Легко организовать компьютеризованный сбор и анализ результатов выполнения теста в том случае, когда все задания с выбором ответов.

Результаты выполнения заданий с конструируемыми ответами требуют ручной обработки. Как правило, для оценки результатов их выполнения приходится привлекать экспертов, а это требует дополнительных материальных затрат и времени на проверку.


Преимущества и недостатки различных форм заданий

1. Задания с двумя ответами

Преимущества : благодаря краткости позволяют охватить большой объем материала, легко разрабатываются (только один дистрактор), быстро с высокой объективностью обрабатываются результаты выполнения.

Недостатки : стимулируют механическое запоминание, поощряют угадывание, требуют увеличения количества заданий и, соответственно, времени тестирования для компенсации эффекта угадывания.

2. Задания с выбором из четырех-пяти ответов

Преимущества : годятся для самых различных учебных предметов, в силу краткости формулировок в тесте можно охватить большой объем содержания, обеспечивают возможность автоматизированной проверки и высокую объективность оценок студентов, позволяют провести развернутый статистический анализ своих характеристик, скорректировать их и значительно повысить надежность педагогических измерений.

Недостатки : требуют значительной работы авторов при выборе дистракторов и коррекции баллов студентов, не годятся для проверки продуктивного уровня деятельности и когнитивных умений.

3. Задания с конструируемыми регламентированными ответами

Преимущества : просты в разработке, исключено угадывание, частично годятся для автоматизированной проверки.

Недостатки : проверяют в основном знание фактологического материала или понятийного аппарата, обычно (в гуманитарных предметах) слишком легкие, иногда приводят к неоднозначным правильным и частично правильным ответам.

4. Задания со свободно конструируемыми ответами

Преимущества : позволяют оценивать сложные учебные достижения, в том числе коммуникативные умения, творческий уровень деятельности, легко формулируются как традиционные задания, исключают угадывание.

Недостатки : требуют длительной дорогостоящей процедуры проверки, значительного времени выполнения, не позволяют охватить значительный объем содержания предмета, снижают надежность педагогических измерений.

5. Задания на соответствие

Преимущества : просты в разработке, идеально подходят для оценивания ассоциативных знаний и проведения текущего контроля, уменьшают эффект угадывания.

Недостатки : чаще всего используются при проверке репродуктивного уровня деятельности и алгоритмических умений, громоздки по форме представления.


Сравнительная характеристика технологических свойств различных тестовых форм представлена в табл. 5.1.


Таблица 5.1 Сравнительные технологические характеристики форм





Выбор формы предтестовых заданий определяется спецификой контролируемого содержания и целями создания теста. Каждая форма заданий имеет свои достоинства и недостатки, свою сферу применения.

Разработка предтестовых заданий проводится сообразно стандартизованным требованиям, содержание которых зависит от специфики тестовой формы. Задания с выбором ответов наиболее удобны при итоговом контроле в силу ряда технологических преимуществ, повышающих эффективность процессов применения итогового теста и оценки результатов студентов. Задания на дополнение предпочтительны при обучающем контроле.

Современные тенденции в разработке итоговых тестов связаны с отходом от моноформности и широким использованием заданий на дополнение, поскольку многообразие проверяемых знаний и умений требует введения различных форм в тесте.

Практические задания и вопросы для обсуждения

1. Обведите номер правильного ответа.

Тестовые задания с двумя ответами эффективнее использовать в контроле:

1) текущем

2) тематическом

3) итоговом

4) входном

2. Обведите номер правильного ответа.

1) текущего

2) итогового

3) входного

3. Обведите номер правильного ответа.

Вероятность угадывания номера места правильного ответа в задании с пятью дистракторами будет:

4. Найдите два существенных недостатка в задании, переформулируйте задание для устранения недостатков.

Для какого класса животных характерны признаки: хладнокровные, обитающие в воде и на суше, размножаются в воде?

1. Класс рыб

2. Класс пресмыкающихся

3. Класс земноводных

4. Класс млекопитающих

5. Предложите метод улучшения формулировки заданий.

Что из нижеперечисленного было ликвидировано реформами 60-х годов XIX века в России?

1. Самодержавие

2. Крепостничество

3. Сословность

4. Помещичья собственность на землю

5. Национальный гнет

Выделяют два типа тестовых заданий, которые объединяют семь видов тестовых заданий. Типы и виды тестовых заданий представлены на схеме:

Тестовые задания

Открытого типа

Закрытого типа

дополнения

свободного изложения

множественного выбора

восстановления последовательности

альтернативных ответов

восстановления соответствия

с одним правильным ответом

с несколькими правильными ответами

К заданиям открытого типа относятся два вида - задания дополнения и задания свободного изложения. Их отличительной особенностью является то, что для их выполнения обучающемуся необходимо самому записать одно или несколько слов (цифр, букв, возможно словосочетаний или даже предложений). Этот тип заданий не имеет дистракторов и вариантов правильных ответов. Дистрактором в американской тестовой литературе называется неправильный, но правдоподобный ответ, от английского глагола «to distract» - отвлекать.

К заданиям закрытого типа относятся задания пяти видов: альтернативных ответов, множественного выбора с одним правильным вариантом ответа, множественного выбора с несколькими правильными вариантами ответа, задания на восстановление соответствия и на восстановление последовательности. Тестовые задания закрытого типа предполагают различные варианты ответов на задание, например, выбор одного или нескольких правильных вариантов ответов из ряда предлагаемых вариантов, выбор правильных элементов списка, установление правильной последовательности и др. Это всегда задания с предписанными ответами, что предполагает наличие ряда предварительно разработанных вариантов ответов .

Задания открытого типа

К заданиям открытого типа относятся задания двух видов – задания дополнения и задания свободного изложения.

В заданиях дополнения тестируемые должны самостоятельно давать ответы на вопросы, однако их возможности ограничены. В заданиях дополнения заранее определяется какой ответ считать однозначно правильным, и задается степень полноты его представления. Ответ должен быть кратким, не должен превышать 2-3 слов, чаще – одно слово, число, символ. Ограничения в заданиях дополнения обеспечивают объективность оценивания результата выполнения задания, а формулировка ответа должна дать возможность однозначного оценивания.

Отличительная особенность заданий дополнения в том, что они должны формировать только один, запланированный разработчиком правильный ответ. Несмотря на то, что внешне создание заданий этого вида выглядит достаточно просто, добиться того, чтобы обучающиеся в качестве ответа применяли именно тот вариант, который запланирован разработчиками, бывает достаточно трудно даже опытным создателям открытых заданий теста .

В системе психологической подготовки МЧС России задания открытого типа не используются, однако, если у наших коллег возникнет необходимость включить в тест задания открытого типа на дополнение, рекомендуем воспользоваться им следующей схемой их разработки.

Сначала рекомендуется сформулировать вопрос, содержащий не более 7-8 слов, затем на поставленный вопрос записать ответ, представляющий некоторое высказывание той же длины. Далее из полученного высказывания исключить ключевое слово (число, символ) и на его место поставить прочерк. Затем необходимо изменить порядок слов в высказывании так, чтобы прочерк переместился в конец предложения.

Например:

Вопрос: Как называется неспецифическая реакция организма на любое предъявляемое ему требование?

Ответ: Неспецифическая реакция организма на любое предъявляемое ему требование называется стрессом

Задание на дополнение: Неспецифическая реакция организма на любое предъявляемое ему требование называется __________

Отметим также общие правила разработки заданий на дополнение:

1. Каждое задание должно быть нацелено только на одно дополнение, место для которого обозначается прочерком или точками.

2. Прочерк ставится на месте ключевого элемента, знание которого является наиболее существенным для контролируемого материала;

3. Все прочерки в открытых заданиях для одного теста рекомендуется делать одной длины;

4. Дополнения лучше ставить в конце задания или как можно ближе к концу.

5. После прочерка, если это нужно, ставятся единицы измерения.

6. Текст задания должен обладать предельно простой синтаксической конструкцией и содержать то минимальное количество информации, которое необходимо для правильного выполнения задания.

7. В тексте задания не должно быть повторов и двойного отрицания .

Задания свободного изложения предполагают свободные ответы тестируемых по сути задания. Для их выполнения тестируемому необходимо самому записать одно или несколько слов (цифр, букв, возможно словосочетаний, или предложений). На ответы к заданиям свободного изложения ограничения не накладываются. Однако формулировки заданий должны обеспечивать наличие только одного правильного ответа .

С точки зрения композиции задания открытого типа должны содержать следующие обязательные элементы:

    Инструкцию для тестируемых .

Инструкция для заданий дополнения: вместо каждого прочерка впишите только одно слово (символ, знак и т.д.).

Инструкция для заданий свободного изложения: закончите предложение (фразу); впишите вместо прочерка правильный ответ; дополните определение, записывая ответ в бланке и т.д.

Примеры заданий на дополнение:

Комплекс мероприятий, осуществляемый в местах массового скопления людей и направленный на профилактику массовых негативных реакций – это ____________ (сопровождение массовых мероприятий)

Примеры заданий свободного изложения:

Задачами специалистов психологической службы при оказании ЭПП в режиме ЧС являются ____________

Основными правилами оказания ЭПП пострадавшим с ОСР являются ____________

3. Ответы к заданиям .

Во всяком тестовом задании заранее определяется, что однозначно считается правильным ответом на заданный вопрос. Задание считается выполненным правильно, если ответ тестируемого совпадает с предусмотренным эталоном, прописанным в оценочной схеме. Поэтому в качестве эталонов необходимо предусмотреть все синонимы.

Преимуществами хорошо составленных заданий дополнения и свободного изложения являются:

1) краткость и однозначность ответов;

2) необходимость воспроизведения ответа по памяти;

3) отсутствие необходимости искать несколько вариантов ответа;

4) простота формулировки вопросов;

5) простота проверки;

6) невозможность угадать ответ .

Невозможность угадать ответ является основным преимуществом заданий открытого типа, а основным недостатком является сложность формализации правильного ответа.

Задания закрытого типа

Задания альтернативных ответов

В содержании всех учебных дисциплин имеется много таких элементов знаний, которые называются дихотомическими. Это знания, которые позволяют определить правильность или неправильность фактов, методов, процессов; знания о том, что хорошо, что плохо, что можно, а чего нельзя делать ни при каких обстоятельствах. Для проверки таких знаний применяются тестовые задания с двумя ответами.

К каждому заданию альтернативных ответов дается только два варианта ответов. Тестируемый должен выбрать один из них: да – нет, верно – неверно и т.п. .

Примерами заданий альтернативных ответов могут являться:

Личностные особенности спасателя влияют на успешное выполнение профессиональной деятельности:

Специалисты экстремального профиля, участвующие в ликвидации последствий ЧС, относятся к группам пострадавших:

Задания альтернативных ответов являются самыми простыми и поэтому не самыми распространенными при составлении тестов. Это связано, в основном, со специфичностью того материала, которому в большей степени соответствует эта форма заданий. Задания альтернативных ответов применяются для оценки одного элемента знаний. Использование заданий альтернативных ответов в виде отдельного вопроса, приводит, как правило, к тривиальному тестированию и нежелательно для использования. О том же говорят и рекомендации Голландского института оценки образования (СIТО): «Вопросы альтернативных ответов предлагают только одну альтернативу, которую тестируемый либо принимает как правильную, либо отвергает». Таким образом, у тестируемых есть возможность на 50% угадать правильный ответ на вопрос. Поэтому эти задания целесообразно применять сериями к одному элементу знаний. Надо иметь в виду, что шанс отгадать 10 таких вопросов равен 0,00098.

В инструкции СIТО написано: «В индивидуальном порядке вопросы альтернативных ответов не очень эффективны, а вот длинные серии таких вопросов имеют определенные преимущества. Ответы на них обычно не занимают много времени, и есть возможность охватить весь материал по предмету, задавая как можно больше вопросов по нему» .

Существует целый ряд заданий, когда альтернативные ответы применять наиболее целесообразно. Это относится к крупным определениям, сложным процессам, к графикам, диаграммам, таблицам, тем элементам знания, которые могут быть структурированы или разбиты на более мелкие части. Например, про какой-либо сложный объект или явление можно создать серию вопросов, полностью выявляющих его свойства.

К симптомам ПТСР, объединенным в группу симптомов избегания, относятся:

нарушение памяти, неспособность вспомнить важные эпизоды произошедшего события, места, людей

сверхбдительность

обеднение чувств

потеря доступа к ресурсам прошлого, отсутствие ориентации на будущее

связанные с событием сны

«флэшбэк-эпизоды», внезапные поступки и чувства, как если бы событие происходило сейчас

уклонение от мыслей, деятельности и чувств, связанных с событием

чувство отстраненности и отчужденности от других

Инструкция: Перед вами утверждение, которое необходимо продолжить альтернативами, приведенными в таблице. Из приведенных альтернатив нужно выбрать те, которые правильно дополняют приведенное утверждение. В том случае, если вы согласны с приведенной альтернативой - обведите в таблице кружком ответ «да». В том случае, если вы не согласны с приведенной альтернативой - обведите в таблице кружком ответ «нет».

Ключевыми моментами при оказании экстренной психологической помощи человеку с острыми стрессовыми реакциями являются:

не оставлять человека одного

дать ощущение большей безопасности;

оградить от посторонних зрителей

оставить человека одного наедине с его переживаниями

создать ощущение того, что человек не остался один на один со своей бедой

употреблять четкие короткие фразы с утвердительной интонацией

подбадривать пострадавшего фразами о том, что всё будет хорошо

постараться свести реакцию к плачу

окружить пострадавшего большим количеством внимания, собрав вокруг него толпу

Особенностью заданий альтернативных ответов является то, что вопрос должен быть сформулирован в форме утверждения, поскольку он предполагает согласие или несогласие, которое можно отнести к утверждению.

Задания множественного выбора

Задания множественного выбора – это основной вид заданий, применяемый в педагогических тестах. Такие задания предполагают наличие вариативности в выборе. Тестируемый должен выбрать среди предложенных вариантов ответов правильный вариант или варианты - в зависимости от того, какое это задание – предполагающее выбор одного правильного ответа или выбор нескольких правильных ответов.

Оптимальным количеством вариантов ответов для заданий множественного выбора с одним правильным ответом является 3-4. Обычно трудно найти более 4 интересных и оригинальных альтернатив, кроме того у тестируемого на их чтение уйдет больше времени. Вероятно, минимальное количество возможных альтернатив – это 3, максимальное количество альтернатив будет зависеть от объема текста предлагаемых вариантов ответов. В том случае, если это цифровые выражения, то 5-6 вариантов не могут оказаться слишком длинными для чтения, и тогда оптимальным количеством можно считать 5 альтернативных ответов .

Как мы уже говорили, кроме заданий множественного выбора с одним правильным ответом, существуют задания множественного выбора с несколькими правильными ответами. Особенностью заданий с несколькими правильными ответами является то, что тестируемому необходимо не только найти правильные ответы, но и определить полноту своего ответа. Соответственно, эти задания сложнее, чем задания с одним правильным ответом.

Оптимальным количеством вариантов ответов для заданий множественного выбора с несколькими правильными ответами является 5-7. При этом возникает вопрос оптимальной доли числа правильных и неправильных ответов. Добиваться равенства количества правильных и неправильных ответов в каждом задании не следует, потому что тестируемые должны быть готовы к тому, что в любом задании может оказаться любое количество правильных ответов .

В качестве примеров заданий множественного выбора с одним правильным ответом можно привести:

Номер приказа «Об утверждении Порядка оказания экстренной психологической помощи пострадавшему населению в зонах чрезвычайных ситуаций и при пожарах»:

    691 приказ МЧС России от 14.11.2008

    682 приказ МЧС России от 11.11.2008

    525 приказ МЧС России от 20.09.2011

    500 приказ МЧС России от 25.09.2007

Инструкция: Выберите один правильный ответ.

Активный метод обучения, который основывается на уточнении и операционализации целей, задач, способов решения, форм поощрения и контроля с помощью алгоритмов:

    проблемное обучение

    программированное обучение

    интерактивное обучение

В качестве примеров заданий множественного выбора с несколькими правильными ответами можно привести:

ЭПП оказывается:

    телезрителям

    пострадавшим вследствие ЧС

    родственникам и близким погибших и пострадавших вследствие ЧС

    родственникам специалистов, занимающихся ликвидацией ЧС

    специалистам, работающим в условиях ликвидации последствий ЧС

Инструкция: Выберите несколько правильных ответов.

Действия по оказанию экстренной психологической помощи пострадавшему с острой стрессовой реакцией агрессии:

    дать пострадавшему возможность побыть наедине с его эмоциями

    сохранять эмоциональную устойчивость, говорить с пострадавшим спокойно, постепенно снижая темп и громкость речи

    свести к минимуму количество окружающих

    дать возможность «выпустить пар»;

    поручить работу, связанную с высокой физической нагрузкой;

    резко потрясти пострадавшего за плечи в течение 1 минуты

    в случае необходимости привлечь сотрудников правоохранительных органов

Следует учитывать, что при проведении компьютерного тестирования важным аспектом является графическое оформление мест для ответов к заданиям множественного выбора с одним правильным ответом и с несколькими правильными ответами. Так в АИС «Психолог» место для заданий с одним правильным ответом представлено в виде круга, а для заданий с несколькими правильными ответами – квадратом.

При составлении заданий множественного выбора полезно руководствоваться несколькими принципами, а именно: принципом однородности и принципом фасетности содержания задания.

Принцип однородности заключается в том, что подбираются такие ответы, которые относятся к одному роду, виду, отображают основные стороны, грани явления.

При создании заданий по принципу однородности существенным фактором усиления их эффективности является использование сходных по написанию или звучанию букв, цифр, знаков, слов или словосочетаний. Это позволяет делать ответы правдоподобными, логически безупречными .

Например:

Инструкция: Выберите один правильный ответ.

Стресс, ведущий к истощению внутренних резервов организма:

    аутостресс

    моностресс;

    эустресс

    дистресс;

Принцип однородности часто дает возможность создать полную систему ответов, к которой нечего добавить.

Например:

Инструкция: Выберите один правильный ответ.

Острая стрессовая реакция, симптомами которой являются напряжение мышц (особенно лицевых), учащенное поверхностное дыхание, сниженный контроль собственного поведения, сильное сердцебиение:

    агрессия

    страх

    двигательное возбуждение

  1. нервная дрожь

    истероидная реакция

Принцип фасетности содержания задания сводится к определенной форме записи нескольких вариантов одного и того же задания - фасету.Множество слов и словосочетаний, образующих фасет, помещается в фигурные скобки . А именно:

Инструкция: Выберите несколько правильных ответов.

Толпа людей, {стремящихся к уничтожению, разрушению, убийству}, называется:

    паническая

    экспрессивная;

    конвенциональная;

    агрессивная

    окказиональная;

    стяжательная

    экстатическая

В таких заданиях можно менять фамилии, характеристики предмета/явления, числовые параметры и пр. Это наглядно отражено в примере, где фигурными скобочками выделена та часть, которую можно заменить, создав, таким образом, еще одно задание.

Если заменить в предыдущем примере ту часть, которая выделена фигурными скобочками, то можно получить еще ряд заданий, в их числе может быть, например, следующее:

Толпа людей, {скандирующих на митингах лозунги, ритмически выражая ту или иную эмоцию …}, называется:

    паническая

    экспрессивная;

    конвенциональная;

    агрессивная

    окказиональная;

    стяжательная

    экстатическая

В одном задании может быть не один, а несколько фасетов:

ЧС, в которой пострадало от {50 до 500} человек, либо нарушены условия жизнедеятельности {500 – 1000} человек; зона ЧС {охватывает территорию двух} субъектов РФ:

    Локальная

  1. Территориальная

    Региональная

    Федеральная

    Трансграничная

Задания на восстановление соответствия

В заданиях на восстановление соответствия необходимо найти соответствие (приравнять части, элементы, понятия) – между элементами двух списков, двух множеств. Эта форма заданий достаточно разнообразна и может быть с успехом использована по всем учебным дисциплинам и предметным областям.

В любом учебном предмете встречается учебная информация, в которой изучаемые объекты (понятия, величины и т. п.) разбиваются на виды, классы, типы и т. д. Для каждого из этих видов существует множество свойств и характеристик, принципов, правил и норм использования, так что есть возможность составления заданий на установление соответствия этих терминов их характеристикам. Причем, задания на установление соответствия в этом случае будут более рациональны, чем задания с выбором правильного ответа.

Задания на установление соответствия позволяют проверить так называемые ассоциативные знания, существующие в каждой учебной дисциплине. Это знание о взаимосвязи определений и фактов, авторов и их произведений, форм и содержания, сущности и явлений, о соотношении между различными предметами, свойствами, законами, формулами, датами .

Обычно задание на соответствие состоит из двух столбцов: в первом – вопросы, утверждения, факты, понятия и т. д., во втором - список утверждений, свойств объектов, которые надо поставить в соответствие с элементами первого столбца. Желательно, чтобы в одном столбце элементы списка были обозначены буквами, а в другом столбце – цифрами. Это поможет избежать путаницы при выполнении этих заданий.

Инструкция к заданиям этого вида формулируется следующим образом: Соотнесите написанное в столбцах 1 и 2. Запишите в таблицу ответов цифры из столбца 2, которые соответствуют утверждениям из столбца 1.

Например:

Столбец 1: этапы профессионального развития

Столбец 2: характеристики этапов

    Этап формирования профессиональных намерений

    Достижение специалистом профессионального мастерства, авторитета в своем профессиональном кругу и, возможно, за его пределами, формирование круга единомышленников

    Этап профессионального обучения

    построение планов относительно будущей профессии, осознанная подготовка к будущей карьере в выбранной профессии

    Этап профессиональной адаптации

    адаптация молодого специалиста в профессиональной среде; обладание достаточным опытом для самостоятельного и эффективного решения профессиональных задач

    Этап реализации личности в профессиональном труде

    овладение специальными знаниями и навыками, необходимыми для успешного профессионального становления

В рассмотренной форме представления заданий на восстановление соответствия, помимо двух столбцов, содержащих элементы которые необходимо привести в соответствие, имеется специальная табличка для занесения в неё результатов.

Некоторые авторы предлагают представлять задания этого вида в виде двух столбцов, содержащих соответственно два списка утверждений, которые необходимо соотнести между собой с помощью стрелочек. На наш взгляд, этот способ отметки имеет существенные недостатки. Во-первых, могут возникнуть проблемы при интерпретации результатов тестирования из-за неоднозначности размещения стрелочек между элементами двух множеств. Во-вторых, трудоемкость при проверке результатов тестирования, особенно в случае большого количества тестируемых.

Одним из формальных требований, предъявляемых к заданиям на установление соответствия, является неодинаковое число элементов в правом и левом столбцах. Избыточные (правдоподобные, но неверные) ответы имеются только в одном столбце. Они выполняют роль дистракторов. Если бы число элементов в столбцах было одинаковым, то последнюю пару тестируемые бы выбирали автоматически, используя метод последовательного исключения.

Например:

Инструкция: Соотнесите написанное в столбцах 1 и 2. Запишите в таблицу ответов цифры из столбца 2, которые соответствуют утверждениям из столбца 1. При этом в столбце 2 элементов больше нежели в столбце 1. Вам нужно понять какие элементы столбца 2 лишние.

Столбец 1: ОСР

Столбец 2: Симптомы

1. сильное дрожание всего тела или отдельных его частей

    Агрессия

2. чрезмерное возбуждение, множество движений, театральные позы, эмоционально насыщенная, быстрая речь, крики, рыдания

    Истероидная реакция

3. непреодолимая усталость, полное равнодушие и безразличие

4. подрагивание губ, ощущение подавленности, в отличие от истерики - отсутствие возбуждения в поведении

5. бред, слуховые галлюцинации и расстройства мышления

    Психомоторное возбуждение

6. напряжение мышц (особенно лицевых), учащенное поверхностное дыхание, сниженный контроль собственного поведения, сильное сердцебиение

7. резкие движения, бесцельные и бессмысленные действия, ненормально громкая речь

    Нервная дрожь

8. отсутствие реакций на внешние раздражители, «застывание» в определенной позе, оцепенение, состояние полной неподвижности

9. раздражение, недовольство, гнев, словесные оскорбления, брань

10. пессимизм; чувство вины, бесполезности, тревоги и страха; заниженная самооценка; мысли о смерти; нарушенный сон

Это задание лучше предыдущего тем, что список, из которого выбираются ответы, длиннее, что значительно снижает вероятность угадывания. Так, если тестируемый знает 7 из 8 ответов в одинаковых по длине списках, то восьмой будет неизбежно правильным.

Важно помнить, что в случаях, когда длина списков не совпадает, об этом необходимо делать указания в инструкциях к тестовым заданиям.

Кроме того, хотелось бы отметить, что существуют различные точки зрения относительно максимального числа элементов в одном списке. Анализ различных работ, посвященных проблеме педагогических тестов, показал, что среди мнений авторов, занимавшихся рассмотрением этой проблемы, нет единства. Ряд авторов считает, что число элементов одного списка не должно превышать 5-6. Другие говорят о том, что длина одного списка не должна превышать 10 элементов. Нам кажется оптимальным именно второй вариант, что обусловлено особенностями нашего учебного материала.

Главными преимуществами заданий на соответствие являются возможность быстрой оценки уровня знаний в конкретной области знаний, и экономичность размещения задач в тесте. Например, из нескольких однообразных заданий с выбором одного правильного ответа, рациональнее сделать одно задание на установление соответствия.

К сожалению, в связи со сложностями в части касающейся технического оформления этого вида заданий в АИС–Психолог, в системе психологической подготовки МЧС России эти задания не используются.

Задания на восстановление последовательности.

Задания на восстановление последовательности можно рассматривать как вариант заданий на восстановление соответствия, когда одним из рядов является время, расстояние или иной континуальный конструкт, который подразумевается в виде ряда. Поскольку этот вид заданий требует особой инструкции, мы выделили его рассмотрение в отдельный подраздел.

Особенность инструкции к заданиям на последовательность заключается в том, что в ней необходимо указывать в какой именно последовательности располагать элементы – от большего к меньшему, в алфавитном, хронологическом порядке и т. п. .

Форма представления заданий на восстановление последовательности, которая рекомендуется в большинстве изданий, посвященных разработке педагогических тестов, следующая:

Установите правильную последовательность стадий в развитии общего адаптационного синдрома (Г. Селье). В столбце ответов поставьте соответствующие буквы.

В связи со сложностями в техническом оформлении этого вида заданий в АИС «Психолог», мы представляем задания этого вида следующим образом:

Установите правильную последовательность стадий в развитии общего адаптационного синдрома (Г. Селье):

    сопротивление, истощение, тревога

    тревога, истощение, сопротивление

    тревога, сопротивление, истощение

    истощение сопротивление, тревога

Таким образом, по виду - это задание множественного вида с одним правильным ответом, а по содержанию – это задание на установление последовательности.

Задания на восстановление последовательности достаточно редко используются в тестах, что является незаслуженным. На самом деле это очень качественная форма тестовых заданий, обладающая значительными преимуществами: краткостью и простотой проверки. Оно подходит для любой учебной дисциплины, в которой присутствует алгоритмическая деятельность или временные события.

Подводя итог рассмотрению заданий закрытого типа, отметим, что основная трудность при разработке таких заданий состоит в поиске правдоподобных дистракторов. В то время как преимуществами заданий закрытого типа являются:

    надежность заданий, поскольку отсутствуют факторы, связанные с субъективными оценками, которые снижают надежность;

    оценивание заданий полностью объективно: между оценками различных проверяющих не может быть различий;

    легкость обработки заданий множественного выбора, быстрота проведения тестирования;

    простой алгоритм заполнения, который снижает количество случайных ошибок и описок;

    возможность охватить большие области знаний, что для тестов достижений особенно важно;

    возможность автоматической обработки ответов;

    низкая вероятность угадывания правильных ответов;

    обучающимся необязательно уметь хорошо формулировать ответы;

    возможность получения точной оценки содержательности теста, что особенно важно для определения соответствия теста целям исследования .

Следует отметить, что каждый из рассмотренных видов заданий позволяет проверить специфические виды знаний. Выбор вида задания зависит от цели тестирования и содержания теста, от особенностей аудитории, от технических возможностей и уровня подготовленности разработчика в области теории и методики контроля уровня знаний.

Желательно, чтобы задания в тесте были максимально разнообразными, в пользу этого, можно привести три существенных довода.

1. Задания разного вида делают тестирование более разнообразным, с точки зрения тестируемых. Более разнообразная деятельность позволяет отодвинуть порог наступления утомления и, как следствие, позволяет больше времени выделить на тестирование. Имея больший запас времени, мы имеем возможность поместить в тест большее количество заданий и, как следствие, получить более надежный инструмент.

2. Имея тест, состоящий из заданий одного вида, мы всегда имеем реальную опасность получить в качестве составляющей итогового балла умение обучающихся работать лишь с этим видом заданий. Те, кто быстрее приспособятся к ним, те, для кого они окажутся наиболее удобными, получат преимущества. Этого можно избежать, используя задания различного вида.

3. Для разных элементов содержания учебного материала подходят разные виды заданий. Например, для сложных определений, проверки понимания фактического материала наиболее удобными являются задания альтернативных ответов. Для проверки знаний временных или пространственных явлений в большей степени подходят задания на восстановление последовательности и т. д. Поэтому, пытаясь свести все многообразие учебного материала к одному виду, мы заведомо делаем тест, в котором содержание не соответствует форме и, как следствие, он будет менее качественным. Исходя из этих соображений, в тесты следует включать задания разного вида .

В системе психологической подготовки МЧС России обязательным является использование заданий закрытого типа следующих видов: задания множественного выбора, предполагающие один правильный ответ и задания множественного выбора, предполагающие несколько правильных ответов. Желательным является использование заданий на установление последовательности. Разработка остальных типов и видов заданий не является обязательной и производится по усмотрению разработчика.

Использование в системе психологической подготовки МЧС России именно перечисленных видов заданий обусловлено особенностями нашего учебного материала, техническими возможностями, а также спецификой профессиональных контингентов, с которыми мы работаем. Например, выполнение заданий открытого типа, на наш взгляд, может вызвать у профессиональных контингентов МЧС России большее сопротивление, нежели выполнение заданий закрытого типа. Кроме того, исходя из опыта проведения зачетов по психологии у профессиональных контингентов МЧС России, у нас сформировалось предположение, что у них могут возникнуть сложности в формулировании правильного ответа к заданиям открытого типа. Нередко на зачетах по психологии специалисты МЧС России объясняют ответы на вопросы «своими словами», опираясь на свой жизненный и профессиональный опыт, минуя психологические термины. Разговор «на разных языках» значительно усложнит процедуру формализации правильного ответа. Нашей задачей является не заставить специалистов МЧС России выучить психологическую терминологию, а помочь понимать её, дать им знания, инструментарий, которые позволят им оптимизировать свое психическое состояние и более эффективно выполнять свои профессиональные обязанности.

Форма тестовых заданий согласно В.С. Аванесову – это способ организации, упорядочения и существования содержания теста. Соединившись с содержанием, форма придаёт заданию конкретный облик, её можно рассмотреть как инвариант.

Тестовые задания не только нужно ясно и лаконично оформить, но и необходимо достаточно трудоемкая процедура эмпирической проверки задания, статистическая обработка результатов его применения. Предпочтение отдается разнообразным формам заданий в тестовой форме. Поэтому классификация тестовых заданий представляется полезной.

Тестовые задания бывают открытого типа и закрытого типа.

Для тестового задания открытого типа входит дополнительная информация, а также задания с дополнением в виде свободного изложения.

Для закрытого типа тестовые задания можно представить с выбором одного верного ответа; с выбором нескольких верных ответов; с градуированными ответами; на установление соответствия; на установление правильной последовательности. Эти задания содержат в себе и основу и ответы, из которых испытуемый должен выбрать или составить верный ответ.

В заданиях с выбором нескольких верных ответов имеют хорошую защищенность от угадывания, испытуемый должен указать все верные ответы, поэтому сумма баллов значительно больше.

Задания с градуированными ответами содержат ответы, которые возможно все являются правильными. Ответы имеют градацию по степени правильности. Испытуемый может получить максимальное количество баллов. Угадывание практически исключено.

Задания на установление соответствия требуют от испытуемого найти соответствие между элементами двух множеств. Устанавливается соответствие на основании логических умозаключений или использовании смысловых ассоциаций.

В заданиях на установление правильной последовательности испытуемому необходимо выбрать соответствующие элементы ответа и расположить в нужной последовательности, выстраивать технологическую цепочку, алгоритмы исполнения процедур. Такая структура включает инструкцию «Установить правильную последовательность».

В заданиях с выбором одного верного ответа предлагается несколько вариантов ответа, среди которых один верный, а остальные не верные (дистракторы). Характерной особенностью заданий для испытуемого является: 1) задание только выбором одного ответа; 2) достоинством является их технологичность; 3) обработка результатов на компьютере. Недостатки: 1) демонстрируют неверные ответы, которые он может запомнить; 2) угадать верный ответ. В целом, тестовые задания с выбором одного ответа оправдывают свое назначение, и применяться в тестировании, а максимальное число вариантов ответов выбирается из вышеприведенных соображений.

Стиль оформления заданий должен быть единым по всему тесту. При компьютерном тестировании не рекомендуют использовать яркие цветовые гаммы.

Существуют две группы принципов формулирования заданий: при подборе ответов, при разработке содержания заданий. Принципы при подборе ответов: противоречивости; противоположности; однородности, кумуляции, сочетания, градуирования; удвоенного противопоставления. Принципы при содержании заданий: фасетности; импликации. Принципы оказывают существенную помощь при разработке тестовых заданий.

Принцип кумуляции предполагает последовательное включение предыдущего ответа в последующий.

Принцип импликации предполагает использование логического условия.

Предлагаемые формы тестовых заданий позволяют максимально активизировать мыслительную деятельность обучающихся.

Тестовые задания применяю на всех этапах процесса обучения . С их помощью обеспечиваю предварительный, текущий, тематический и итоговый контроль знаний, умений, навыков. Тестовый контроль позволяет значительно повысить эффективность модульной технологии («Применение блочно-модульной технологии при обучении физике» – это моя методическая тема). Например: в заданиях открытой формы варианты ответов не указываю. Задания формулирую в виде утвердительного выражения, пропуская слова, символы, формулы. Задача обучающихся – дописать пропущенное слово (символ, формулу), так чтобы получилась логически законченная фраза. Такая форма тестовых заданий сводит возможность догадки к минимуму. (Например: Кинетическую энергию движения тела можно рассчитать по формуле Еk= …). Открытую форму заданий использую на этапах входного контроля и для самостоятельного изучения темы.

В заданиях на установления соответствия элементы одного множества необходимо привести в соответствие другому множеству. Такие задания позволяют определить понимание обучающимися взаимосвязи явлений, их свойств. Записываются в двух или более колонах. Даётся задание: Установить соответствие между элементами правой и левой колонок. (Например: Величина: 1) напряжение; 2) сила тока; 3) сопротивление. Единица измерения: 1) А. 2) Ом. 3) В. Такие задания использую для устного фронтального опроса – даёт быстро получить информацию о готовности обучающихся к изучению новой темы. Так появляются «лишние» часы для повторения, закреплении, решения задач повышенной сложности и т. д.

Рассмотрим результат применения тестовых заданий . Тема: «Атом и атомное ядро» рассчитана по программе-20 часов. Объяснение темы с использованием тестовых заданий: 1) Теория-8 часов; 2) Практическая часть (к/р, л/р, с/р, решение задач)-6 часов. 3) Закрепление материала-2 часа. "Лишние часы"-4 часа.

Задания на установление правильной последовательности, позволяют получить объективные оценки уровня знаний, умений и навыков, проверить соответствие уровня подготовки выпускников и выявить пробелы в знаниях.

Взвешивая всё «за» и «против», отдаю предпочтение тестовым заданиям закрытого типа. Тестовые задания открытого типа исключают угадывание, но они очень сложные для обучающихся.

Следовательно, предлагаемые виды и формы тестовых заданий мне дают возможность максимально активизировать мыслительную деятельность на уроках физики; подбирать задания с учетом особенностей предмета физики, степени подготовленности и индивидуальных особенностей обучающихся; выполняют функцию закрепления, углубления знаний, умений и навыков, экономить время.

Тема «Виды тестов и формы тестовых заданий» очень интересная, насыщенная, в нашем сегодняшнем образовании – актуальна. Спасибо.

Как известно, единицей теста, его структурным элементом является тестовое задание. Его можно определить как "наиболее простой и в то же время целостный структурный элемент теста. Сами задания, входящие в тест, могут быть разнообразны как форме предъявления, так и по содержанию. Существуют разные подходы к классификации тестовых заданий по форме их предъявления. Наиболее распространенной является типы тестовых заданий, приведенных на рисунке 3.1.

Основным фактором, влияющим на форму тестового задания, является способ получения ответа (выбор из предлагаемых вариантом пни самостоятельное формулирование ответа). Тогда эта классификация может быть представлена следующей схемой.


Следует отметить, что тестовые задания имеют ряд характеристик. Каждое тестовое задание имеет свой порядковый номер. Как правило, задания в тесте расположены по возрастанию сложности, хотя и не исключены и варианты, в которых сложность заданий колеблется в различных направлениях по мере продвижения по тесту.

Каждое тестовое задание имеет эталон правильного ответа. Задания, не имеющие верного ответа, как правило, в тест не включаются.

Тестовые задания одной формы обычно сопровождаются стандартной инструкцией, которая предшествует формулировке заданий в тесте.

Для каждого тестового задания разрабатывается правило выставления оценки (начисления баллов).

Тестовое задание по форме предъявления и по времени выполнения обычно достаточно краткое. При формулировке задания обращают внимание на то, чтобы все высказывания теста были понятны всем без исключения ученикам (сформулированы в простых выражениях с общеупотребительной лексикой, без терминов, использующих иностранные или малоупотребительные слова. По возможности, в заданиях избегают оборотов с отрицанием "не" поскольку считается, что предпочтительнее что-то утверждать (как позитивное, так и негативное).

Задания открытого типа. В заданиях открытой формы (заданиях на дополнение) готовые ответы не даются, их необходимо получить. Различают два вида открытых заданий:

  • 1) с ограничениями, наложенными на ответ;
  • 2) без ограничений, наложенных на ответ, в которых тестируемые должны составить развернутый ответ в виде решения задачи.

Задания второго вида мало отличаются от традиционной контрольной работы, требуют больших затрат на проверку и сложнее поддаются стандартизации.

При ответе на открытое задание с ограниченным ответом ученик дописывает пропущенное слово, формулу или число на месте прочерка или в специально отведенном месте на бланке ответов.

Инструкция к заданиям открытого типа обычно сопровождается словами: "Впишите недостающее слово на месте прочерка" или "Получите и запишите ответ в бланке ответов" и т. п.

Задания закрытого типа. Задания с выбором ответов. Закрытое задание с выбором ответа, как правило, включает вопрос и несколько вариантов ответа к нему (они обозначены буквами А, Б, В, Г,... или цифрами: 1,2,3,4,...). Ученику надо выбрать среди ответов верные. В большинстве тестов правильный только один. Но иногда разработчики теста закладывают среди ответов несколько верных. Правдоподобные ответы называют дистракторами. Их число в задании обычно не более пяти. Дистракторы подбирают с учетом типичных ошибок школьников.

Закрытое тестовое задание с выбором ответа считается "хорошо работающим", если знающие учебный материал ученики выполняют его правильно, а незнающие выбирают любой из ответов с одинаковой вероятностью.

Задания с выбором ответа обычно предваряют следующей инструкцией: Укажите номер (букву) правильного ответа (при бланковом тестировании) или: Нажмите клавишу с номером (буквой) правильного ответа (при компьютерном тестировании).

Тестовые задания с выбором одного правильного ответа, как правило, имеют следующие характеристики:

в тексте задания избегают двусмысленности и неясности;

задание имеет простую синтаксическую конструкцию;

основная часть содержит как можно больше слов, оставляя для ответа не более 2-3 ключевых слов для данной проблемы. Из ответов исключают все повторяющиеся слова путем ввода их в основной иной текст задания;

ответы к одному заданию обычно предлагают одной длины;

стараются исключить все вербальные ассоциации, способствующие выбору правильного ответа с помощью догадки;

частота выбора одного и того же номера правильного ответа в различных заданиях текста обычно одинакова либо этот номер случайный;

  • *из числа тестовых заданий исключаются обычно те, которые содержат оценочные суждения и мнения тестируемого по какому-либо вопросу;
  • *число вариантов ответов в каждом задании одинаковое и обычно не более пяти (редко - 7);
  • *при формулировке дистракторов (правдоподобных ответов) избегают выражений "ни один из перечисленных", "все перечисленные" и т. д., способствующие угадыванию, в ответах стараются не использовать такие слова, как "все", "ни одного", "никогда", "всегда" и т. п., как способствующие угадыванию;
  • *дистракторы предлагают такие, чтобы они были равно привлекательными для испытуемых, не знающих правильного ответа;

ни один из дистракторов не является частично правильным ответом, превращающимся при определенных условиях в правильный ответ;

из числа неверных исключают ответы, вытекающие один из другого;

ответы подбирают так, чтобы ключ одного задания не служил ключом к правильным ответам другого задания, то есть не используют дистракторы из одного задания в качестве правильных ответов другого;

все ответы, как правило, параллельны по конструкции и грамматически согласованы с основной частью задания теста;

*если в задании имеются альтернативные ответы, то их не ставят рядом с правильным, так как это сразу сосредотачивает, внимание на них.

Сравнительная характеристика типов тестовых заданий. Выбор типов тестовых заданий определяется многими параметрами: спецификой содержания учебного предмета, целями тестирования, уровнем сложности заданий, профессионализмом разработчика и т.д.

Каждый из типов тестовых заданий имеет свои преимущества и недостатки. Например, задания закрытой формы с выбором ответа характеризуются преимуществами, которыми обладают все тесты, а именно:

  • - объективностью оценки результатов выполнения работы;
  • - быстротой проверки выполненных заданий;
  • - системной проверкой достаточно большого объема учебного материала.

В то же время у них есть положительные характеристики, присущие только данному виду заданий. Например, они наиболее легки в обработке, позволяют без особых затрат организовать компьютерный сбор и анализ результатов и т.д. Но такие тесты имеют и свои недостатки:

проверка лишь конечных результатов работы;

невозможность проследить логику рассуждения учащегося при выполнении заданий;

некоторая вероятность выбора ответа наугад;

невозможность тестовой проверки некоторых видов учебной деятельности (например, самостоятельного нахождения направлений решения).

Избежать перечисленных недостатков часто помогает достаточно большое количество заданий в тесте (их обычно больше 20) и большое число вариантов ответов (больше 4).

Некоторых из указанных недостатков (например, угадывание ответа) позволяют избежать тесты открытого типа. Но, в то же время, результаты этих заданий труднее поддаются статистической обработке, а для оценивания заданий с развернутым ответом требуется привлечение экспертов, что, в свою очередь, снижает объективность контроля, усложняет стандартизацию теста, увеличивает временные и финансовые затраты на обработку тестовых результатов.

В теории тестов все чаще высказывается мнение о том, что в одном тесте желательно использовать как можно меньше различных форм тестовых заданий. Профессиональные тесты часто отличаются именно моноформностью заданий. Однако это требование не всегда выполнимо из-за специфики тою или иного предмета. Поэтому разработчики часто совмещают в рамках одного теста различные виды тестовых заданий (например, закрытые и открытые).

Например, тесты централизованного тестирования содержат две части (часть А и часть Б). Часть А содержит тестовые задания закрытого типа, а часть Б - открытого.

В таблицах 1.2 и 1.3 приведены сопоставительные характеристики тестовых заданий различного вида.

Таблица 1.2. Сопоставительный анализ тестовых заданий в соответствии с уровнями усвоения учебного материала

Руководствуясь некоторыми из указанных характеристик, создатели теста могут выбирать пригодную для определенных целей форму тестовых заданий. Следует также отметить, что получить всеобъемлющую картину уровня знаний позволит только разумное сочетание тестов с традиционными формами и методами контроля.

Таблица 1.3. Сопоставительный анализ тестовых заданий в соответствии с показателями конструирования теста

Показатели конструирования

Типы заданий

Закрытые

Открытые

С выбором ответов

На установление соответствия

На установление правильной последовательности

С ограниченным ответом

Со свободным ответом

Простота конструирования

Не всегда

Не всегда

Не всегда

Эффект угадывания

Объективность в оценке результата выполнения

Зависит от качества задания

Нет, оценка субъективна

Возможность ошибок учащихся при написании ответа