Определение педагогического теста

 

Педагогическим тестом называется система заданий специ­фической формы, определенного содержания, возрастающей

трудности — система, создаваемая с целью объективно оценить структуру и качественно измерить уровень подготовленности уча­щихся. Для лучшего понимания это определение нуждается в крат­ком истолковании.

Система означает, что в тесте собраны только такие задания, которые обладают системообразующими свойствами. Здесь в пер­вую очередь надо выделить их общую принадлежность к одной и той же учебной дисциплине, их взаимосвязь, выявленную корре­ляционными и факторными методами, их взаимодополняемость и упорядоченность с точки зрения трудности. Сами задания теста представляют собой не вопросы и не задачи, а задания, сформу­лированные в форме утверждения, которые в зависимости от ответов испытуемых могут превращаться в истинные или лож­ные высказывания. Последние легко кодируются принятым по­всеместно двоичным кодом — соответственно 1 или 0 — и далее в таком виде поступают в современные системы обработки инфор­мации. Традиционные вопросы, напротив, истинными или лож­ными не бывают, а ответы на них иногда столь неопределенны и многословны, что для выявления их истинности требуются боль­шие затраты интеллектуальной энергии и преподавательского труда. В этом смысле традиционные вопросы и ответы нетехнологичны, и потому они не включаются в тест, являющийся эффективным средством совершенствования технологии обучения.

Определенное содержание предполагает включение в тест толь­ко такого контрольного материала, содержание которого нахо­дится в соответствии с содержанием учебного материала. Другое содержание в тест не включается. Нарушение этого требования приводит к ухудшению качества теста, вплоть до того момента, когда могут возникнуть вопросы о цели теста и о том, что и как он измеряет. Содержание теста определяется опытными учителя­ми-предметниками, привлекаемыми для его разработки, и экс­пертами из числа профессорского состава, призванными дать чет­кий ответ на вопрос — можно ли с помощью предложенных зада­ний корректно проверить подготовленность учащихся.

Возрастающую трудность заданий можно образно сравнить с системой барьеров на беговой дорожке стадиона, где каждый по­следующий барьер должен быть выше предыдущего. Пробежать всю дистанцию и успешно преодолеть все барьеры может только тот, кто подготовлен лучше всех. Возвращаясь к тестовым заданиям, упорядоченным по принципу возрастающей трудности, можно заметить, что одни — 3 — 5 % — отступают уже на самом легком первом задании, другие — на последующих. Учащиеся среднего уровня подготовленности могут ответить правильно только на по­ловину заданий теста и, наконец, только 1 — 3% самых знающих в состоянии дать правильный ответ на задания самого высокого уровня трудности, расположенные в конце теста. Чем больше правильных ответов, тем выше индивидуальный тестовый балл ис­пытуемых. Обычно тестовый балл ассоциируется с понятием «из­мерение уровня знаний» и проходит процедуру уточнения на ос­нове той или иной модели измерения.

Один и тот же уровень знаний может быть получен за счет ответов на различные задания. Если, например, в тесте из 30 зада­ний учащийся получил 10 баллов, то эти баллы скорее всего по­лучены за счет правильных ответов на первые 10 сравнительно легких заданий. Если это так, то присущую для такого случая по­следовательность единиц, а затем нулей можно назвать правиль­ным профилем учащегося. Это потому, что он правильно решал легкие задания и неправильно — трудные, что согласуется с есте­ственной педагогической логикой. Если же обнаруживается про­тивоположная картина, когда учащийся правильно отвечает на трудные задания и неправильно на легкие, то это совсем не со­гласуется с той же логикой, и потому такой профиль можно на­звать инвертированным. Он встречается чрезвычайно редко, и чаще всего по причине неквалифицированно сделанного теста, в кото­ром задания расположены с нарушением требования возрастания трудности. Если теперь предположить, что тест сделан профессио­нально, то каждый профиль будет свидетельствовать о той или иной структуре знаний. Эту структуру можно назвать элементар­ной, поскольку есть еще факторные структуры, которые выявля­ются с помощью методов факторного анализа.

Заканчивая краткое толкование данного определения педаго­гического теста, хотелось бы заметить, что каждое учебное заве­дение, как и система образования, должно стремиться в первую очередь к правильной структуре знаний, где бы не было досадных пробелов, и затем стремиться к повышению их уровня. Уровень знаний в значительной степени зависит от личных усилий и спо­собностей учащихся, в то время как структура знаний заметно зависит от правильной организации учебного процесса, индиви­дуализации обучения, от уровня педагогического мастерства, объективности контроля — т.е. от всего того, чего у нас более всего не хватает.

 

Основные этапы разработки теста по учебной дисциплине

 

Первый этап. Чтобы разработать педагогический тест по кон­кретной учебной дисциплине или предмету, нужно вначале содер­жание этой дисциплины проструктурировать, во-первых, по ос­новным его разделам или темам, во-вторых, каждый раздел или каждую тему — по понятийным индикаторам первой, второй, третьей и т.д. ступеней, входящих в изучаемый раздел или тему.

Второй этап. Разрабатывается план теста. Если, например, учебная дисциплина состоит из четырех разделов, то вначале делается примерная раскладка необходимого числа заданий на каждый раздел, исходя из общего предельного числа, обычно не превышающего 30—60 коротких заданий разного уровня сложности. Число заданий, выделяемых на каждый раздел, зависит от его важности в изучении дисциплины. Предварительная раскладка заданий дается на примере таблицы 6.

 

 

Третий этап. Разрабатывается перечень задач, которые ста­вятся перед тестированием, например: А — умение давать опреде­ления; Б — знание формул, законов и принципов; В — умение применять формулы, законы и принципы для решения задач и примеров; Г— умение находить сходство и различия; Д — умение представить материал на графиках и схемах. Если на проверку уме­ния А отвести, к примеру, 10% всех заданий, Б и В— по 30%, Г— 20 % и Д — 10 %, то общая раскладка числа заданий для рассмот­ренного примера принимает вид, представленный в таблице 7.

 

 

После выработки общего плана теста начинается самый ответ­ственный четвертый этап — составление и подбор заданий. Эта работа обычно поручается самым опытным учителям, неоднократно преподававшим курс и проверявшим знания учащих­ся по нему. При формировании заданий они руководствуются ря­дом требований. Первое касается количества заданий. Их должно быть примерно в два-три раза больше запланированного числа. Это объясняется тем, что не все предлагаемые задания являются, образно говоря, «работоспособными» в той мере, в какой это пер­воначально считалось: некоторые задания окажутся слишком лег­кими, другие, наоборот, — более трудными, чем ожидалось; одни окажутся более информативными, другие — менее. Поэтому при­мерно с половиной заданий приходится расставаться после пер­вой же проверки, а с некоторыми другими — в процессе последу­ющего углубленного анализа.

Второе требование касается форм заданий. Задания должны иметь такую форму, чтобы их можно было заложить в компьютерную программу и тем самым обеспечить машинную обработку получае­мых результатов, т.е. чтобы можно было использовать элементы информационной технологии. В. С. Аванесов предлагает четыре ос­новные формы: закрытую и открытую формы, задания на соответ­ствие и задания на установление правильной последовательности.

Задания закрытой формы могут быть нескольких видов.

Первый — задания с двумя ответами. Ниже приводится не­сколько примеров:

 

1. Слова, противоположные по значению: 1) антонимы; 2) синонимы.

2. В результате химического поглощения концентрация почвенного раствора — 1) повышается; 2) понижается.

3. Мельчайшей частицей вещества является: 1) атом; 2) молекула.

 

Второй вид заданий закрытой формы: с тремя ответами. На­пример:

 

1. Кинетическая энергия тела зависит от: 1) массы; 2) скорости; 3) массы и скорости.

2. Ядро атома состоит из: 1) протонов и электронов; 2) электронов и нейтронов; 3) нейтронов и протонов.

3. При увеличении влажности свыше 30% прочность древесины:

1) возрастает; 2) не изменяется; 3) снижается.

 

Задания закрытой формы с четырьмя ответами обладают не­сколько большими возможностями в смысле снижения вероятно­сти отгадать правильный ответ.

 

1. Тело, падающие на землю в Северном полушарии, отклоняется к: 1) северу; 2) югу; 3) востоку; 4) западу.

2. Самый чувствительный вид анализа: 1) нейтронно-активационный;

2) атомно-абсорбционный; 3) рентгеноспектральный; 4) эмиссионный спек­тральный.

 

Еще меньше вероятность догадки в заданиях с пятью и боль­шим числом ответов. В практике считается достаточным иметь за­дания с четырьмя или пятью ответами.

 

1. Поверхность жидкости в цилиндрическом сосуде, вращающемся во­круг вертикальной оси, имеет форму: 1) гиперболоида; 2) сферы; 3) эллипсоида; 4) параболоида; 5) конуса.

2. Выборы в I Государственную Думу бойкотировали: 1) кадеты; 2) эсеры; 3) большевики; 4) октябристы; 5) прогрессисты.

 

Одно из возражений против заданий с готовыми ответами — быстрое «рассекречивание» теста. После первого тестирования уча­щиеся сообщают друг другу содержание запомнившихся заданий и правильные ответы к ним. Нередко имеет место и организован­ная утечка тестовой информации.

Средством борьбы против нарушений такого рода является увеличение числа заданий, их классификация по темам, по уровню трудности. По сути, для каждого задания создается десяток, а то и больше вариантов по сходной учебной тематике, но так, чтобы ответы на них были сравнимы по трудности. Еще одно возраже­ние, чисто педагогическое: пользуясь готовыми ответами, учащиеся перестают думать, они не учатся творчеству и т. п. Однако в хорошо сделанном задании ученику приходится думать, сопоставляя один правдоподобный ответ с другими в поисках пра­вильного ответа.

Понятие правдоподобный ответ требует некоторого истолкова­ния. В заданиях с выборочными ответами правдоподобные, но все-таки неправильные ответы играют не меньшую роль, чем само задание, ибо неправдоподобные ответы легко различаются учащимися от правильного ответа, и задание «не работает» из-за пло­хой формулировки ответов. Каждый ответ должен как бы привлекать к себе школьников с той или иной структурой подготовленности. Мера привлекательности каждого ответа определяется долей учащихся, выбравших данный ответ. Чем выше эта доля в неправильных ответах, тем лучше ответ сформулирован. Однако один удачный ответ не делает задание хорошим. Для этого нужно, чтобы и все другие ответы были привлекательными, причем надо добиваться более или менее равномерной правдоподобности. Только тогда задание с выборочными ответами становится удачным. Мера привлекательности каждого ответа устанавливается эмпирически.

Что касается творчества, то эти способности в кратковременный период контроля развить невозможно; это следует делать в процессе занятий. Есть и другие возражения, однако перевешивают отмеченные преимущества в смысле возможностей автоматизации.

С появлением новых моделей тестового измерения вскрылся еще один дефект заданий с выборочным ответом, связанный с параметром догадки. Если до начала 80-х годов закрытые задания были самыми распространенными, то теперь популярность по­степенно переходит к открытым заданиям.

Открытые задания. Эти задания долгое время были привле­кательными для педагогов, использующих безмашинный конт­роль, и совсем неприемлемыми для тех, кто занимался машин­ным контролем. Объясняется это обстоятельство нетехнологично­стью таких заданий: они требовали ручной обработки данных и больших затрат педагогического труда. Обратимся к примерам из различных учебных дисциплин. Отвечая на каждое задание, уче­ник дописывает ответ вместо прочерка.

 

1. Функции форматированного ввода—вывода описаны в файле заго­ловков _____________________________________________________________________________

2. Соли высших жирных кислот называются ________________________________

3. Первым греческим философом был_____________________________________

4. Операция нахождения производной функции называется___________________

5. Программа для ЭВМ состоит из последовательности______________________

6. Три вектора линейно зависимы тогда и только тогда, когда они _____________________________________________________________________________

 

Предполагается, что учащиеся должны давать ответы в корот­ких и четких формулировках, о чем следует предупредить в инст­рукции к тесту. Для ответа в бланке отводится столько места, сколь­ко необходимо. Число таких заданий, называемых открытыми, бывает небольшим, обычно не более 10—15 в одном тесте.

Поступающая сейчас в школы новая контрольно-обучающая техника позволяет вводить ответы в виде слов, формул и других знаков. Это существенно меняет отношение педагогической об­щественности в пользу открытых заданий, главным образом из-за того, что в них исключается догадка. Ответ вводится в виде одного (реже двух, но не более) ключевого термина, знание которого является обязательным. Открытые задания применяются для про­верки основных понятий, фактов. Они эффективны в процессе текущего, тематического и итогового контроля.

К открытой форме заданий примыкают и задания, выражен­ные в виде составного предиката.

Например. Если точка лежит на биссектрисе, то от сторон этого угла она_____

Это задание состоит из двух частей: первая — условие, вторая — заключение, или вывод. Условие задается однозначно, вывод пред­ставляется в виде переменной с только одним правильным отве­том из множества возможных.

Методика создания открытых заданий довольно проста. Внача­ле разработчик формулирует вопрос. Затем записывает такой же точный и немногословный ответ. Из ответа далее исключается клю­чевое слово, которое учащийся должен дополнить. Рассмотрим пример.

 

Вопрос: с помощью какой клавиши в компьютере производится пере­мещение курсора из одного окна в другое?

Ответ: перемещение курсора из одного окна в другое производится с помощью клавиши [TAB].

Тестовое задание: перемещение курсора из одного окна в другое про­изводится с помощью клавиши___________________________________________________

 

Задания на соответствие. Задания на соответствие появились сравнительно недавно. Суть таких заданий заключается в необхо­димости установить соответствие элементов одного множества элементам другого. Эти задания сопровождаются инструкцией для учащихся, состоящей только из двух слов «Установите соответствие». Ниже приводятся примеры заданий этой формы.

 

В строке «Ответы» после тире за каждой цифрой учащийся ставит букву, под которой стоит название соответствующей культу­ры. Для данного задания это будут ответы: 1 — в), 2 — а), 3 — д)

Теперь приведем примеры заданий из различных учебных дис­циплин, которые применяются в текущем контроле.

 

Задания на установление правильной последовательности. Эти

задания разработаны для проверки владения последовательностью действий, процессов, операций, суждений, вычислений и т.п.

Ученику дается инструкция: установить правильную последова­тельность, в соответствии с которой слева, в прямоугольниках, ставятся цифры, указывающие на порядок действий. Например:

 

 

Помимо проверки знаний алгоритмов деятельности задания на установление правильной последовательности могут разрабаты­ваться и соответственно использоваться для контроля знаний ос­новных понятий и законов изучаемой учебной дисциплины. На­пример:

 

 

При подготовке заданий на установление правильной после­довательности необходимо давать четкие названия как бы воп­росительной части и точные формулировки каждого элемента от­ветов, проводить тщательную алгоритмизацию контролируемой деятельности в соответствии с нормативными требованиями, тре­бованиями эффективности и др. при условии непротиворечивости всех этих требований.

Все четыре представленные выше формы могут быть использо­ваны при разработке тематических заданий.

Рассматривая сравнительную ценность всех четырех представ­ленных форм тестовых заданий, можно сказать, что в последнее время предпочтение стало больше отдаваться открытой форме за­даний, в которых вероятность отгадать правильный ответ равна нулю. Но это не значит, что остальные формы не позволяют под­готовить хороший тест. Каждая форма имеет свои достоинства и недостатки, и выбор во многом зависит от учебной дисциплины, от цели создания и применения тестов, от ориентации на ручную или машинную обработку данных и даже от приверженности со­ставителя к той или иной теории тестов. Все это подтверждает мысль о том, что выбор формы — процесс не менее творческий, чем создание и культурное применение тестов.

 

Вопросы и задания для самоконтроля

 

1. Расскажите о сущности и содержании диагностической функции педагогического контроля в школе.

2. В чем сущность обучающей функции педагогического контроля в школе?

3. В чем проявляется организующая функция педагогического контро­ля в школе?

4. Каковы общепедагогические основы использования методов тести­рования в школе?

5. Каковы достоинства и недостатки использования методов тестиро­вания в школе?

6. Каким требованиям должен удовлетворять научно обоснованный тест?

7. Каким должен быть педагогический тест? Дайте определение и крат­кое описание.

8. Расскажите об основных этапах разработки теста по учебной дис­циплине.

9. Какие формы тестовых заданий применяются при составлении пе­дагогических тестов? Приведите примеры.

 

Глава 6