Технология ЕГЭ. Проблемы практики. Часть I
Технология измерений
Одним из самых уязвимых мест в тестовой технологии измерений уровня знаний являются закрытые вопросы, позволяющие угадывать ответы. Большую часть работы на ЕГЭ составляют задания закрытого типа с четырьмя альтернативами выбора (в иностранном языке — с тремя). Их доля в первичном балле по истории и обществознанию составляет почти 40%, по русскому языку, биологии, физике и химии — около 50%. Более того, вопросы с кратким ответом (обычно часть В) в основном тоже закрытые, хотя и предусматривают множественный выбор. Действительно, открытых вопросов в контрольно-измерительных материалах (КИМ) по всем предметам очень мало (как правило, только в части С).
Алгоритм выполнения заданий части, А — это последовательный просмотр и отсев сомнительных вариантов ответа. Общий недостаток закрытых вопросов — подсказка в альтернативах. Дело даже не в том, что некоторые из них сразу видны как верные. Общим правилом является то, что большинство неверных альтернатив откровенно неправдоподобно. Исключая их, можно получить верный ответ, даже не зная его.
Технология выполнения части, А по физике и информатике (где требуются вычисления) максимально приближена к обычной письменной работе. Однако и здесь присутствует элемент подсказки. Закрытый вопрос позволяет сравнивать полученный ответ с предложенными вариантами. Если совпадений нет, то задача решается до достижения успеха. Открытый вопрос сигнала для повторного поиска верного ответа уже не давал бы. При затруднении подходящий вариант выбирается приблизительно. И в любом случае сохраняется 25процентная вероятность угадать ответ, наобум поставив крестик.
Неплохим инструментом для изучения влияния закрытых вопросов на результаты ЕГЭ является схема Бернулли, позволяющая рассчитывать вероятность получения определенного результата в серии независимых испытаний. В нашем случае мы имеем серию из n заданий части А, в каждом из них есть 4 альтернативы ответа. Угадывание наступает с вероятностью 0,25 (при трех альтернативах — 0,33) и ошибка с вероятностью 0,75 (0,66).
В соответствии с формулой Бернулли:
Pn(k) = Cnkpkqnk, k = 0, 1 … n,
где Pn(k) есть вероятность того, что в n испытаниях произойдет ровно k успехов, определяем, с какой вероятностью можно получить определенное число баллов путем угадывания в серии из n испытаний при начислении 1 балла за верный ответ. Таблица результативности выполнения заданий части, А путем гадания будет выглядеть следующим образом (см. табл. 1).
Таблица 1
|
Предмет |
Число заданий с выбором ответа |
Первичный балл, который в среднем можно получить путем гадания |
Интервал первичных баллов, которые в 90% случаев можно получить путем гадания |
|---|---|---|---|
|
Информатика и ИКТ |
18 |
4,5 |
2−7 |
|
Обществознание |
22 |
5,5 |
2−8 |
|
Физика |
25 |
6,25 |
3−9 |
|
География |
25 |
6,25 |
3−9 |
|
История |
27 |
6,75 |
3−10 |
|
Русский язык |
30 |
7,5 |
4−11 |
|
Химия |
30 |
7,5 |
4−11 |
|
Биология |
36 |
9 |
5−13 |
|
Английский язык |
28 |
9,24 |
5−13 |
Подсчеты по схеме Бернулли показывают, что ноль баллов на ЕГЭ получить почти невозможно. Для этого нужно сдать работу пустой. И действительно, согласно статистике по всем предметам ноль баллов школьники получают чаще, чем один-три балла. Происходит это потому, что они сдают пустые работы.
Наиболее ярко это проявилось в период, когда охват испытаниями стал почти 100-процентным и действовала норма, позволявшая в любом случае получить удовлетворительную оценку. Зная, что тройка им гарантирована, выпускники наобум проставляли крестики в бланке ответов и сдавали работы. Например, в 2007—2008 годах на ЕГЭ по математике почти каждый пятый школьник страны выполнял задания «методом тыка». В ежегодных отчетах Федерального института педагогических измерений (ФИПИ) знания детей, показавших минимальный их уровень, постоянно характеризовались как отрывочные и бессистемные. Хотя какая уж тут система?
Вопросы-угадайки
Столь явное проявление в математике заданий-угадаек, выражающееся в распаде массива участников на две части, объясняется тем, что форма записи ответа (числа, выражения, числовые множества, уравнения) не позволяла выбирать альтернативы методом исключения неправдоподобного. Это стимулировало формальное отношение к выполнению работы: учащиеся стали наобум отмечать варианты ответов.
Понимание того, что знания выпускников проверяются с помощью закрытых вопросов, в значительной мере определяющих результаты испытаний, позволяет избежать ошибок толкования последних. Так, например, уровень, обозначенный Рособрнадзором как минимальный, в значительной мере достигается элементарным гаданием ответов. Поэтому при интерпретации итогов ЕГЭ точку отсчета
Полный текст статьи доступен только подписчикам.
Зарегистрируйтесь, и вам станут доступны два любых материала в любом из наших журналов для ознакомления