Автоматизированная система распределения мест и оценок качества олимпиадных заданий

Одного главного показателя ?1, определяющего приоритет выполненного задания

с позиций формальной логики, для этого недостаточно. Педагогические

соображения, обеспечивающие дифференцированный характер распределения мест,

могут быть учтены лишь с помощью второго, третьего и других показателей

более высокой степени.

Смысл главного показателя приоритета ?1 вполне ясен. Суммарный балл

(3) способен исполнять роль лишь главного показателя приоритета ?1, и в

принципе не может служить предметной базой для дифференцированного подхода.

Возможность использования величины ?2= x1-x2 (5) в качестве

второстепенного показателя приоритета, дополняющего суммарный балл ?1 (4),

достаточно очевидна. Если суммарный балл ?1 определяет выполнение задания с

количественной стороны, то показатель ?2 (5) характеризует качество

выполнения задания. Он показывает, в решении какой из задач (простой или

сложной) участник больше преуспел.

Множественный характер показателей приоритета является свидетельством

самой возможности дифференцированного подхода. С этой точки зрения

соотношение (4) можно рассматривать как необходимое условие, определяющее

соответствие используемой системы распределения мест требованиям

дифференцированного подхода. Следует отметить, что в условиях рязанских

региональных олимпиад условие (4) никогда не выполнялось. Места традиционно

распределялись с использованием лишь одного показателя приоритета -

суммарного балла S (3), что не дает никаких оснований даже говорить о

дифференцированном подходе.

В общепедагогическом плане пренебрежение дифференцированным подходом

может вызывать лишь глубокое сожаление. Олимпиада, являясь педагогическим

мероприятием, должна заниматься не только констатацией способностей

участников на момент ее проведения, но и заботиться о создании

мотивационной базы для развития скрытых потенциальных возможностей

учащихся. В первую очередь, здесь следует обращать внимание на участников,

которые выступили на олимпиаде пока еще не совсем удачно. Этих школьников

необходимо поддержать и отметить хотя бы самые малые их успехи на

олимпиаде, подкрепив все соответствующим поощрением по соображениям

педагогического характера. Дифференцированный подход к распределению мест,

возможный при выполнении соотношения (4), создает для этого все необходимые

условия.

Следует отметить, что введение множественного числа показателей

приоритета, определяющих саму возможность дифференцированного подхода, не

может быть произвольным. Для этого необходимы различаемые этапы решения

задач или различаемые задачи (что несколько предпочтительнее). Именно по

этой причине для олимпиады должны быть использованы разноуровневые задачи

(2). Только различие этих задач сделало понятным смысл ?2 (5) как

показателя поляризации способностей школьника. Для одноуровневых

неразличимых задач показатель ?2 (в отличие от ?1, характеризующий

выполнение задания с количественной стороны) потерял бы всякий смысл, что

сделало бы невозможным его использование как показателя приоритета.

В нашем случае мы ограничиваемся лишь тремя показателями приоритета

?1, ?2 и ?3 при распределении мест, чего вполне достаточно для нашей

задачи. Смысл этих показателей достаточно прозрачен. Показатель ?1, как

показано выше, тождественен суммарному баллу и сам по себе не может быть

использован в качестве критерия для распределения мест. Показатель ?2

характеризует успехи школьника в репродуктивно-продуктивной деятельности по

сравнению со средним арифметическим значением его успехов за отдельно

взятые испытания репродуктивного и продуктивного характера. Он показывает,

насколько соединение способностей школьника отличается от их простого

арифметического сложения. Показатель же ?3 характеризует поляризацию

способностей школьника, представляя его достижения в решении творческих

задач, рассчитанных на продуктивную деятельность, в сравнении с успехами в

решении типовых задач, носящих репродуктивный характер. Все три показателя

являются целыми числами, что существенно облегчает процесс расчета.

Таким образом, имея результаты олимпиады (или, например, сессии),

можно точно подсчитать эти три показателя, исходя из них, можно с большой

точностью говорить о распределении мест. Здесь возникает еще один вопрос:

какой из показателей главный, а какие второстепенный и третьестепенный?

Частично эта проблема решена выше, но там описывались только два параметра.

Решение здесь может быть таким. Необходимо вводить несколько

«дифференцированных подходов» на базе значений показателя ?1 (так как он

является основным и главным для других). Если значения ?1 для большей части

(или для всех) участников отрицательны (это говорит о потенциальной

слабости испытуемого коллектива), то имеет смысл за второстепенный

показатель принять ?2, а за третьестепенный – ?3. Проще говоря, в этом

случае мы акцентируем внимание на репродуктивные (типовые) задачи,

которые, по логике вещей, участники должны решить. Продуктивные

(творческие) же задачи мы как бы не учитываем вообще в силу того, что такой

коллектив может их не решить вообще. Например, таким ансамблем является

коллектив школьников, представленный в программе в базе dbolymp1. Это

условно первый вариант дифференцированного подхода.

Возможен вариант, что значения ?1 для всех участников только равны

нулю или положительны (это признак сильного коллектива). В этом случае за

второстепенный показатель приоритета имеет смысл принять ?3, а за

третьестепенный – ?2. Другими словами, здесь мы делаем упор именно на

продуктивные задачи (они обычно сложнее), а решение типовых задач считаем

саморазумеющимся. Этот подход можно назвать вторым методом

дифференцированного подхода.

И, наконец, самый интересный случай – ?1 для всех участников

принимает и нулевые, и положительные, и отрицательные значения. Здесь

процесс распределения мест несколько усложняется, так как во всем

количестве участников присутствуют и потенциально сильные ученики, и

слабые. Понятно, что всех их сортировать только одним из способов нельзя

(исчезает главный принцип дифференцированного подхода), поэтому мы

прибегаем к комбинационному методу. Суть метода такова. Все многообразие

участников делится пополам, исходя из значений ?1. Тех участников, у

которых ?1?0, относят к условно «сильной» группе и для сортировки

используют метод ?1> ?3> ?2. Те же участники, у которых ?1 ?2> ?3.

Таким образом достигается полная реализация принципов дифференцированного

подхода. Реально, олимпиадных коллективов с такой комбинацией значений

параметра ?1, практически не встречается. Это можно отнести к минусу

составителей олимпиадных заданий, а можно – к учителям, которые готовят

школьников к олимпиадам. Это самый общий принцип дифференцированного

подхода. Мы назовем его условно третьим методом. Этот метод, вообще говоря,

применим всегда, так как видно, что он является сочетанием первых двух

методов. Поэтому, всегда рекомендуется использовать именно его. В

частности, разработанная система не требует вмешательства пользователя в

процесс выбора типа метода, сама выбирает необходимый и сортирует,

придерживаясь этого типа.

Сложно сказать, что должно быть в идеальном случае. С одной стороны,

если сильных участников будет много – это хорошо. С другой стороны – можно

с полной уверенностью сказать о том, что всегда будут и сильные, и слабые

ученики. Единственное, о чем можно точно говорить – модель, которая

использовалась при построении теории, базируется на последнем варианте

распределения.

Это было краткое введение в теорию распределения мест, которая

использовалась при создании автоматизированной системы. Теперь, опять же с

точки зрения теории, рассмотрим проблему оценки уровня качества олимпиадных

заданий, что тоже в дальнейшем понадобится.

§2. О проблеме оценки уровня качества олимпиадных заданий.

Проблема оценки уровня качества олимпиадных заданий является

достаточно интересной областью исследования на данном этапе. Понятно, что

сейчас есть смысл говорить о качестве заданий, предлагаемых на олимпиадах

по различным тематикам. Подобно тому, как любой продукт питания или элемент

домашней техники должен удовлетворять каким-то определенным требованиям,

олимпиадное задание должно также характеризоваться набором каких-либо

параметров, которые, в свою очередь, должны характеризовать его качество и

класс его составителя. Однако такие параметры для конкретного олимпиадного

задания найти достаточно сложно или правильнее сказать практически

невозможно. В этом случае реально можно использовать только один очевидный

параметр – сложность задачи. Но, с другой стороны, одна и та же задача

может быть «сложной по-разному» для разных учеников. Здесь подразумевается

то, что у задачи может быть разный ход решения, приводящий к правильному

результату, и этот ход по-разному воспринимается разными учениками. Проще

говоря, для одного ученика данная задача окажется очень легкой, а для

другого – нерешаемой, и говорить о сложности нет смысла. Однако в контексте

данной теории все задачи условно делят на три группы: продуктивные

(творческие), репродуктивные (типовые) и продуктивно-репродуктивные

(типовые задачи с «изюминкой» или творческие с элементарным смыслом). При

этом полагается, что решение продуктивной задачи вызовет у любого ученика

большую сложность, чем решение репродуктивной.

Вообще говоря, необходимо понять то, что нужно оценивать качество

не какой-то отдельной олимпиадной задачи, а пытаться оценить блок заданий

на олимпиаде и всю ее целиком. Эта задача менее трудна, но тут тоже может

встретиться ряд трудностей, главная из которых заключается в поиске

адекватных педагогической теории параметров, при помощи которых эти самые

задания и оцениваются. То есть необходимо вывести такие показатели, которые

будут полностью объясняемы с точки зрения педагогики. После того, как эти

параметры будут известны, смысл их с педагогической точки зрения понятен,

необходимо попытаться определить оптимальный вид комплектации олимпиадных

заданий по типам задач, при котором будет достигнут максимальный эффект. В

этом, собственно говоря, и заключается смысл всей теории.

§3. Виды задач. Краткое описание каждого вида.

Как уже отмечено выше, в рамках теории существует некое деление

задач по видам деятельности учащихся. Это необходимо для нашего подхода к

оценке их уровня качества. Опишем каждый вид.

1. Продуктивные задачи.

Данный тип задач, как видно из названия, учитывает творческую

деятельность учащихся, то есть при решении таких задач необходимо провести

маленькое исследование или поставить небольшой мысленный эксперимент. Это

необходимо для полного и верного решения. К такому типу задач относят,

например, качественные задачи. Естественно, что данный тип задач является

достаточно сложным для решения, и поэтому часто используется на олимпиадах.

[pic]

Рис. 1. Пример продуктивной задачи.

[pic]

Рис. 2. Распределение по баллам для этой задачи.

2. Репродуктивные задачи.

Этот тип задач дает возможность учитывать репродуктивную деятельность

учащихся. При решении задач такого типа необходимо либо знать определенную

формулу, либо вспомнить ее. По сути, данные задачи – это просто набор

определенных формул, связанных общими неизвестными (найдем данную величину

из этой формулы, подставим вот в эту и получим искомый результат). Такие

задачи обычно очень легкие, буквально в одно действие. Из-за их простоты,

достойного применения на олимпиадах они не нашли. Однако, как потом

выяснится, зря. К такому типу задач можно отнести задачи учебника на

повторение (особенно, 11 класс Мякишева), а также большая часть задач из

сборника Рымкевича.

[pic]

Рис. 3. Пример репродуктивной задачи.

[pic]

Рис.4. Распределение для этой задачи.

3. Продуктивно-репродуктивные задачи.

Это – самый интересный тип задач. Он представляет собой смесь первых

двух видов, что делает его привлекательным для большинства составителей

олимпиадных заданий. В принципе, это верно, ведь данный тип позволяет

проверить знания учащихся сразу в нескольких аспектах. Задачи такого типа,

очевидно, могут иметь различную структуру (см. рис. 5 и рис. 6). На рисунке

ниже представлено два интересных варианта такой структуры.

[pic]

[pic]

Рис. 5. Две структуры продуктивно-репродуктивных задач.

[pic]

[pic]

Рис. 6. Распределения для этих задач.

Ход решения таких задач во многом зависит от их подвида. Например,

задача типа «додуматься, а потом вспомнить» относится как раз к этому

классу. Ясно, что задачи такого типа получили наибольшее распространение на

олимпиадах, а также в задачниках для поступающих в ВУЗы.

§4. Понятие о сбалансированном комплекте олимпиадных заданий. Шкала

сложности.

Введение данного понятия необходимо по нескольким причинам: первая

причина заключается в том, что для построения такой педагогической модели,

которую мы используем в данной работе, необходим какой-то определенный

идеализированный подход к олимпиадным заданиям. То есть нужно представить

себе идеальный случай, при помощи которого можно описать (математически и,

главное, педагогически) все реально встречающиеся варианты. Вторая причина

состоит в том, что для построения шкалы сложности задач, нужно иметь какой-

то базовый элемент, относительно которого и происходит построение этой

шкалы.

В данном параграфе описывается лишь формальное введение основного

понятия данной теории. В полном описании математического вывода и

доказательства педагогической оправданности сбалансированного комплекта

задач нет необходимости в силу того, что сама по себе автоматизированная

система не использует этого понятия, а использует только математические

выводы, которые сделаны на его основе.

Под сбалансированным комплектом олимпиадных заданий, в контексте

данной работы, будем понимать такой комплект заданий, в котором максимально

равномерно воссоединены жесткий, естественный и щадящий режимы испытания

для вывода серии всех испытаний школьников на гуманное отношение к личности

школьников и бережное отношение к их талантам. В рамках представлений

обсуждаемой модели, исходят из двух видов учебной деятельности учащихся и

объясняют разный уровень сложности задач разным насыщением их решений

формальными и творческими моментами. Эти требования к комплекту

тождественны требованиям сбалансированности и полноты этого комплекта по

отношению к репродуктивному, продуктивно-репродуктивному и продуктивному

видам деятельности учащихся.

Хочется обратить внимание на то, что сбалансированный комплект

представляет собой лишь идеализированную модель педагогического испытания

школьников на олимпиадах. Ясно, что такой комплект в реальных условиях

подобрать крайне сложно, однако он позволяет судить о том, какими должны

быть олимпиадные задания, чтобы, в результате, можно было максимально

приблизится к идеалу.

Вопрос об уровне сложности задач носит в рамках рассматриваемой

теории достаточно важный характер. Наиболее исчерпывающий ответ на него

может дать шкала сложности задач. Основные особенности подобной шкалы

непосредственно оговариваются в исходных положениях теории. В связи с этим,

следует упомянуть два момента. Первый момент заключается в том, что для

полного анализа задач достаточен учет двух различных и несводимых друг к

другу видов учебно-познавательной деятельности школьника – репродуктивной и

продуктивной. Второй момент изначально оговаривает большие способности

каждого школьника к репродуктивному виду деятельности по сравнению с

продуктивным. Этот момент условно выразим неравенством: [pic].

Принципиальная особенность указанных моментов заключается в том,

что они определяют заведомо двумерный характер шкалы сложности задач. На

этой шкале каждая задача должна характеризоваться двумя индексами,

учитывающими два вида деятельности учащихся. В соответствии с этим любой

единый показатель уровня сложности задач должен быть двумерным объектом.

Это касается всех возможных шкал, включая и простейший случай ранжированной

шкалы, оперирующей лишь целочисленной нумерацией уровней сложности задач.

Она должна быть также двойной. Из всего сказанного выше ясно, что каждая

задача в комплекте характеризуется точкой с координатами (kn, kp) на шкале.

Где kn – индекс задачи, характеризующий продуктивный (творческие задачи)

вид деятельности, а kp – индекс, характеризующий репродуктивный (типовые

задачи) вид деятельности.

Кроме всего прочего, для построения шкалы сложности особую

значимость имеет местоположение на ней двух задач – «очевидной» и

«недоступной», ограничивающих весь возможный диапозон сложности задач.

«Очевидную» задачу можно определить как задачу, которую полностью решают

Страницы: 1, 2, 3, 4, 5, 6, 7