«Оценивание как результат и результаты оценивания»
Анатолий Каспржак, Рига, 2011
2
Вчера сначала мы задали вопрос:
Почему наши отличники так часто бывают не столь успешны в жизни?
Почему из двух, примерно одинаково знающих иностранный язык граждан, один договаривается с иностранцем, а второй нет?
Правомерно ли нищему российскому (латышскому) интеллектуалу смеяться над неосведомленностью, серостью преуспевающего американца?
ПОД КОМПЕТЕНТНОСТЬЮ БУДЕМ ПОНИМАТЬ СПОСОБНОСТЬ РЕЗУЛЬТАТИВНО ДЕЙСТВОВАТЬ В НЕСТАНДАРТНЫХ СИТУАЦИЯХ (РАБОЧЕЕ ОПРЕДЕЛЕНИЕ)
«Нестандартными» давайте считать те учебные ситуации, которые не могут быть решены только за счет формальной выученности, наученности
3
Ресурс личности, позволяющий разрешить проблему (персональная компетентность студента)
Знания и Умения – Интеллектуальные;Предметные;Общие.
Способности
Модернизированная схема Г. Цукерман
3
4
Перечислим, кратко, те дефициты, которые обнаружились у российских школьников в исследовании PISA (2000 - 2003)
У наших школьников:
Не сформированы различные типы чтения (работа с информацией, представленной в неявном виде, форме таблиц, реконструкция разных точек зрения и т.д. Они работают с «приготовленными» текстами);
Отсутствует учебная самостоятельность, присутствует установка на стереотип (например: не могут самостоятельно установить требуемый уровень точности ответа, на используется личный опыт, тест как проблема);
Нет потребность решить проблему, но не задачу (предметы – сигналы; подсчитать – применить формулу, объяснить что-то кому-то).
5
Одним словом, результативность современной постсоветской школы моно
представить примерно так:
З У
Н
Российская школа «выдает» ученика информированного, но мало что умеющего, «избегающего неопределенностей», наполняющих реальную жизнь….
6
В то время, как результат пребывания в школе национального нарицательного образа:
Выражается несколько другой «формулой» -
З У Н
7
«Обучение» и «образование»: современный взгляд (по книге Ивана Иллича «Освобождение от школ»)
Обучение – инструмент, дающий человеку возможность накопить «фонд знаний», подобно тому, как бизнес позволяет ему аккумулировать капитальные фонды….
Образование – процесс свободного
определения каждым учащимся своего собственного места в жизни и обучении, то есть того места, которое знание должно занять в его жизни….
ИТАК:В современной школе, должна быть ярко выражена
образовательная «доминанта»
Обучение (учение) через реконструкцию опыта
Джон Дьюи
Ощущение
затруднения
Осознание проблемы
Критическое
осмысление
проблемы
Проверка гипотезы
(действие)
Выдвижение
гипотезы
8
Обучение через опыт (цикл Колба)Дэвид Колб
1.Непосредственны
й опыт
2.Наблюдение и
рефлексия
3. Формиров
ание абстракт
ных моделей
и концепци
й
4. Экспериментирова
ние
9
ЧЕМУ МЕНЯ НАУЧИЛА ШКОЛА?
Состав когорты 2007-2009 (учатся у нас два года) выглядит так. Средний возраст – 36,5 лет; 87% - женщины, 13% - мужчины; 60% - замужем или женаты, на одного человека приходиться 0,8 ребенка. Это – школьные учителя, желающие стать управленцами – 23%; школьные администраторы – 37%; специалисты региональных и муниципальных управлений образования – 23%; работники системы высшего образования – 17%. Средний стаж педагогической работы составляет 11,8 года.
20%
10%
33%
23%
14%
Ничему. Для меня это был исторический факт
Писать, читать и считать
Преодолевать трудности, выживать, приспосабливаться, не быть самим собой, противостоять обществу
Общению
Объяснила, что некоторые вещи я сделать никогда не смогу, привила стойкое отвращение к чтению, математике и т.д.
10
11
«Школа как средство образования была для меня просто пустым местом» Чарльз Дарвин.
12
«В нашем мире есть только два заведения, где главным фактором является срок, а не проделанная работа, - это школа и тюрьма. В других местах важна работа, а не то, сколько на нее ушло времени» Уильям Глассер, слова учителя.
13
«Из всего, что предназначается на земле для людей невинных, самое ужасное – это школа». Бернард Шоу.
14
«Я думаю, что детей лучше топить, чем заключать в современные школы» Мария Кюри.
15
«И, несмотря на все наши усилия, дети все-таки чему-то учатся». В.В. Давыдов.
ТАК ЧТО ЖЕ ЯВЛЯЕТСЯ ПОДЛИННЫМ РЕЗУЛЬТАТОМ ШКОЛЬНОГО ОБРАЗОВАНИЯ? КАК СВЯЗАНЫ ЭТИ РЕЗУЛЬТАТЫ С ФОРМАЛЬНЫМ И СКРЫТЫМ УЧЕБНЫМ ПЛАНОМ? И, ЧТО, НА МОЙ ВЗГЛЯД, ГЛАВНОЕ: «ЧТО СОБСТВЕННО СЕГОДНЯ ЯВЛЯЕТСЯ ПРЕДМЕТОМ ОЦЕНИВАНИЯ И КАК ЭТОТ СПОСОБ ВЛИЯЕТ НА РЕЗУЛЬТАТЫ И ЭФФЕКТЫ РАБОТЫ ШКОЛЫ КАК ИНСТИТУТА?».
Именно об этом я попробую рассуждать сегодня.
16
О ТОМ, КАК ИЗМЕРИТЕЛЬ ОПРЕДЕЛИЛ СОДЕРЖАНИЕ ОБРАЗОВАНИЯ И ДОМИНИРУЮЩИЕ ВИДЫ УЧЕБНОЙ ДЕЯТЕЛЬНОСТИ И, В КОНЕЧНОМ СЧЕТЕ – ПЛАНИРУЕМЫЙ РЕЗУЛЬТАТ
Часть вторая
17
Мозг хорошо устроенный, стоит больше,чем мозг хорошо наполненный.
М. Монтень
Традиционная школа, будучи не способна оценить образовательный эффект, который и является подлинным результатом образования, ориентируется на то, что умеет измерять, то есть – результаты формального научения.
18
19
КТО, КАК и ЧТО оценивает сегодня в школе?
1. Учитель методом экспертной оценки оценивает разрозненные (не систематизированные) учебные достижения школьников.
2. Отчуждаемые продукты (формально и не формально)
19
20
Профессиональная компетентность баскетболиста в
«различных логиках»
Хороший баскетболист в логике компетентностного подхода (молодой человек) –
1. Получает очки путем попадания мячом в кольцо.
2. Умеет выбрать нужный прием для достижения желаемого результата.
3. Вписывается в стандарт профессиональной игры.
4. Работает над совершенствованием профессиональных навыков.
Хороший баскетболист в «знаниевой» логике (студент)–
1. Знает как надо добывать очки путем бросания мячом в кольцо.
2. Понимает, когда и как надо бросить мяч.
3. Знает и понимает стандарт профессиональной игры;
4. Изучил и попробовал на себе способы совершенствования профессиональных навыков
КТО КРАШЕ? ИЛИ – ДЕЙСТВИТЕЛЬНО ЛИ МАТЕМАТИКА УМ В ПОРЯДОК ПРИВОДИТ….‽
Сравнение (пример) 1
21
‽‽
КТО КРАШЕ? ИЛИ – ДЕЙСТВИТЕЛЬНО ЛИ МАТЕМАТИКА УМ В ПОРЯДОК ПРИВОДИТ….‽
Сравнение (пример) 2
22
‽‽
Акцентировав оценочную деятельность на знаниях и умениях, мы понуждаем человека развивать у себя именно эту свою ресурсную часть….
23
ЧАСТЬ ТРЕТЬЯ
«…Оценка – это тот узел, тот перекресток, на котором встречаются все участники школьной жизни: дети, их родители, учителя, администрация…».И. Улановская, Г. Цукерман, Е. Юдина.
Модернизация образовательного процесса в начальной, основной и старшей школе: варианты решения. Рекомендации для организации опытно-экспериментальной работы. / А. Каспржак, Л. Иванова, К. Митрофанов и др. – М. : Просвещение, 2004
Попробуем ответить на вопрос: «ЧТО, КАК и ЗАЧЕМ «из учебных достижений школьника» оценивают сегодня учителя в классе?
24
25
Как это соотносится с существующими видами
оценивания Оценивание с целью присвоения квалификации. Экзамен
на подтверждение квалификации («вынесен» за пределы рассмотрения).
Селективное оценивание (отбор, тест способностей
и/или достижений). Образовательный и профессиональный отбор. переводные экзамены и т.д.
Образовательное оценивание относительно результата (формирующее оценивание). Повышение качества образования посредствам систематического диагностирования.
25
Функции оценивания
Проинформировать (обратная связь со всеми участниками процесса)
Стимулировать (повысить самооценку)
Сравнить (с собой, с другими)Научить оценивать себя
26
К. Поливанова (еще одно возвращение к прошлому году): «Домашнее задание дается учителем не для того, чтобы стимулировать учебную активность школьника, а для того, чтобы его ПРОКОНРОЛИРОВАТЬ».
27
РФ Среднее международн
ое
Я очень напрягаюсь, когда выполняю домашние задания
39 29
Я беспокоюсь, что получу плохие оценки
72 59
28
Показатель РФСредне
е
Выводы
Я напрягаюсь, когда мне приходится выполнять домашние задания 39 29
Ученики все время пишут контрольныеЯ беспокоюсь, что получу плохие оценки 72 59
Я так часто решаю некоторые задания по математике, что чувствую, что могу решить их даже во сне 24 34
Основной принцип – зубрежка и дрессура
Когда я решаю задачи, я часто стараюсь найти новый способ решения 31 49
На уроках шум и беспорядок 16 36 a. Жесткая дисциплина;
b. Отсутствуют «шумные» виды работ
Преподавателю приходится долго ждать, пока учащиеся успокоятся 18 32
Учащиеся долго не приступают к работе после начала урока 15 29
Преподаватель дает учащимся высказать свою точку зрения 71 59
Самое страшное – это считается нормой и «свободой»
Я думаю о том, как может быть использована математика в повседневной жизни 67 53
Отвечаем на вопрос не как думаем, а как должно быть (принцип «У-2»)
Когда я занимаюсь математикой, я стараюсь установить связи между изучаемым материалом и тем, что выучил по другим предметам 56 44
Я чувствую себя частью коллектива 92 81 Внутренняя противоречивостьМне кажется, что я нравлюсь тем с кем учусь 51 86
Школа научила мена принимать решения 86 53 !!!???
Не имея ресурсов для того, чтобы осуществлять мониторинг учебных достижений школьников в классе (осуществлять образовательное, формирующее оценивание), учителя подменяют его селективным оцениванием. Это ведет к:
29
Пересмотру (подмене) целей образования. Задача отдельной личности не решается, производится, как говорил Г.П. Щедровицкий, фиктивно демонстративный продукт;
Узакониванию феодальных отношений в классе и школе в целом. Школьник неминуемо попадает в «пристройку снизу», более того – эта становиться для значительной части выпускников не только нормой, но и потребностью;
Массовому блокированию интерактивных методов обучения, тех, которые ориентированы на создание условий для формирования у учеников школ ключевых компетентностей.
ЧАСТЬ ЧЕТВЕРТАЯ –
ЧТО ДЕЛАТЬ?
30
Работу по преодолению стереотипа вели педагоги и психологи
Обе группы исходили из того, что – эффективность школьной отметки зависит, прежде всего, от того, в какой степени ученик сможет интерпретировать оценку, закодированную в виде символа (отметки)
Выводы педагогов и психологов
1. Если критерии оценивания становились «открытыми», не менялись от урока к уроку, школьник перестает быть объектом и становится субъектом образовательного процесса. Отметка же перестает быть средством опосредованного управления и манипулирования учеником.
2. Различные школы могут использовать различные критерии оценивания одних и тех же работ, исходя из специфики конкретной школы (решаемых ей задач). Незыблемыми должны оставаться лишь принципы:
• Оценка накапливается. Тройка – это оценка (поощрение) за сделанное, а не наказание;
• Шкала оценивания многобальная, отличная оценка ставиться не за все выполненное, а за определенную часть.
• Качество оценочной схемы определяется ее возможностью в плане исключения субъективизма. Это могло достигаться за счет самой схемы оценивания, так и их сочетания. Например: учитель + школа + самооценка + взаимооценка.
Чтобы я на месте директора школы начал делать уже сегодня?1. Создал службу мониторинга (внешне оценивание не
выручает);
2. Демпфировал ориентацию контроля на «знаниевую» сторону образования за счет введения внешнего текущего и итогового контроля, направленного на обеспечение личностного роста ученика, его самореализации по отношению к образовательным областям. Это надо делать на уровне Федерации и региона, но, можно делать и на уровне школы.
3. Сделал открытыми для всех субъектов образовательного процесса (прежде всего – учителей, учеников и их родителей) критерии и схемы (процедуры) оценивания (подчиненность и одконтрольность). Это не только снимет нервозность (первопричина тревожности), но и позволит нормативно закрепить:
•Дифференциацию оценки относительно типа работ (что-то может, например оцениваться по системе «зачет-незачет», по самому факту участия в этой работе и т.д.). То есть, ввести и закрепить в школе уровневый подход, перейти. •Дифференциацию оценки относительно ее субъекта (введение партфолио, например, который состоит из внешней (учительской) оценки, самооценки, взамиооценки и т.д.).
ПОРАБОТАЕМ С ОЦЕНКОЙ ПРАКТИЧЕСКИ
34
Изучив задание попробуем ответить на следующие вопросы:
1. Для чего может быть дана такая работа (диагностика, стимуляция, коррекция, развитие)?
2. Понимая, что конечной целью оценивания является ответ на вопрос: «Как дальше улучшить свою деятельность?», понять – кому он (этот вопрос) адресован.
3. Попытаться ответить на вопрос: «Зачем мы будем эту работу оценивать, чего и от кого (каждого ученика, класса в целом) хотим добиться, какого результата достичь?
35
ЗАЧЕМ МЫ ОЦЕНИВАЕМ?
Для улучшения успехов тех, кого оцениваем; Для улучшения механизмов оценивания; Для улучшения методов, средств и стратегий оценивания; Для сертификации уровня знаний и основных навыков
учащихся по завершении ступеней образования. Для организации отбора; Для изучения успехов и прогресса; Для исправления результатов; Для формирования навыков самооценки; Для выявления недостатков или дисфункций и выработки
правильной стратегии; Для изучения исходной стадии и прогнозирования дальнейших
действий. Для оптимизации полученных результатов в преподавании,
обучениии оценивании;
Для выработки корректирующих прогрессивных программ в случае неудовлетворительных результатов.
36
И, наконец –
4. Как мы оцениваем? Каков механизм оценивания? По каким критериям и шкале мы оцениваем? Помним, что это связано с задачей (функцией) оценивания.
5. Как и кому представляем (предъявляем, обнародуем) результат?
37
Как мы оцениваем? Каков механизм оценивания?
38
Предполагаемые цели/результаты обучения в данном модуле
ИнтеллектуальныеАнализировать и критически оценивать теоретические и практические работы в данной области благодаря приобретенным навыкам критического рассмотрения исследований в области образовательной политики и менеджмента;Уверенно применять модели и концепции управления изменениями к себе и своим организациям;Осмысливать собственную практику, а также связь теории и практики в данной области;Интерпретировать и применять данные и результаты социальных исследований при разработке политики и в практике управления.Развить свои способности к письменной коммуникации применительно к широкому спектру академических и профессиональных задач;Приобрести и отработать навыки разработки проектов и управления ими;
ПрактическиеПриобрести навыки разработки и управления проектами, связанными с проведением социальных исследований и практическими микроисследования, а также осуществление развернутых исследований по выбранным темам.
ШКОЛА: Предметные + Интеллектуальные + Общие
РАЗРАБОТЧИКИ ОЦЕНОЧНОГО ЛИСТАНе должны
избегать употреблять описательные глаголы, такие как:◦ «понимать»;◦ «знать»;◦ «осознавать»;◦ «разбираться
в…»….
Стремиться использовать такие конкретные глаголы как:◦ «быть способным
определять»;◦ «уметь применять»;◦ «уметь
анализировать» ◦ «быть знакомым
с…»….
Типичная ошибка при описании образовательных результатов: при их описании говорят об обучении, а не о представлении (предъявлении) изученного.
39
По каким критериям и шкале мы оцениваем?
40
Достижение планируемых результатов обучения A B C D E 35% Комментарии:
Актуальность, значимость исследования (работы) A B C D E 25%Качество, самостоятельность анализа, убедительность аргументацииКомментарии: Диапазон используемой литературы, источников, A B C D E 10%качество ссылокКомментарии:
Практическая значимость работы A B C D E 20 %Комментарии:
Организация, структура работы A B C D E 5 %Комментарии:
Общие умения и навыки A B C D E 5 %(оформление, грамотность и т.д.)Комментарии:
А теперь попробуем выступить в роли эксперта-оценщика
На вопрос экзаменатора: «Как пройти на Красную площадь от Арбата?» Студент-первокурсник ИИЯ ответил:
«Надо ходить в сторону площадь Арбат, потом все время прямо от проспект Калинин и вы увидите Кремль, а там налево через саду и вот будет Красная площадь»
Попробуйте подумать и оценить этот ответ по 5-балльной шкале и обоснуйте свою оценку.
41
Формирующая (суммирующая) оценкаПравильно понят вопрос- 2 баллаОтвет дает запрашиваемую
информацию – 2 баллаЛексико-грамматическое оформление
ответа не приведет к коммуникативным сбоям-1 балл
Лексико-грамматическое оформление ответа полностью соответствует нормам языка- (1) балл
42
Еще одно задание На автоответчике записано сообщение.
Экзаменуемая прослушала его и должна устно передать это сообщение мужу.
Привет, Лариса,Ты сегодня выглядывала в окно? Дождь, похоже, ни на минуту не прекращается. Ну и ветер просто сдувает с места. Я так расстроилась - похоже, опять нашим планам сбыться не суждено. Давай отменим нашу встречу в три часа. Скажи Алексею, что - все равно вести детей в зоопарк не получится, так что пусть не приезжает за мной. Но мы обязательно должны встретиться, пока ты не уехала. Прогноз на весь день плохой, но, может быть, к вечеру хотя бы дождь стихнет, и мы сходим вместе в кафе. До связи. Наташа.
43
Сейчас вы оцените, то, как Ларисе удалось передать сообщение мужу. Ответ оценивается из 9 баллов. Положительно оценивается ответ от 5 баллов:
До 5 баллов- не справился 5 баллов – удовлетворительно 6-7 баллов- хорошо 8-9 баллов- отлично Критерии оценки: Коммуникативное намерение реализовано- 5
баллов Некоторые основные факты переданы верно-6
баллов Все основные факты переданы верно- 7 баллов Удалось передать и настроение (эмоции) автора
текста- 8 баллов Удалось правильно грамматически и
лексически оформить текст- 9 баллов44
Ответ ЛарисыЗвонила Наташа. Она очень
расстроилась - погода испортилась и ветер дует и дождь. Наверное, вместо зоопарка пойдем в кино. Нельзя не увидеться - мы ведь скоро уезжаем.
45
Сейчас вы оцените, то, как Ларисе удалось передать сообщение мужу. Ответ оценивается из 9 баллов. Положительно оценивается ответ от 5 баллов:
До 5 баллов- не справился 5 баллов – удовлетворительно 6-7баллов- хорошо 8-9 баллов- отличноКритерии оценки: Коммуникативное намерение реализовано- 5
баллов Некоторые основные факты переданы верно-6
баллов Все основные факты переданы верно- 7 баллов Удалось передать и настроение (эмоции) автора
текста- 8 баллов Удалось правильно грамматически и
лексически оформить текст- 9 баллов
46
47
Обсудим еще раз: «Какие требования следует предъявить к образовательным
результатам современной школы?»
Предметные
Интеллектуальные - нахождение информации, установление связей, анализ и критическое осмысление результата, интерпретация текста и т.д.;
Общие - освоение типа, процедур отношений – «скрытый учебный план».
48
Традиционные задания позволяют:
Приобрести предметные
умения
Но не разделить «смыслы» (математический и физический)
I = U / RR = U / II = U / RR = U / II = U / RI = U / R
И, КАК СЛЕДСТВИЕ, НЕ РЕШИТЬ ЗАДАЧУ СОЗДАНИЯ УСЛОВИЙ ДЛЯ САМООПРЕДЕЛЕНИЯ УЧЕНИКА ОТНОСИТЕЛЬНО ЕГО
ЖИЗНЕННОЙ ПЕРСПЕКТИВЫ
КК С.В.С.В. ЭЛ.ЭЛ.
49
Возвратимся к исследованию PISA которое показало, что «прогресса» не
случиться, если не произойдет: Переориентации школы на новые
образовательные результаты (новое качество образования);
Принципиально не измениться содержание образования, формы работы учителя и ученика (процессы учения и обучения);
Не изменится характер взаимоотношений между субъектами образовательного процесса.
ВМЕСТО ЗАКЛЮЧЕНИЯ