Статья 97. Информационная открытость системы образования. Мониторинг в системе образования

1. Региональный ИнКО «Обновление общего образования в условиях реализации ФГОС»Разработка и оценка контрольно-измерительных материалов по диагностике достижения планируемых результатов обучающихся 6 кл.Научно-практический семинар в режиме ВКСдля учителей иностранного языкаКафедра методики обучения иностранным языкам БОУ ДПО «ИРООО»

2. «Когда человек не знает, к какой пристани он держит путь, для него ни один ветер не будет попутным» (Сенека)

3. Статья 97. Информационная открытость системы образования. Мониторинг в системе образования П. 3.Мониторинг - систематическое стандартизированное наблюдениеза состоянием образования и динамикой изменений его результатов, условиями осуществления образовательной деятельности, контингентом обучающихся, учебными и внеучебными достижениями обучающихся, профессиональными достижениями выпускников организаций, осуществляющих образовательную деятельность, состоянием сети организаций, осуществляющих образовательную деятельность. П.4. Организация мониторинга… осуществляется федеральными государственными органами и органами исполнительной власти субъектов Российской Федерации, осуществляющими государственное управление в сфере образования, органами местного самоуправления, осуществляющими управление в сфере образования. Статья 98. Информационные системы в системе образования П. 1. В целях информационного обеспечения управления в системе образования и государственной регламентации образовательной деятельности уполномоченными органами государственной власти Российской Федерации и органами государственной власти субъектов Российской Федерации создаются, формируются и ведутся государственные информационные системы… Федеральный закон РФ N 273-ФЗ «Об образовании в Российской Федерации»

4. Ведущими функциями мониторинга в образовании являются: • информационная, • диагностическая, • сравнительная • прогностическая.

5. Виды мониторинга • Информационный мониторинг. • Диагностический мониторинг. • Сравнительный мониторинг. • Прогностический мониторинг.

6. Задачи мониторинга • осуществление контроля над исполнением законодательства в области образования • создание стандартизированной системы для оценки качества языковой подготовки • анализ достижений в изучении иностранных языков • корректировка тематического планирования и программы • анализ и оценка эффективности деятельности учителей • распространение педагогического опыта

7. Основные принципы мониторинга Систематическое оценивание достижения учащихся по всем видам речевой деятельности; Применение балльной системы при оценивании и соотнесение баллов с рейтинговой шкалой; Использование единых критериев оценивания; Проведение тестирования в рамках отведенных уроков; Накопление результатов работ учащихся с целью отслеживания динамики развития коммуникативной компетенции.

8. Основные характеристики мониторинга и контроля Прозрачность Системность Последовательность Согласованность Координация Обратная связь Рефлексия

9. Условия эффективного проведения мониторинга: • использование системного подхода, обеспечивающего слаженную работу механизма по сбору, обработке, анализу и интерпретации информации; • сочетание количественных и качественных методов измерения в мониторинге; • репрезентативная совокупность показателей мониторинга, учет различных, в том числе и косвенно влияющих на результаты обучения, факторов; • корректная интерпретация данных мониторинга с учетом различных влияний и связей между показателями; • репрезентативность выборочных совокупностей учащихся, принимающих участие в мониторинге; • привлечение к проведению мониторинга квалифицированных специалистов и преподавателей школ; • использование качественного инструментария и современного программного обеспечения для обработки и анализа данных мониторинга; • методическая и финансовая помощь со стороны органов управления образованием разного уровня.

10. Организациямониторинга качества результатов

11. Управленческие решения и последствия мониторинга на уровне школы Рост качества уровня обученности учащихся по ИЯ; Развитие ответственности учащихся за результаты обучения; Изменение содержанияи технологий обучения ИЯ; Развитие педагогической компетенции преподавателей.

12. Общая характеристика педагогического контроля. Педагогический контроль представляет собой единую дидактическую и методическую систему проверочной деятельности, которая протекает при руководящей и организующей роли педагогов, носит совместный характер, объединяя преподавателей и учащихся, и направлена на оценку результатов учебного процесса.

13. Виды педагогического контроля: • Входной - используется лишь в случае отбора учащихся при конкурсном зачислении в профильные классы или является инициативой педагогов, уделяющих большое внимание индивидуализации учебного процесса. • Текущий - осуществляется с помощью устного опроса, письменных контрольных работ, а также педагогических тестов. • Тематический - контроль выявляет степень усвоения раздела или темы программы. • Рубежный, поэтапный - выявление результатов определенного этапа обучения. • Итоговый - оценка работы учащихся после прохождения всего учебного курса.

17. Функции педагогического контроля: • диагностическая, • контролирующая, • обучающая, • воспитывающая, • мотивирующая, • развивающая, • ПРОГНОСТИЧЕСКАЯ

18. Принципы контроля: • научности, • эффективности, • иерархической организации, • объективности, • систематичности, • справедливости, • всесторонности.

19. «Оценка» - «Отметка» Оценка – это процесс оценивания; мнение о ценности, уровне или значении кого-чего-н. (толковый словарь С.И. Ожегова) Отметка – знак, сделанный на чем-л.; результат процесса оценивания; принятая в учебной системе оценка знаний, поведения учащихся (толковый словарь С.И. Ожегова)

20. ОТМЕТКА Отметка ставится только за решение продуктивной учебной задачи, в ходе которой ученик осмысливал цель и условия задания, осуществлял действия по поиску решения (хотя бы одно умение по использованию знаний), получал и представлял результат. ОЦЕНКА Оценивать можно любое действие ученика (особенно успешное): удачную мысль в диалоге, односложный ответ на репродуктивный вопрос и т.д.

21. Функции оценивания и оценки Диагностика Обратная связь Прогнозирование Стимулирование и мотивация Представление о достигнутых результатах и степени их соответствия требованиям образовательных стандартов Выявление положительных и отрицательных тенденций в деятельности учителя

22. Оценочная деятельность должна строиться на принципах: Оценивание является постоянным процессом; Оценивание может быть только критериальным; Оцениваться с помощью отметок могут только результаты деятельности, но не личные качества; Система оценивания выстраивается таким образом, чтобы учащиеся включались в контрольно-оценочную деятельность, приобретая навыки и привычки к самооценке и взаимооценке; В оценочной деятельности реализуется заложенный в стандарте принцип распределения ответственности между различными участниками образовательного процесса.

23. Принципиальные изменения в новой системе оценивания: • Изменение инструментария - форм и методов оценки • Приоритетными в диагностике (контрольные работы и т.п.) становятся не репродуктивные задания (на воспроизведение информации), а продуктивные задания(задачи) по применению знаний и умений, создание учеником вывода, оценки и т.п. • Принципиальное переосмысление (по сути изменение) традиционной оценочно-отметочной шкалы. • Вместо классного журнала главным средством накопления информации об образовательных результатах ученика становится «портфолио» (официальный классный журнал не отменяется!)

24. ПОДХОДЫ К ОЦЕНИВАНИЮ, ИСПОЛЬЗУЕМЫЕ В СОВРЕМЕННОЙ ШКОЛЕ Безотметочная система – широко практикуется в начальной школе, имеет целью научить младших школьников контрольно-оценочным действиям; «Портфолио» - дает возможность удачно сочетать оценку учителя и самооценку. Учитель и ученики договариваются, какие задачи они будут решать на определенном отрезке времени, затем учащимся предлагается форма «Портфолио» для обобщения знаний и осмысления работы. Договариваются также о том, какие материалы составят совокупный критерий. Когда работа подойдет к концу, ученикам предлагается выставить себе оценку, оценить работу товарища. Затем преподаватель дает свой отзыв. «Портфолио» - это не просто подборка работ, а заранее спланированное учеником индивидуальное собрание достижений.

25. ПОДХОДЫ К ОЦЕНИВАНИЮ, ИСПОЛЬЗУЕМЫЕ В СОВРЕМЕННОЙ ШКОЛЕ Пролонгированное оценивание (накопительный рейтинг) – за отдельные этапы либо виды работ выставляется определенное количество промежуточных баллов (очков). Итог не выходит за рамки традиционной пятибалльной системы, зато ученик имеет шанс превратить «3» в «5». Многобальная система(от 10 и выше)– каждое задание в зависимости от сложности, нестандартности и креативности, оценивается по определенной пропорционально увеличивающейся шкале. Как правило, подобная система существует параллельно с пятибальной и охватывает элективные и дополнительные курсы, а также проектно-исследовательские виды деятельности. Критериальная и Рейтинговая системы оценивания – предусматривают переход от констатирующего к накопительному статусу баллов. Как правило, она основывается на интегральной оценке результатов всех видов учебной деятельности учащегося, предусмотренных образовательной программой.

26. Семь правил технологии оценивания образовательных достижений: 1-е правило: Что оцениваем? Оцениваем результаты – предметные,метапредметные и личностные. Результаты ученика – это действия (умения по использованию знаний в ходе решения задач. Результаты учителя (образовательного учреждения) – это разница между результатами учеников в начале (входная диагностика) и в конце обучения (выходная диагностика).

27. 2-е правило: Что оцениваем? Ученик и учитель вместе определяют оценку и отметку

28. 3-е правило: Сколько ставить отметок? За каждую учебную задачу или группу заданий (задач), показывающую овладение конкретным действием(умением), определяется и по возможности ставится отдельная отметка. Иностранный язык: за виды речевой деятельности.

29. 4-е правило: Где накапливать оценки и отметки ? в таблицах образовательных результатов (предметных, метапредметных, личностных) и «портфолио» школьника. Таблицы составляются из перечня умений (действий), которыми должен и может овладеть ученик.

30. 5-е правило: Когда ставить отметки ? Текущие – по желанию, за тематические и проверочные работы – обязательно. От выставления отметки при выполнении контрольной работы ученик не может отказаться, но имеет право пересдать, хотя бы один раз.

31. 6-е правило: По каким критериям оценивать? по признакам трёх уровней успешности

32. 7 -е правило:Как определять итоговые отметки? Предметные четвертные отметкиопределяются по таблицам предметных результатов (среднее арифметическое баллов) Итоговая отметка за год на основании четвертных отметок и результатов итоговой работы обучающегося.

34. ТЕСТЫ

36. ПРИНЦИПЫ (тестового) контроля: • научности, • эффективности, • иерархической организации, • объективности, • систематичности, • справедливости, • всесторонности.

37. Показатели качества тестов Надежность измерения - степень точности, с какой может быть измерен тот или иной конкретный признак. • Надёжность теста характеризует воспроизводимость его результатов. • Характеризуется коэффициентом надежности: это корреляционный коэффициент, показывающий степень совпадения результатов тестирования осуществленного в одинаковых условиях одним и тем же тестом. 

38. Показатели качества тестов Валидность теста – комплексная характеристика теста, отражающая его способность измерять именно то, для чего он предназначен. • Характеризует возможности генеральной совокупности заданий в тестируемой области знаний оценить объект измерений теста.

39. Валидность • содержательная – насколько адекватно задания теста отражают смысл измеряемого явления? • критериальная – насколько точно результаты тестирования согласуются с известными объективными критериями? • уровневая - насколько уровень заданий теста соответствуют проверяемому уровню.

40. Требования к тестовым заданиям: • Определенность - обеспечение общепонятности формулировок заданий всеми учащимися. • Однозначность - создание эталона ответа, соответствующего полному и правильному решению заданий. • Стандартизованность - наличие определенных норм его выполнения (среднее, стандартное отклонение и т.д.) для интерпретации результатов применительно к испытуемым из различных выборок. Стандартизованный тест - тест, прошедший апробацию на репрезентативной выборке.

41. ПРИНЦИПЫ РАЗРАБОТКИ СОДЕРЖАНИЯ ТЕСТА • соответствие содержания теста целям тестирования; • определение значимости проверяемых знаний и умений; • взаимосвязь содержания и формы; • содержательная правильность тестовых заданий; • репрезентативность содержания учебной дисциплины в содержании теста; • соответствие содержания теста уровню современного состояния науки; • комплексность и сбалансированность содержания теста. • системность содержания; • вариативность содержания.

42. КЛАССИФИКАЦИЯ ПЕДАГОГИЧЕСКИХ ТЕСТОВ • По интерпретации результатов тестирования: - нормативно-ориентированные - критериально-ориентированные • По целям использования (этапам контроля) - входные, текущие, тематические, - тесты промежуточной (рубежной) аттестации - тесты итоговой аттестации. • По содержанию: гомогенные и гетерогенные • По форме предъявления : бланковые (на бумажной основе); компьютерные. • По учебным целям (таксономия Блума) • По уровням усвоения (по В.П.Беспалько)

44. Сравнение двух основных подходов к тестированию по достигнутым результатам

45. Сравнение двух основных подходов к тестированию по достигнутым результатам

46. Процесс создания теста, его научного обоснования, переработки и улучшения можно разбить на ряд этапов. 1. Определение цели тестирования, выбор вида теста и подхода к его созданию. 2. Анализ содержания учебной дисциплины. 3. Определение структуры теста и стратегии расположения заданий. 4. Разработка спецификации теста, априорный выбор длины теста и времени его выполнения. 5. Создание предтестовых заданий. 6. Отбор заданий в тест и их ранжирование согласно выбранной стратегии предъявления на основании априорных авторских оценок трудности заданий. 7. Экспертиза содержания предтестовых заданий и теста. 8. Экспертиза формы предтестовых заданий. 9. Переработка содержания и формы заданий по результатам экспертизы. 10. Разработка методики апробационного тестирования. 11. Разработка инструкций для учеников и для преподавателей, проводящих апробацию теста. 12. Проведение апробационного тестирования. 13. Сбор эмпирических результатов. 14. Статистическая обработка результатов выполнения теста. 15. Интерпретация результатов обработки в целях улучшения качества теста. Проверка соответствия характеристик теста научно обоснованным критериям качества. 16. Коррекция содержания и формы заданий на основании данных предыдущего этапа. Чистка теста и добавление новых заданий для оптимизации диапазона значений параметра трудности и улучшения системообразующих свойств заданий теста. Оптимизация длины теста и времени его выполнения на основании апостериорных оценок характеристик теста. Оптимизация порядка расположения заданий в тесте. 17. Повторение этапа апробации для выполнения очередных шагов по повышению качества теста. 18. Интерпретация данных обработки, установление норм теста и создание шкалы для оценки результатов испытуемых.

47. Основные этапы конструирования тестов • целеполагание; • создание спецификации; • составление плана теста; • разработка тестовых заданий; • проведение пробного пилотного тестирования; • анализ полученных результатов • определение процедуры тестирования (расчет времени, количества баллов, нормы оценок); • методическое и технологическое обеспечение процедуры тестирования.

48. ТЕСТОВОЕ ЗАДАНИЕ ТИПЫ И ФОРМЫ ТЕСТОВЫХ ЗАДАНИЙ ЗАКРЫТОГО ТИПА АЛЬТЕРНАТИВНЫХ ОТВЕТОВ ОТКРЫТОГО ТИПА МНОЖЕСТВЕННОГО ВЫБОРА ДОПОЛНЕНИЯ ВОССТАНОВЛЕНИЕ СООТВЕТСТВИЯ СВОБОДНОГО ИЗЛОЖЕНИЯ ВОССТАНОВЛЕНИЕ ПОСЛЕДОВАТЕЛЬНОСТИ

49. Задания в открытой форме • Основные правила составления: • в каждом задании должно быть только одно дополнение (ответ); • дополнение (ответ) должно быть наиболее важным («ключевым») термином, знание которого является обязательным; • дополнение (ответ) лучше всего располагать в конце предложения; • задание должно формулироваться четко, требовать однозначного ответа и не допускать двоякого толкования.

50. Задания в закрытой форме Из ряда предлагаемых ответов, тестируемый выбирает один или несколько, по его мнению, правильных. Неправильные ответы в заданиях закрытой формы называются дистракторами. Основные виды: • задания с альтернативными ответами; • задания с множественным выбором (одного или нескольких правильных ответов); • задания на установление соответствия; • задания на установление правильной последовательности.