| |||||||||||||||||||||||||||||||||
The Emissia.Offline Letters Электронное научное издание (педагогические и психологические науки) | |||||||||||||||||||||||||||||||||
Издается с 7 ноября 1995 г. Учредитель: Российский государственный педагогический университет им. А.И.Герцена, Санкт-Петербург | |||||||||||||||||||||||||||||||||
| |||||||||||||||||||||||||||||||||
Горбовский Ростислав Викторович Подходы к проектированию, оценке и отбору успешных практик в сфере образования
Аннотация:
Ключевые слова: лучшие (успешные) практики, система образование, кейсы, отбор и оценки, критерии оценки, распространение успешных практик, управление распространением успешных практик __________
Sergey
I.
Zair-Bek
Rostislav V. Gorbovskiy
Approaches to designing, evaluating and selecting successful educational practices Annotation: The article explores the selection of best educational practices formed on evidence-based cases description. It defines a best practice as such, lists approaches to its design, selection and assessment. It also comprises a range of technological approaches that enable to grasp key characteristics of best practices, describe them both concisely and in detail, assess their success for a better future selection and dissemination.
Key words:
best practices, education system, cases, selection and assessment,
assessment criteria, best practices dissemination management Отбор и представление лучших практик – один из важнейших инструментов в управлении сферой образования. Отбор имеет ряд важных функций. С одной стороны, он является частью сбора доказательной базы реальных подтверждений качественных управленческих решений, ставших условием для появления лучших практик. С другой стороны, отбор сам по себе является управленческим инструментом повышения качества функционирования системы образования на основе лучших решений, описанных технологически и имеющих реальный позитивный опыт реализации. Вместе с тем, сама задача выявления и отбора лучших практик является одной из наиболее сложных, так как требует четкого понимания:
Чаще всего, сбор и обобщение лучших (успешных) практик происходит без четкого понимания ответов на поставленные вопросы. В результате либо отбираются не практики, а плохо структурированный и не достаточно технологически понятно описанный практический опыт, либо сама процедура отбора происходит по непонятно описанным критериям в соответствии с экспертным мнением либо просто формально. В результате, сама процедура сбора, описания и представления лучших (успешных) практик не приводит к ожидаемым позитивным изменениям в системе образования, а сами практики не вызывают достаточного доверия. В связи с этим важно четко определить, что является лучшей (успешной практикой). В своей книге «Профессиональный капитал: трансформация преподавания в каждой школе» Майкл Фуллан и Энди Харгрейвс определяют лучшие практики как уже существующие практики, имеющие высокий уровень всеми принятой эффективности [1]. Таким образом, важной характеристикой лучшей практики является ее эффективность. Фуллан и Харгрейвс отмечают, что лучшие практики выявляются в процессе оценивания непосредственно их результатов, рефлексии участников такой практики, а также длительной апробации таких практик в новых условиях. То есть, сама оценка эффективности практик включает процедуру их переноса, отчуждения от авторов и носителей практик и оценивания устойчивости позитивных результатов. В результате можно сформулировать первый важный признак лучшей (успешной) практики – ее переносимость. Сама формулировка – «лучшая практика» формирует понимание ее относительности. Лучшая практика предполагает соотнесение с другими практиками и выявление ее преимуществ по сравнению с ними. Эти преимущества могут выражаться:
Кроме того, можно говорить о том, что лучшая практика чаще всего обладает всеми вышеобозначенными признаками. Изучение лучших (успешных) практик в образовании – предмет исследований целого ряда ученых, среди которых Роберт Марциано [2], Сьюзан Пуссек и ее коллеги, Дэвид Арендэйл и другие. Дэвид Арендэйл отмечает, что лучшие практики – это виды деятельности: индивидуальные действия, форматы политики или программные подходы. Все эти действия направлены на достижение позитивных изменений в достижениях субъектов таких практик. Сами практики могут быть количественно оценены, но могут и не иметь такой возможности. Это зависит от стадии, на которой находится практика. Она может быть одиночной, формирующейся или уже подтвержденной. [3] Фактически, подход Арендэйла – это более детализированное видение, сформулированное Харгрейвсом и Фулланом в отношении лучших (успешных) практик. В данном случае, это важно для понимания принципа описания практик или их оценки и распространения, какие существенные черты должны быть присущи лучшим (успешным) практикам. Как уже отмечалось выше, важным для понимания успешности практик являются те обстоятельства, в которых практики стали успешными. К таким обстоятельствам можно отнести целый перечень факторов, формирующих контексты проявления успешности практик, в том числе:
Описания каждой из этих составляющих формируют общее описание практики. Важной является четкость представления каждого из факторов в едином формате для разных практик, что позволяет сопоставить их для последующей оценки. Одним из направлений исследований лучших практик являются технологии их выявления, оценки и распространения. Так, Сюзан Пуссек и ее коллеги в работе «A Model for Developing, Evaluating, and Disseminating Best Practices in Education and Training» выделяют следующие стадии выявления, развития, оценки и распространения лучших образовательных практик:
Для описания практик чаще всего предлагается использовать стандартные форматы, позволяющие в дальнейшем сопоставлять практики на основе единых критериев. Так, например, Маргарет Фостер, Сюзанна Шульц и Кэтрин Пеппер в своем исследовании предлагают единые оценочные формы для оценки лучших практик, фактически определяя форматы их представления для последующей оценки. [5] Для описания они выделяют следующие компоненты:
Сама оценка практики происходит в формате экспертной оценки по выбору из трех альтернатив: да, нет, иногда. Подход к оценке практик – экспертный. Выбор лучших практик происходит за счет рейтингования по сумме баллов каждой из практик. Описание практик имеет серьезные ограничения. В большинстве случаев используется два формата одновременно: сокращенное и полнотекстовое описание практик. В рамках реализации проекта по организационно-техническому и методическому сопровождению мониторинга системы образования нами была разработана методика сбора и представления лучших (успешных) практик, включающая следующие разделы:
Каждый пункт должен быть подтвержден копиями документов или иных свидетельств (фотографии) 10. Результаты практики:
11. Автор, представивший практику. 12. Контактные данные, контактное лицо, печать организации, подпись. Предлагаемый формат был разработан для представления практик управления региональной/муниципальной образовательной системой на основе целевых программных показателей. При этом, данный формат позволил технологизировать представление практик для их последующего сопоставления и распространения. В дальнейшем, данная форма была преобразована в анкетную форму сбора лучших управленческих практик регионального и муниципального уровней, включающую следующие рубрики: I. «Наименование практики», ограниченное одним предложением, четко отражающим суть практики II. Характеристика практики. Комментарий: необходимо выбрать только одну из предлагаемых трех опций 1. Направленность практики: Отметьте только один вариант.
2. Если ваша практика относится к образовательным программам или образовательной деятельности, выберите уровень образования, к которому эта практика относится:
3. Проблемы и задачи, которые решаются посредством практики (не более 7 предложений, которые точно описывают, для чего реализуется практика, какие проблемы или задачи она позволяет решить) 4. Год начала реализации практики (вписать в цифровом формате) 5. Место инициации практики (вписать географическую привязку начала практики: наименование организации или организаций, муниципалитета или муниципалитетов, региона или регионов) 6. Место реализации практики на момент представления данных (вписать географическую привязку реализации практики: наименование организации или организаций, муниципалитета или муниципалитетов, региона или регионов) 7. Целевая группа, на которую ориентирована практика (определить институциональные рамки в формате ключевых слов (образовательные организации уровня или уровней образования - каких); учащиеся (возрастные рамки, уровень образования; учителя (какие предметы или какие организации), и т.д.; муниципальная или региональная система образования, в целом, и т.д.) 8. Была ли практика инициативной или же была реализована в рамках стратегических федеральных/региональных/муниципальных задач: инициативная / реализована в рамках стратегических задач: (вписать каких: федеральных, региональных, муниципальных или иных) 9. Масштаб реализации практики (вписать как можно более точно число учащихся или учителей или образовательных организаций, или муниципалитетов, или регионов) - в начале реализации практики и на момент представления данных 10. Запланированные результаты внедрения практики (опишите не более, чем в 5 предложениях предполагаемые изначально качественные результаты, приведите ссылки на источники для подтверждения) 11. Фактические качественные результаты практики (какие изменения произошли: нормативные, организационные, экономические, содержательные – опишите не более, чем в 5 предложениях, приведите ссылки на источники для подтверждения) 12. Поддержана ли практика из бюджетных средств (если поддержана, то из каких источников, период финансирования и, если возможно, объемы) 13. Как осуществлялось распространение практики (опишите не более, чем в трех предложениях (например, курсы повышения квалификации, сетевые объединения и т.д.), приведите ссылки на источники) 14. В чем принципиальные отличия реализуемой практики от других известных аналогов (опишите не более, чем в 5 предложениях) 15. Приведите ссылки на примеры реализации практики внутри своего региона 16. Приведите ссылки или описания примеров (если таковые есть) распространения практики за пределами своего региона (страны) 17. Приведите дополнительные сведения, которые могли бы охарактеризовать успешность практики не более, чем в 5 предложениях, в том числе, в сравнении с известными аналогами (если таковые есть). III. Приложения, подтверждающие документы и материалы (объем не ограничен)
Таким образом, всю собираемую информацию по лучшим практикам можно систематизировать в группы:
При этом, важно учесть, чтобы не было излишне подробного представления практики, которое могло бы ввести несущественную или ненужную информацию, позволяющую оценить практики. Подробная информация может быть представлена на сайте организации или практики. При формировании шаблона описания практик важно ориентироваться на критерии последующей ее оценки. Процесс оценки связан с несколькими важными действиями.
Оценка происходит на уровне самообследования и внешней экспертизы. В рамках обследования кроме непосредственно описания практики в соответствии с требованиями, предъявляемыми на этапе формализации, важно сформировать поля данных в соответствии с вышеуказанными направлениями оценки. Способы и форматы представления могут быть разными. Совсем не обязательно пытаться превратить оценку в сложный бюрократический механизм, сопровождающийся большим количеством бумаг. Необходимо, чтобы оценка носила и процессный, и результирующий характер. Именно по результатам оценки практика может быть отнесена к разряду лучших практик. Однако важно учесть, что невозможно определить, лучшая или нет практика, если нет возможности сопоставления разных ее сценариев, а также данной практики с другими практиками, выделения всех плюсов и минусов конкретной практики. Критерии оценки лучших практик, в частности приводятся в докладе Австралийского совета по исследованиям в образовании. Авторы доклада «Лучшие практики программ обучения для учителей и собственно Австралийских программ» выделяют следующие критерии для отнесения (и, соответственно, оценки) лучших практик в отношении данных программ:
В соответствии с этими критериями представлены коллекции лучших практик, которые соответственным образом проанализированы. Основной способ оценки успешных и неуспешных практик – экспертный. Принцип – формирование блоков оценки практик с привязкой к целеполаганию оценки, взвешивание критериев с позиции их вклада в итоговую оценку, распаковка каждого из критерия по составляющим оценки в формате описания назначения данного балла в случае соответствия ему практики (или ее аспекта). Существуют различные шкалы для оценки успешных практик.
Регламент такого отбора может предусматривать различные варианты экспертной оценки:
Не существует универсальных критериев и процедур оценки/отбора наиболее и наименее эффективных практик. Многочисленные примеры реализации этих процедур имеют следующие общие черты:
Таблица 1. Критерии оценки успешных практик
Максимальное число баллов,
получаемых от эксперта - 100.
Оценивание проводится не менее,
нежели двумя экспертами. Определяется
средневзвешенный экспертный балл.
При разнице в экспертных оценках более, чем на 25%,
привлекается третий эксперт. В рамках разработки, сбора и оценки практик важно помнить:
Систематизация и представления практик в предлагаемом формате позволяет проводить необходимые процедуры сопоставлений. Литература 1. Andy Hargreaves, Michael Fullan. Professional Capital: Transforming Teaching in Every School, London, Routledge, 2012, 220 pp. 2. A Study of Best Practices in Edmentum Online Solutions. Analysis and interpretation of a Marzano Research Labratory study. March 2012. 3. Weinberger, Morris ; Pusek, Susan N. ; Esserman, Denise A. ; Loehr, Laura A. ; Miller, William C. ; Orringer, Eugene P. ; Weaver, Mark A./ A model for developing, evaluating, and disseminating best practices in education and training.. // Clinical and translational science. 2014 ; Vol. 7, No. 5. pp. 402-405/ -URL: https://uncch.pure.elsevier.com/en/publications/a-model-for-developing-evaluating-and-disseminating-best-practice [дата обращения 15.02 .2018] 4. David Arendale. What is a Best Education Practice? [электронный ресурс] / Сайт «EOA National Best Practices Center». - URL: http://www.besteducationpractices.org/what-is-a-best-practice/ . - [дата публикации 23.10.2016, дата обращения 10.02.2018] 5. Margaret J. Foster, Suzanne Shurtz, Catherine Pepper. Evaluation of best practices in the design of online evidence-based practice instructional modules. Journal Med. Libr. Assoc. 2014 Jan; 102(1): pp. 31–40.
Рекомендовано к публикации | |||||||||||||||||||||||||||||||||
| |||||||||||||||||||||||||||||||||
Copyright (C) 2018, Письма в
Эмиссия.Оффлайн (The Emissia.Offline Letters):
электронный научный журнал ISSN 1997-8588 (online), ISSN 2412-5520 (print-smart), ISSN 2500-2244 (CD-R) Свидетельство о регистрации СМИ Эл № ФС77-33379 (000863) от 02.10.2008 от Федеральной службы по надзору в сфере связи и массовых коммуникаций При перепечатке и цитировании просим ссылаться на " Письма в Эмиссия.Оффлайн ". Эл.почта: emissia@mail.ru Internet: http://www.emissia.org/ Тел.: +7-812-9817711, +7-904-3301873 Адрес редакции: 191186, Санкт-Петербург, наб. р. Мойки, 48, РГПУ им. А.И.Герцена, корп.11, к.24а Издатель: Консультационное бюро доктора Ахаяна [ИП Ахаян А.А.], гос. рег. 306784721900012 от 07.08.2006. |