Электронный научно-педагогический журнал. Издается с 7 ноября 1995 года.

Зарегистрирован в депозитарии электронных изданий ФГУП НТЦ "Информрегистр" Министерства связи и информатизации Российской Федерации.
Регистрационное свидетельство # 901 от 23.03.2001. Регистрационный номер государственного  учета # 0320100088

Пискунова Елена Витальевна
кандидат педагогических наук, доцент кафедры педагогики  Российского государственного педагогического университета им. А.И.Герцена, Санкт-Петербург
l_piskunova@mail.ru

Международные подходы к оценке программ развития образования

Аннотация
Обсуждается содержание понятия оценивания программ развития образования, мировые тенденции в развитии мониторинга и оценки государственных программ,  мировая практика оценивания программ развития образования, методы оценивания.

Ключевые слова
оценивание программ развития образования, мировая практика, мониторинг, методы оценивания, оценка

Одним из инструментов социального управления в международной практике стало оценивание регулирующих актов. Под оцениванием регулирующих актов (regulatory impact assessment, RIA [1]) понимается проведение эмпирических исследований, направленных на прогнозирование или оценку фактического воздействия предложенных актов на целевую аудиторию, государственный сектор. Сюда входит, в том числе, определение объемов, продолжительности и вероятности позитивных и негативных воздействий, пересчет позитивных и негативных эффектов в денежной форме.

Общепринятой формой институционализации оценивания регулирующих актов на сегодняшний день является законодательное закрепление норм по проведению оценивания и неукоснительное следование им органов исполнительной власти. Разделяют «внутреннее оценивание» (Internal evaluation [2]) – оценивание, проводимое непосредственно государственными органами, являющимися инициаторами реформ и «внешнее оценивание (External evaluation [3])» – которое проводится специально созданными комиссиями или научными сообществами -экспертами. «Внешнее» оценивание помимо мониторинга включает публичную отчетность и гражданский контроль над действиями государственных органов.

Программа развития образования относится к регулирующим актам воздействия на развитие образовательных систем с целью получения новых социальных эффектов. Ввиду этого оценке программ придается особое значение.

«Оценка программы (program evaluation) – это систематический сбор информации о деятельности в рамках программы, ее характеристиках и результатах, который проводится для того, чтобы вынести суждение о программе, повысить эффективность программы и/или разработать планы на будущее» [4].

Оценка влияния программы представляет собой инструмент для принятия политических решений, и повышает ответственность политических лидеров перед обществом.

Другие виды оценки, например, мониторинг процессов, не предполагают оценки эффектов и анализа причинно-следственных связей. Анализ важен для понимания того, какую роль играют те или иные компоненты программ в решении проблем» [5].

Европейским фондом в рамках программ Европейского вознаграждения было введено понятие «стандарты оценки» [6]. Стандарты оценки ориентируют на принятие определенных правил при оценивании программ. С учетом принципов и стандартов оценки для ее разработки используют матричный метод [7].

Оценка программ дает объективную информацию для принятия управленческих решений в целях улучшения результатов программ. В ходе мониторинга программ отслеживается как процесс выполнения задач и использование ресурсов, так и влияние результатов на социальное развитие в целом.

Мировые тенденции в развитии мониторинга и оценки государственных программ характеризуются следующим образом [8]:

• oценке уделяется возрастающее внимание во всем мире; системы мониторинга и оценки встраиваются в программы на стадии разработки; разрабатываются государственные стандарты проведения оценки (так например, в США - "программный аудит")
• pазвиваются национальные статистические службы, используются современные технологии для распространения информации по оценке
• pазвивается сотрудничество между государственными структурами и международными организациями, используется местный потенциал путем увеличения количества местных специалистов по оценке
• укрепляется сотрудничество государственных структур с некоммерческими организациями и населением с помощью активного использования методов «оценки с участием»
• учитываются местные условия и социокультурные особенности населения при планировании и проведении оценки
• усиливается ориентация на практическое использование результатов оценки.

Таким образом, в зарубежной практике управления сложилась система, определяющая концептуально и законодательно выбор социальных индикаторов развития, методов их оценки, процедур оценивания, что должно отражать ответственность власти за эффективность государственных мер. Данные положения транслируются и на построение национальных политик в области образования.

Одним из центральных понятий анализа образовательной политики и ключевым понятием оценивания является «результат». Результат программ определяется в ее эффектах.  Под результатом как формой конкретного эффекта от выполненной программы или проводимой политики понимаются планируемые и/или не планируемые последствия действий государственных органов – фактические результаты. Результат в виде социального эффекта – это то качества конкретных образовательных услуг, которое гарантирует гражданам государство. Кроме того, в описаниях зарубежной практики управления сложилось понимание еще ряда терминологических выражений:

• результативность программных действий – совокупность мер, которая может позволить повысить качество государственной услуги, сделать ее более выгодной для населения.

• экономическая эффективность - соотношение полезного результата (эффекта) и объема использованных или затраченных для этого ресурсов, выражающее степень целесообразности и рациональности произведенных расходов.
• социальная эффективность (effectiveness) – выражение того, каким образом степень, в которой цели можно считать достигнутыми соответствует степени, в которой произведенные расходы можно считать экономичными.
• техническая эффективность (efficacy) – «внутренняя» эффективность программы, выражающая способность ответственных за ее проведение и реализацию государственных органов мобилизовать свои ресурсы (например, выполнить программу в назначенный срок).

Одна из наиболее важных задач, возникающих в ходе  любой социальной программы состоит в расчете возможного социального эффекта от ее реализации. Социальный эффект — это результат воздействия программы, направленный на благо общества в целом или отдельных групп населения. Социальный эффект служит своеобразным аналогом экономического эффекта в традиционных подходах к оценке эффективности инвестиций, однако, он не всегда может рассчитываться по принципу «вложения – затраты – выгоды – прибыль». Социальные эффекты от программ определяются через натуральные показатели воздействия программы на социальное благо граждан и общества в целом.

Мировая практика оценивания программ развития характеризуется также:

• обеспечением постоянности оценивания,
• институционализацией оценивания в политической системе,
• прямым встраиванием оценивания в цикл решения,
• стратегическим место оценивания ,
• массовостью внедрения оценивания,
• массовая ориентацией на конечные результаты.

К используемым методам оценивания относятся:

• оценка социального (конечного) результата: показывает, в какой мере достигнуты ожидаемые цели. При построении такой оценки основное внимание уделяется оценке достигнутых социальных результатов, независимо от того, были ли эти результаты получены только в результате реализации данной программы или достижению их способствовали также какие-то внешние факторы.
• анализ издержек/выгод. Оценивает стоимость достижения одной цели или решения одной задачи. Используется для выбора самых экономичных способов достижения целей.
• оценка управленческих процессов. Показывает, реализуется ли программа так, как задумывалась, соответствуют ли предпринятые действия законодательству, дизайну программы, профессиональным стандартам и ожиданиям потребителей.
• оценка вклада программы в достижение социального (конечного) результата. Оценка чистого эффекта программы на конечный результат, т.е. оценка воздействия программы отдельно от других факторов. Применяется в случае, когда известно, что существуют внешние факторы, повлиявшие на конечный результат.
• мониторинг по неагрегированной системе показателей. Используется для текущей оценки эффективности программ либо деятельности органа.

Литература

1. Regulatory impact analysis. [Электронный ресурс] //  Доступ: http://en.wikipedia.org/wiki/Regulatory_Impact_Analysis

2. Internal evaluation // Analytic Quality Glossary. [Электронный ресурс] //  Доступ: http://www.qualityresearchinternational.com/glossary/
   internalevaluation.htm

3. External evaluation // Analytic Quality Glossary. [Электронный ресурс] //  Доступ: http://www.qualityresearchinternational.com/glossary/
   externalevaluation.htm

4. Patton Q. M. Utilization-Focused Evaluation, 1997. [Электронный ресурс] //  Доступ: www.ifets.info/journals/7_3/5.pdf

5. World Development Report 2004: Making Services Work For Poor People. The World Bank Group, 2004. [Электронный ресурс] //  Доступ: http://econ.worldbank.org/WBSITE/EXTERNAL/EXTDEC/EXTRESEARCH/EXTWDRS/EXTWDR2004/0,,menuPK:477704
   ~pagePK:64167702~piPK:64167676~theSitePK:477688,00.html

6. European Parliament. Committee on Budgetary Control. 2003. [Электронный ресурс] //  Доступ: http://www.europarl.europa.eu/comparl/cont/adopt/discharge/2002/questionnaire/agences/questionnaire_en.pdf

7. Education Resources Information  Centre. Thesaurus Descriptors:"Evaluation Methods". [Электронный ресурс] //  Доступ: http://www.eric.ed.gov/ERICWebPortal/Home.portal_nfpb=true&_pageLabel=ERICSearchResult&newSearch=true&ERICExtSearch_
   Descriptor=%22Evaluation+Methods%22

8. Social Impact. Services: Program Evaluation. [Электронный ресурс] //  Доступ: http://www.socialimpact.com/services/program-evaluation.html