Международная школа Оценка программ и проектов Антипин Иван

Международная школа «Оценка программ и проектов» Антипин Иван Александрович Кандидат экономических наук, доцент 1

Основы оценки программ n n n n Что такое программа? Оценка «теории» программы Оценка программы на стадии реализации Оценка как управленческая функция Виды оценки программ Нормативное регулирование оценки Развитие потенциала оценки 2

Характеристики проекта (программы) n n n Запланированное изменение Имеет конкретную цель Включает взаимосвязанные виды деятельности Выполняется в определенной последовательности Ограниченные и заранее определенные ресурсы Ограниченное и заранее определенное время выполнения 3

МОДЕЛЬ ПРОГРАММЫ Оборудование ПРОБЛЕМА Люди Материалы Среда ПРОЦЕСС РЕШЕНИЕ ПРОБЛЕМЫ Технологии Мониторинг Оценка 4

Логика программы n n Стратегическая цель (“Миссия”) То, ради чего предпринимается программа. Все, что делается, направлено на то, чтобы сделать вклад в реализацию миссии. Цель программы (“Цель”) Непосредственный результат, которого должна достичь программа. Цели действий (“Задачи”) Что конкретно должно стать непосредственным результатом действий в рамках программы. Действия Что мы делаем для решения задач. 5

Логика программы Стратегическая цель Цель программы Цели действий Действия 6

Целью программы является улучшение экологической ситуации на водных объектах реки Волга на основе осуществления первоочередных мероприятий по очистке акваторий от брошенных и затонувших судов, не используемых гидротехнических сооружений, другого бесхозяйного имущества, промышленных и бытовых отходов. (Ассоциация водолазных служб России) 7

Основной целью ФЦП “Мировой океан” является комплексное решение проблемы изучения, освоения и эффективного использования ресурсов и пространств Мирового океана в интересах экономического развития, обеспечения безопасности страны и охраны ее морских границ. Для реализации этой цели необходимо решить следующие задачи: -активизировать деятельность России в Мировом океане в соответствии с целями и задачами развития страны; - ориентировать деятельность России в Мировом океане на получение конечных практических результатов в ближайшей перспективе; - обеспечить формирование и осуществление единой, скоординированной государственной политики, нацеленной на консолидацию внутригосударственных и международных интересов России, в деле использования Мирового океана и интеграцию подходов заинтересованных сторон в области развития морской деятельности страны. 8

Основными целями Программы «Электронная Москва» являются: n повышение уровня и качества жизни горожан, n развитие демократических институтов, n создание благоприятных условий для предпринимательской деятельности и повышения конкурентоспособности предприятий города, n повышение эффективности и открытости городского управления, n улучшение работы городского хозяйства и экологии города, n обеспечение оперативного реагирования на чрезвычайные и аварийные ситуации, n повышение безопасности граждан за счет развития и широкомасштабного использования информационнокоммуникационных технологий. 9

Цель Программы «Патриот и Гражданин» – развитие у молодежи чувства гражданственности, патриотизма как важнейших нравственных и социальных ценностей, верности конституционному долгу, ответственности и дисциплинированности. Задачи Программы: n содействие созданию целостного механизма, обеспечивающего становление и эффективное функционирование системы патриотического воспитания в регионах Российской Федерации; n воспитание личности молодого человека – патриота Родины, способного встать на защиту государственных интересов страны; n развитие мероприятий Программы, направленных на воспитание чувства гражданственности у молодёжи России. 10

Причинно-следственный анализ проблем Проблема Причина 1 Подпричина 2 Причина 3 Подпричина 3 11

Диаграмма целей и задач Цель Задача 1 Подзадача 2 Задача 3 Подзадача 3 12

Пример «дерева проблем» 13

Пример «дерева целей и задач» 14

Модель программы: теория и реальность Теория n Миссия n Цель n Задачи n Запланированные действия Реальность n Влияние программы n Результат программы n n Результаты действий Выполненные действия 15

Оценка «теории» программы n n n Экспертиза Пробная ( «пилотная» ) программа Моделирование 16

Оценка программ (экспертиза) как прогнозирование 1 3 2 17

Оценка в управлении программой Мониторинг Аудит Проверка на соответствие Инспекция Выявление и предотвращение нарушений Контроль Отслеживание хода программы по сравнению с планом на основании замера значений показателей (индикаторов) Оценка Анализ процесса выполнения программы, достигнутых результатов и причин отклонений от плана Исследование Получение нового знания, моделирование Получение нового знания 18

Аудит (audit) n В какой мере соблюдаются правила, процедуры, стандарты? 19

Аудит (программный аудит) Систематический сбор информации о программе на предмет определения степени её соответствия заданным правилам, нормативам и стандартам. 20

Мониторинг (monitoring) n n Как идут дела? В какой мере выполняются планы? 21

Мониторинг Систематический сбор информации о значениях заранее выбранных индикаторов для обеспечения руководителей и других заинтересованных сторон сведениями о том, насколько успешно выполняется программа развития, в какой степени достигаются поставленные цели и как используются фонды, выделенные на данную программу. 22

Оценка (evaluation) n n Правильные ли вещи мы делаем? Правильно ли мы их делаем? Что у нас получается и почему? Как можно это сделать лучше? 23

«Оценка программы – это систематический сбор информации о деятельности в рамках программы, ее характеристиках и результатах, который проводится для того, чтобы вынести суждение о программе, повысить эффективность программы и/или разработать планы на будущее» (Patton, 1997) 24

«Оценка программы, ориентированная на практическое использование, отличается тем, что она проводится для заранее определенных пользователей с заранее определенными целями» (Patton, 1997) 25

Исследование – это систематическая деятельность, направленная на получение нового знания. Существенной характеристикой исследования является возможность получения обобщенного знания, которое может использоваться в различных условиях. 26

Категории оценки программ (из материалов комитета по стандартам Американской ассоциации по оценке программ) • Предварительный анализ (Front-end analyses). • Изучение возможностей для проведения оценки • • (Evaluability assessment). Формирующая оценка (Formative evaluation). Оценка влияния (Impact evaluation) или итоговая оценка (Summative evaluation). Мониторинг программ (Program monitoring). Оценка оценки (мета-оценка) (Evaluation of Evaluation, Meta-Evaluation). 27

Кто может проводить оценку (мониторинг) программы? Внутренняя ОРГАНИЗАЦИЯ Сотрудники организации, не принимающие участия в программе Внешняя Независимые специалисты ПРОГРАММА Участники программы Само-оценивание 28