С 18 ноября 2025 года по 31 марта 2026 года АНО «Эволюция и Филантропия» реализовала проект по методическому сопровождению построения системы мониторинга и оценки программы «Новый вектор развития Надежды» организации РГООИ «Надежда», Ростовская область. Участниками проекта стали сотрудники и руководители программы, заинтересованные в развитии практических компетенций в области МиО и в более системной работе с данными о результатах своей деятельности.
В ходе проекта была проведена диагностика текущего состояния процессов мониторинга и оценки: проанализированы уже собираемые данные, существующие практики и зоны развития. По итогам диагностики были подготовлены рекомендации по повышению зрелости системы МиО и оптимизации рабочих процессов.
Важной частью проекта стала серия из девяти методических вебинаров. Участники последовательно работали с ключевыми понятиями оценки социальных программ, формулировали мониторинговые и оценочные вопросы, разрабатывали теорию изменений, анализировали заинтересованные стороны, проектировали цепочку социальных результатов, согласовывали логическую модель и рамку показателей, обсуждали подходы к сбору данных и доработке инструментов.
Практическим результатом этой работы стала разработка дерева результатов и логической модели с показателями для выбранной программы «Добрая среда». Также был составлен план оценки и подготовлены инструменты сбора данных: анкеты, чек-листы и формы обратной связи.
На следующем этапе команда организации самостоятельно проводила сбор данных от родителей при консультационном сопровождении экспертов АНО «Эволюция и Филантропия».
Для анализа данных была подготовлена структура базы данных о социальных результатах и разработан алгоритм анализа данных.
После завершения сбора были проанализированы полученные данные, проведено обсуждение результатов с командой, подготовлены итоговые материалы.
Отдельным результатом проекта стала подготовка документов, регламентирующих процессы мониторинга и оценки: положения, базы данных и технических инструкций. Эти материалы создают основу для дальнейшего регулярного использования МиО в управлении программой и развитии практик оценки результатов.
В начале и в конце проекта было проведено тестирование специалистов, а также собрана обратная связь, что позволило зафиксировать изменения в знаниях, установках и практических навыках в области мониторинга и оценки. По итогам сравнения входных и итоговых данных у участников усилилось понимание практической пользы оценки, выросла уверенность в формулировании оценочных вопросов, выборе методов сбора информации, разработке плана оценки и подготовке рекомендаций. При этом специалисты отмечали, что наиболее сложными по-прежнему остаются операционные задачи, связанные со сбором данных и практическим применением инструментов, а также требуется больше времени для закрепления новых подходов в повседневной работе. В обратной связи участники также подчеркнули, что проект помог структурировать работу, лучше понять логику программы, освоить новые инструменты и усилить командное взаимодействие.
«Как команда мы сплотились за время проекта, появилась возможность вместе встречаться, совместно планировать …. При этом у команды остается сопротивление, так как предлагается новая деятельность , новая нагрузка и пока что сложно – отметила Анастасия Крутова, специалист Программы «Добрая среда».
«Как консультанты мы довольны сделанными продуктами, к тому же нам удалось поэкспериментировать и предложить IT-новацию в области визуализации подтвержденных социальных результатов. Это по сути web-страница с Теорией изменений, которая может быть как для рабочего использования, так и как публичная. Я не знаю, будет ли команда ее в итоге дорабатывать, но мы включаем этот продукт в свою консалтинговую линейку».
В феврале АНО «Эволюция и Филантропия» провела опрос среди экспертов в области оценки культурных проектов по теме востребованности проекта «Яркие краски креативных индустрий-2». В опросе приняли участие 32 респондента. Первый проект «Яркие краски креативных индустрий» реализовывался АНО «Эволюция и Филантропия» в 2023-2024 гг.
Цель отчета
Обобщить и проанализировать данные опроса об актуальности проекта «Яркие краски креативных индустрий — 2» для выявления потребностей и приоритетных направлений развития методов оценки социокультурного влияния творческих проектов.
Методология
Опрос проводился с 31 января по 5 февраля 2025 года. В нем приняли участие 32 респондента из различных профессиональных групп. Важно отметить, что из-за небольшого размера выборки результаты не могут считаться статистически значимыми и должны интерпретироваться с осторожностью.
Профиль респондентов
Большинство респондентов имеют опыт в оценке творческих или социокультурных проектов:
— 50% регулярно участвуют в оценке
— 34,4% иногда участвуют
— 15,6% не имеют опыта, но хотели бы его получить.
Профессиональная деятельность респондентов разнообразна, с преобладанием специалистов в области оценки программ и проектов, преподавателей/научных сотрудников и руководителей творческих проектов.
Профессиональный профиль респондентов (была возможность отменить несколько вариантов):
Специалисты по оценке программ и проектов: 20
Руководители/организаторы творческих проектов: 12
Преподаватели/научные сотрудники: 10
Представители сферы культуры и искусства: 6
Представители грантодающих организаций: 2
Представитель IT-компании: 1
Актуальность оценки социокультурного влияния творческих проектов
Подавляющее большинство респондентов (93,8%) считают тему оценки социокультурного влияния творческих проектов очень актуальной (оценки 4-5 по 5-балльной шкале).
Различия между группами: эксперты по оценке чаще оценивали актуальность на 5 баллов, чем организаторы творческих проектов.
Причины высокой актуальности:
1. Необходимость обоснования проектов:
«Сложно обосновать необходимость в реализации творческого проекта и его влияние. Сложно выделить и оценить средне и долгосрочные результаты.»
2. Повышение эффективности вложений:
«Измерение социальных эффектов от реализованных проектов позволяет понять, по каким направлениям, в каких формах эффективнее вкладывать деньги.»
3. Улучшение качества проектов:
«Иначе мы имеем проекты, где танцы ради танцев. Понимая особенности оценки социокультурного влияния, проще работать с творческими командами, чтобы в регионе были действительно проекты, меняющие культурный фон вокруг в лучшую сторону.»
Приоритетные направления развития
Наиболее важные направления развития проекта, по мнению респондентов:
1. Формирование экспертных площадок (68,8%)
2. Проведение обучающих вебинаров и мастер-классов (62,5%)
3. Разработка комплексной адаптивной оценочной методологии (56,3% респондентов)
4. Развитие междисциплинарного подхода к оценке (56,3%)
5. Адаптация оценочных подходов к специфике творческих команд (46,9%)
Различия между группами: эксперты по оценке больше заинтересованы в разработке методологии — организаторы проектов чаще выбирают обучающие мероприятия и адаптацию подходов к специфике творческих команд.
Интерес к участию в проекте
Большинство респондентов выразили желание участвовать в различных активностях проекта:
1. Участие в обучающих мероприятиях (81,3%)
2. Участие в разработке новых методик оценки (62,5%)
3. Участие в апробации новых методик (50%)
4. Участие в региональных и федеральных экспертных обсуждениях (40,6%)
5. Проведение оценки собственного творческого проекта с методической поддержкой команды ЯККИ – 28,1%
6. Организация собственных мероприятий по популяризации темы оценки – 15,6%
Различия между группами: эксперты по оценке больше стремятся участвовать в разработке методик и экспертных обсуждениях — организаторы проектов чаще выбирают обучающие мероприятия и проведение оценки собственных проектов.
«Интересные возможности продвижения оценки социокультурных проектов. Очень нужны экспертные площадки, обсуждения. Важно также и продвижение результатов оценки».
Потребности и трудности в оценке
Основные потребности:
— Разработка единых критериев и методик оценки
«Потребность в изучении бенчмарков (кейсы и базы индикаторов) и обсуждении опыта с доказанной эффективностью».
«Единые критерии оценки проектов, разработанные новые методики оценки социокультурного влияния».
— Обучение и обмен опытом
«Обучение для более глубокого погружения в тему, овладения новыми методиками оценки».
«Обсуждение результатов оценки»
Основные трудности:
1. Методологические сложности:
«Методологические (как оценить то, что оценить сложно)».
«Очень разный уровень проектов. Например, влияние проекта в поселке с 500 жителями при единственном очаге культуры в виде библиотечного пункта и Чеховского Фестиваля в Таганроге».
2. Недостаток компетенций:
«Отсутствие компетенций у специалистов.»
3. Ресурсоемкость процесса оценки:
«Проекты часто небольшие, как по финансовому обеспечению, так и кадровому. Оценка же может требовать много ресурсов, нужен какой-то оптимальный подход, который по времени не перекроет весь проект.»
4. Низкая культура оценки
«Незрелый запрос со стороны индустрии; сложности, связанные с особенностями сферы; неопределенность терминологическая; настройка известных оценочных методов; коммуникация ценности для отрасли».
Различия между группами: эксперты по оценке чаще отмечают методологические сложности и недостаток единых критериев — организаторы проектов больше обеспокоены сопротивлением творческих команд и финансовыми ограничениями.
Предложенные респондентами форматы мероприятий
Респонденты отметили важно очных мероприятий, т.к. они дают возможность для нетворкинга, а также высказали предпочтение по работе с разбором кейсов. Также среди предложенных форматов: мастер-классы, экспертные сессии и площадки, стратегические сессии, обучающие вебинары, дискуссии, круглые столы, презентация результатов оценочного исследования, акселератор.
«Обучающие мероприятия для экспертов по освоению методики оценки, в том числе в формате подробного разбора конкретного проекта, с которым мы ознакомились заранее. Ну, типа калибровочной экспертизы, но с подробным разбором».
«1-2-дневные интенсивы (по возможности в выходные) и групповая работа в чатах с кейсами».
Предложения или комментарии по проекту
«Перед мероприятием направить участникам мероприятия 2-3 тестовых проекта и по свежим следам разобрать результаты оценки, когда у экспертов будут свежие впечатления и аргументы».
«Хотелось бы не только послушать, но и принять участие в обсуждении. Предлагаем во второй части ЯККИ-2 организовать круглый стол с обменом мнениями».
Выводы и рекомендации
1. Высокая актуальность темы подтверждает важность развития проекта ЯККИ-2.
2. Необходимо разработать комплексную программу обучения по оценке социокультурных проектов, учитывая различные потребности экспертов и организаторов.
3. Формирование экспертных площадок для регулярного обмена опытом и обсуждения актуальных вопросов оценки.
4. Разработка адаптивной методологии оценки, учитывающей специфику различных типов творческих проектов.
5. Развитие междисциплинарного подхода к оценке, привлекая специалистов из различных областей.
6. Разработка стратегий по преодолению основных трудностей, таких как недостаток компетенций, финансовые ограничения и сопротивление творческих команд.
Заключение Результаты опроса демонстрируют высокую востребованность проекта по оценке социокультурного влияния творческих проектов. Эксперты признают актуальность темы и готовы активно участвовать в развитии методологии и практики оценки. Основные направления работы должны включать разработку адаптивных методик, обучение специалистов и создание площадок для профессионального диалога.
4 сентября в музее-заповеднике «Царицыно» в рамках «Форума меценатов» пройдет сессия «Видимые результаты и неуловимые эффекты творческих проектов — зачем и кому нужна их оценка?», в которой примут участие эксперты и консультанты АНО «Эволюция и Филантропия».
Инга Пагава, исследователь, эксперт в области филантропии, и Наталья Сергиевская, генеральный директор Фонда «Будущее время», эксперт-консультант АНО «Эволюция и Филантропия» представят результаты исследования международного опыта в сфере оценке культурных проектов.
Один из наиболее сложных аспектов в создании творческих проектов – это планирование результатов, прогнозирование социокультурного эффекта на этапе разработки проекта, вопросы мониторинга реализации проекта, а также определение подходов и методов, которые можно применить при оценке результатов проекта после его реализации. На сессии будет представлен взгляд разных сторон на проблематику и конкретные инициативы, подходы, кейсы и инструменты оценки результатов и влияния проектов в области культуры, искусства и креативных индустрий.
2 декабря состоялся завершающий круглый стол для участников онлайн-курса «Оценка проектов и программ в сфере детства-2022».
Курс завершили 57 человек из 29 организаций сферы детства, из них 20 организаций участвовали в курсе впервые. На курсе учились участники из 19 регионов РФ. На курсе было 14 команд из двух и более человек из одной организации. 45 участников получили сертификат с отличием. На основе анкеты финальной анонимной обратной связи был определен индекс лояльности — NPS, который составил 85,7%, что выше индекса прошлого потока (71,4%). На анкету ответили 49 участников курса. Индекс лояльности или NPS – это простой, общепризнанный стандартизированный инструмент сбора быстрой обратной связи о ценности своей деятельности. Сравнение результатов входного и финального тестирования участников показал, что в среднем рост уровня знаний составил 29% — этот результат почти повторяет показатель предыдущего потока (30%).
В завершающей встрече 2 декабря приняли участие 42 специалиста сферы детства (презентация).
Основную часть встречи шла работа в группах, где участники курса представили планы работы по развитию мониторинга и оценки в своих организациях в 2023 году и обменялись своими впечатлениями о курсе. Среди пожеланий по поводу улучшения курса в будущем участники назвали работу с наставником после завершения обучения, использование мультимодальных принципов в педагогическом дизайне курса, а также предложения по увеличению времени освоения курса или модуля «анализ данных».
Был проведен опрос участников об удовлетворенности обучением на курсе, в котором приняли участие 33 респондента. 67 и 27 процентов ответивших назвали курс полностью или скорее соответствовавшим их ожиданиям. 70% респондентов готовы рекомендовать курс коллегам.
Представляем вам цитаты слушателей о курсе:
Качественный и глубокий курс для проработки проектной деятельности организации. Я бы рекомендовала руководителю организации вводить как обязательный для прохождения проектным менеджерам.
Курс помог структурировать знания об оценке и научил создавать систему оценки и мониторинга результативности деятельности, а также позволил пообщаться с экспертами в оценке. К тому же очень много полезного теоретического и практического материала.
Курс полезен всем, кто вообще работает с благополучателями. Поможет проанализировать свою деятельность, заметить слепые пятна в оценке, если ранее она производилась. Советовать буду с оговоркой, что для прохождения курса необходимы хорошие ресурсы временные и лучше его проходить всей командой (отдела, программы) для лучшего понимания при внедрении изменений в деятельности и оценке программы/ проекта. Также прохождение курса командой позволяет рассмотреть собственную деятельность с разных сторон. Для состоявшихся программ полезно будет накопленные результаты деятельности преобразовать в инструмент изменений и фандрайзинга.
Надеюсь, будет ещё обучение, чтобы наша группа могла развиваться в данном направлении.
Итоги онлайн-встречи «Мониторинг и оценка практик работы с замещающими семьями»
5 августа 2021 года состоялась онлайн-встреча тематической группы «Мониторинг и оценка практик работы с замещающими семьями», в которой приняли участие 34 человека из 14 регионов РФ.
В начале мероприятия Светлана Строганова, куратор группы, эксперт БФ «Арифметика добра», обозначила основные содержательные вопросы встречи и заметила, что внедрение различных методов мониторинга и оценки важна не только для работы с донорами и заявками на грант, но и для оценки эффективности практики и ее улучшения.
Далее Ольга Евдокимова, исполнительный директор АНО «Эволюция и Филантропия», рассказала о проекте «Оценка в сфере детства: развитие сообществ практиков», в рамках которого проходила тематическая группа. Ольга рассказала о задачах этой группы, сделала ретроспективу предыдущих встреч, обозначила основные зоны развития в области мониторинга и оценки организаций, работающих с замещающими семьями. Презентация О.Евдокимовой.
Дмитрий Савва, автор исследования «Зоны роста» Фонда «Друзья», ментор Московской школы профессиональной филантропии и операционный директор группы «Кашемир и шелк». Он рассказал об основных понятиях и формировании цепочки социальных результатов (ЦСР). Презентация Дмитрия Саввы.
Модель цепочки социальных результатов Клуба приемных семей БФ «Арифметика Добра» представила куратор группы Светлана Строганова. Светлана, в частности, рассказала о мониторинге работы клуба и социальных результатах. Презентация Светланы Строгановой.
Участники семинара также работали в группах и составляли различные цепочки результатов – от оценки эффективности отдельных услуг до оценки эффективности передачи технологий. С результатами групповой работы вы можете познакомиться здесь.
В конце встречи участники поделились последними новостями, в том числе с изменениями в системах МиО своих организаций, задачами их развития, а также обратной связью на особо затронувшие вопросы встречи.
Представляем вам ключевые итоги партнерской инициативы по развитию доказательного подхода. Презентация