7 июня на Петербургском международном экономическом форуме прошла секция «Калькулятор эффективности для НКО»

7 июня на Петербургском международном экономическом форуме прошла секция «Калькулятор эффективности для НКО». Организатором секции выступила Социальная платформа фонда «Росконгресс». Модератором секции выступил Дементьев Иннокентий Андреевич, заместитель генерального директора Фонда президентских грантов

Основная задача секции состояла в том, чтобы обсудить перспективы разработки и внедрения ключевых и комплексных методик по оценке результативности и эффективности деятельности некоммерческих организаций, которые бы учитывали многообразие и специфичность направлений НКО и могли быть доступными в использовании для самих команд социальных проектов. Одним из ключевых вопросов, затронутых на секции, был вопрос о необходимости и возможности разработки ясных, объективных, измеримых и сопоставимых показателях положительного социального и экономического влияния проектов.

Приглашенные спикеры отвечали на поставленные модератором вопросы.

Тополева-Солдунова Елена Андреевна, директор автономной некоммерческой организации «Агентство социальной информации», генеральный директор благотворительного фонда «Доброта севера», председатель комиссии по развитию некоммерческого сектора Общественной палаты РФ, ответила на вопросы, насколько сообщество НКО готово к принятию необходимости постоянной оценки результатов своей работы? Какая динамика в этой части наблюдается по линии Общественной палаты в рамках мониторинга и рейтингования НКО.

Шадрин Артём Евгеньевич, генеральный директор Национального агентства развития квалификаций, директор Института социально-экономического проектирования НИУ «Высшая школа экономики», поделился перечнем инструментов, которые помогают сделать культуру оценки результатов понятной не только для институтов развития, но и для самих НКО. Артем Евгеньевич, в частности, упомянул Теорию изменений, а также рассказал, какие методики оценки результатов могут дать НКО импульс для улучшения своих практик и для более системного взгляда на сами практики.
Александрова Александра Борисовна, первый заместитель руководителя Департамента труда и социальной защиты населения города Москвы, поделилась интересным опытом разработки показателей эффективности использования помещений, выделяемых Департаментом на безвозмездной основе для НКО.
Евдокимова Ольга Анатольевна, исполнительный директор АНО поддержки
и развития инноваций в социальной сфере «Эволюция и филантропия», в своем выступлении затронула тему сопоставимых показателей и рейтингов эффективности и необходимости фокусировки на осмыслении некоммерческими организациями и финансирующими сторонами своей работы.

В частности, в своем выступлении Ольга Евдокимова отметила несколько моментов:

  • Цель НКО – это максимизация  социального воздействия и акселерация социальных преобразований для улучшения качества жизни людей.  В этой связи оценка играет важную роль, которая не сводится к определению только набора показателей, пусть даже ясных.  Более того, фокусировка исключительно на показателях даже вредна, в определенном смысле.
  • Показатели  редко дают возможность принимать решения, направленные на развитие, на обучение, на управление неопределенностью. Фокус должен быть на развитии оценочного мышления, на принятии решений, основываясь на глубоком понимании, как и почему и для кого и в каких обстоятельствах работает программа. Показателями это многообразие не охватишь. В сложном мире оценка играет новую роль: не столько для подсчета эффекта, сколько для прогнозирования и для корректировки и максимизации социальных преобразований.  Сейчас важен акцент на кастомизацию, гибкость, уникальность.  Трудность создает отсутствие бенчмарков для сравнения.
  • Чтобы оценка становилась более массовым явлением,  более зрелым процессом в НКО, необходимо,  с одной стороны,  снижать  методологические барьеры (больше простых доступных руководств и материалов,  примеров и  площадок для обмена). С другой стороны, необходимо сохранять профессиональный уровень и профессиональный дискурс, в том числе этические стандарты, особенно при вовлечении благополучателей.  
  • Нужны независимые верификации социальных результатов.  ВУЗы должны включаться  более активно и профессионально. Важны осмысление, обобщение, теоретические  и практические рамки. В исследования могут включаться студенты.
  • IT-технологии, в том числе, искусственный интеллект, будут в некой перспективе снижать методологические барьеры. Кроме внешних барьеров, НКО надо уметь управлять изменениями внутри команды, которая будет сопротивляться новациям, связанными с оценкой. Нужны стимулы для НКО  со стороны донорского сообщества, но и оно само должно становиться более зрелым. 
  • В целом донорское сообщество остается довольно незрелым в плане оценки программ. Культура принятия решений о социальном инвестировании  на основе доказательств  остается довольно низкой. Подход к оценке влияния донорского сообщества должен соотноситься со стратегией социального воздействия, а мало у кого она разработана в виде, пригодном для создания полезной модели оценки. Отсутствует внятная Теория изменений, например.  Многие доноры заявляют о том, что их стратегия предполагает системные изменения.  Но мало у кого есть внятное описание, что такое системное воздействие и его оценка.
  • Это не означает, что показатели вообще не нужны. Могут быть наборы показателей на разных уровнях и для разных моделей воздействия, для разных стейкхолдеров, для разных целей. Нужно использовать показатели верхнего (национальный уровень), среднего (на уровне тематики (приемные семьи), нижнего (на уровне организации). Необходима кластеризация моделей воздействия: типовые модели оценки, включая показатели.  Стоимостные оценки  (оценки социально-экономической эффективности) очень нужны, но у нас практически отсутствует необходимая  статистика.
  • Растет запрос со стороны общества на рейтинги, рэнкинги.

Гурцкая Диана Гудаевна, народная артистка России, художественный руководитель «Центра социальной интеграции Дианы Гурцкая», председатель комиссии по доступной среде и развитию инклюзивных практик Общественной палаты РФ, рассказала о том, как центр проводит оценку и отслеживает долгосрочные результаты своей работы.
Маковецкая Дарья Тимофеевна, руководитель ресурсного центра развития добровольчества Республики Карелия, член Совета Ассоциации волонтерских центров, поделилась своим опытом исследований развития добровольчества.
Афрова Елена Викторовна, директор центра реабилитации животных «Верность», рассказала об успехах в масштабировании практики, и о том, какие есть индикаторы для понимания, что центр движется в правильном направлении.
Бесшапошникова Екатерина Николаевна, руководитель образовательных программ, Фонд «Наше будущее», ответила на вопрос, получается ли у социальных предпринимателей выразить экономически прогнозируемые ими социальные результаты и эффекты, уложить их в бизнес-модель.

Видео секции доступно по ссылке.

Приглашаем на Форум «Яркие краски креативных индустрий»

Приглашаем принять участие в Форуме «ЯРКИЕ КРАСКИ КРЕАТИВНЫХ ИНДУСТРИЙ» — ключевом мероприятии одноименного проекта, поддержанного Президентским фондом культурных инициатив. Форум включает деловую часть и концерт-исследование. Мероприятия Форума состоятся 11 июня 2024 г. Начало мероприятий запланировано на 13:00. Планируемая продолжительность, включая перерывы и концерт-исследование – 7-8 часов. В связи с ограниченным количеством мест в зале просим до 7 июня заполнить регистрационную анкету для направления в Ваш адрес официального именного приглашения.

Организаторы Форума — партнеры проекта АНО “Арт Гелиос”, АНО “Эволюция и филантропия”, ООО “Идеи и решения”.

На деловой части форума будут представлены результаты:

— исследований российского и международного опыта оценки социокультурных проектов,  подходы, применяемые в российской и зарубежной практике, примеры использования инструментов оценки результатов и влияния творческих проектов;

— методической работы в пилотных регионах, которая включала апробирование некоторых инструментов для мониторинга и оценки ряда проектов и разработку логических схем их применения. Идеи и предложения, выработанные по итогам дискуссий, будут полезны потенциальным заявителям и грантополучателям, а также внешним независимым оценщикам и экспертам, в том числе региональным, отраслевым органам власти, другим заинтересованным лицам.

Надеемся, что проект «Яркие краски креативных индустрий» в дальнейшем станет постоянной экспертной площадкой для обмена опытом и лучшими практиками в сфере оценки, формирующей подходы к оценке влияния и результатов реализации социокультурных проектов и их влияния на различных уровнях.

Подтверждение участия, официальное приглашение и подробная информация с программой Форума будут направлены Вам по указанному в анкете адресу электронной почты.

Просим обратить внимание, что Президентский фонд не компенсирует приглашаемым участникам Форума расходы на проезд и проживание в г. Москве.

Развитие общей базы знаний в области МиО для кризисных центров было представлено на встрече 20 мая

20 мая в Москве прошла рабочая встреча руководителей и юристов организаций, имеющих в своем составе кризисные центры временного проживания для женщин с детьми, на которой Ольга Евдокимова рассказала о развитии общей базы знаний в области МиО для Кризисных центров. В частности, Ольга рассказала о наработках сообщества практиков в сфере оценки , которое развивалось в рамках проекта, реализованного АНО «Эволюция и Филантропия» в 2021- 2022 годах, представила онлайн-сервис «ПИОН» и продемонстрировала собранные там инструменты для кризисных центров. Также были представлены возможности обучения на онлайн-курсе «Оценка проектов и программ в сфере детства», очередной старт которого запланирован на лето 2024 года и сервисы проекта «Больше историй«, направленном на расширение применения практик вовлечения благополучателей в деятельность НКО сферы детства через использование сторителлинга для оценки программ (презентация).

Во время мероприятия участники встречи обсуждали вопросы оценки эффективности работы Кризисных центров. Был согласованы следующие ключевой показатель социальной эффективности: Количество решенных случаев (ребенок/cемья в безопасности, ребенок сохранен в семье и пр.) за определенный срок и за определенную сумму. При формулировании такого ключевого показателя сохраняется вариативность решаемой проблематики и учет сложности кейсов. При этом учитываются доступные для организации ресурсы. Что такое решенный случай организация может решить самостоятельно, определив необходимый минимум решенных задач с заданным качеством. Отдельно обсуждался вопрос — как оценить эффективность, если ребенок не смог остаться в семье. Было предложено оценивать качество работы и меру снижаемого вреда.

Критерием устойчивости может служить — количество семей, в которых результат сохраняется, например, в течение года или другого срока, определенным Кризисным центром. При этом важно обращать внимание и на устойчивость самой организации , на ее возможность быть эффективной в течение продолжительного времени. Для этого нужны показатели организационной и финансовой устойчивости. В разрезе этого обсуждался вопрос о роли информационной открытости в работе КЦ и об управлении «потоком клиентов». Было также отмечено, что для разных стейкхолдеров на разных этапах будут полезны разные наборы индикаторов

Какими инструментами можно пользоваться, чтобы измерять эти показатели?

  1. Административная отчетность (планы развития, например)
  2. Интервью на входе и выходе, сторителлинг через какое-то время, наблюдения администраторов и специалистов.
  3. Самооценка Кризисного центра, экспертные оценки и бенчмаркинг.

Какие сложные вопросы озвучивали участники?

  1. Границы подотчетности КЦ
  2. Решенный кейс или субъективное благополучие женщины
  3. Отсутствие бенчмарков, позволяющих сохранять ценность многообразия
  4. Вклад женщины и вклад КЦ в решение проблемы
  5. Как работать с негативной обратной связью
  6. Влияние показателей эффективности на гос. задание

На встрече был также проведен опрос участников о состоянии МиО в кризисных центрах, в котором приняли участие 15 специалистов.

33% ответили, что у них в организации был значительный прогресс в области МиО за последний год, 47% — что прогресс был незначительным, 13% сообщили, что прогресса скорее не было.

53% респондентов сообщили, что им скорее актуальная задача по развитию МиО в организации, 40% — что очень актуальна.

25 мая состоялся интерактивный воркшоп «Планирование и оценка социокультурного воздействия музейных проектов»

25 мая в Третьяковской галерее на Кадашевской набережной в рамках фестиваля «Интермузей» прошел интерактивный воркшоп «Планирование и оценка социокультурного воздействия музейных проектов«. В нем приняли участие около 30 специалистов.

Воркшоп провели: Наталья Сергиевская, генеральный директор Фонда «Будущее время», Ольга Евдокимова, исполнительный директор АНО «Эволюция и Филантропия», Ольга Заводилкина, эксперт АНО «Эволюция и Филантропия».

Ведущие воркшопа рассказали о реализации проекта «Яркие краски креативных индустрий» (презентация), продемонстрировали примеры выстраивания логической модели для оценки творческих проектов (презентация). Для участников воркшопа была организована работа в малых группах по формулированию результатов и подбору показателей для оценки проектов.

Воркшоп проходит в рамках проекта «Яркие краски креативных индустрий» (АНО «Арт-Гелиос», при поддержке Президентского фонда культурных инициатив).

25 мая пройдет интерактивный воркшоп «Планирование и оценка социокультурного воздействия музейных проектов»

25 мая с 13:30 до 15:00 в Третьяковской галерее на Кадашевской набережной (Конференц-зал №4) в рамках фестиваля «Интермузей» пройдет интерактивный воркшоп «Планирование и оценка социокультурного воздействия музейных проектов«.

Ведущие воркшопа:

  • Наталья Сергиевская, генеральный директор Фонда «Будущее время»,
  • Ольга Евдокимова, исполнительный директор АНО «Эволюция и Филантропия»,
  • Ольга Заводилкина, эксперт АНО «Эволюция и Филантропия».

В основе каждого творческого проекта – цели и задачи, которые ставит перед собой команда. Для большинства проектов в области культуры и просветительства результаты и эффекты реализованных проектов или больших программ оценить сложно – они не ограничиваются количеством проведенных событий, оказанных услуг или числом посетителей. Проекты музеев оказывают большое влияние на городскую среду, сообщества, партнерские институции и на каждого из посетителей. Участники воркшопа смогут узнать о передовом международном и российском опыте исследования краткосрочных, среднесрочных и долгосрочных результатов и эффектов креативных проектов, разнообразными подходами к оценке влияния проектов, а также попрактиковаться в планировании цепочек социокультурных результатов и эффектов, подборе показателей и методов сбора данных.

Регистрация по ссылке.

Воркшоп проходит в рамках проекта «Яркие краски креативных индустрий» (АНО «Арт-Гелиос», при поддержке Президентского фонда культурных инициатив).

18-19 апреля в г. Ростове-на-Дону прошла экспертная научно-практическая сессия по обсуждению подходов к оценке результативности социокультурных проектов

18-19 апреля в г. Ростове-на-Дону прошла экспертная научно-практическая сессия по обсуждению подходов к оценке результативности социокультурных проектов, реализуемых на территории Ростовской области при грантовой поддержке ПФКИ.

18 апреля с приветственным словом к участникам обратились Игорь Соболев, первый заместитель генерального директора ПФКИ, и Анна Дмитриева, министр культуры Ростовской области.

Игорь Соболев рассказал о задачах Президентского фонда культурных инициатив в свете приоритетов государственной культурной политики, задачах мониторинга и оценки поддержанных творческих инициатив.

Ольга Евдокимова и Наталья Сергиевская, эксперты АНО «Эволюция и Филантропия», представили проект «Яркие краски креативных индустрий» и результаты анализа международного и российского опыта оценки творческих проектов.

Людмила Скрынникова, доцент  Донского государственного технического университета, и Наталья Сергиевская представили кейс «Чеховский книжный фестиваль».

Далее участники сессии перешли к практической работе в группах по темам:

  • определение/приоритезация областей социокультурного воздействия и формирование банка социокультурных результатов;
  • определение способов измерения и оценки: показатели, методы сбора данных (к выбранным ранее социокультурным результатам).

Игорь Соболев и Анна Дмитриева ответили на вопросы участников и подвели итоги экспертной сессии.

19 апреля работа была продолжена. Эксперты АНО «Эволюция и Филантропия» и пригашенные участники обсудили вопросы измерения и сбора данных и оценки качества творческих проектов.

Была организована практическая работа в группах по теме «Определение возможных номинаций и характеристик творческих проектов» и представлены ее результаты.

Мероприятие прошло в рамках проекта «Форум «Яркие краски креативных индустрий«, поддержанного Президентским фондом культурных инициатив.

25 марта в Красноярске прошла фокус-группа с посетителями мобильной оперы-прогулки «Дмитрий Хворостовский. Начало»

25 марта в Красноярске прошла фокус-группа с посетителями мобильной оперы-прогулки «Дмитрий Хворостовский. Начало». В ней приняли участие 12 сотрудников красноярского представительства Фонда культурных инициатив. Провела фокус-группу Надежда Максименко, консультант по вопросам развития НКО, фасилитатор.

Проект «Мобильная опера-прогулка «Дмитрий Хворостовский. Начало» был выбран для методического сопровождения в рамках проекта «Форум «Яркие краски креативных индустрий«.

Целью фокус-группы было оценить потенциал оперы-прогулки для сохранения культурно-исторической памяти (актуальность, значимость, возможности влиять на изменения в знаниях и ценностях).

Основные задачи фокус-группы

  • Выявить, какими концептами пользуются участники обсуждения для описания содержания оперы
  • Раскрыть, как особенности формата влияют на восприятие содержания
  • Сопоставить потенциальное воздействие оперы с уровнями воздействия
  • Поиск эффективных каналов коммуникации об опере

Основные выводы будут представлены в финальном отчете о проекте.

Мероприятие прошло в рамках проекта «Форум «Яркие краски креативных индустрий«, поддержанного Президентским фондом культурных инициатив.

26 марта АНО «Эволюция и Филантропия» приняла участие в экспертной сессии по оценке результатов социокультурных проектов

26 марта эксперты АНО «Эволюция и Филантропия» выступили на экспертной сессии «Оценка результатов социокультурных проектов» в Красноярске. Сессия прошла на базе Государственной универсальной научной библиотеки. В мероприятии приняли участие 40 специалистов: эксперты в области оценки и культуры, представители министерства культуры, региональных учреждений культуры, региональные грантополучатели ПФКИ, которые закончили реализацию проектов. Мероприятие проводилось Президентским фондом культурных инициатив (ПФКИ) совместно с АНО «Центр поддержки творческих и социально-культурных инициатив «АРТ-ГЕЛИОС» и АНО «Эволюция и Филантропия».

На сессии выступили Первый заместитель генерального директора фонда Игорь Соболев и министр культуры Красноярского края Аркадий Зинов. По итогам 11 грантовых конкурсов ПФКИ в Красноярском крае получили поддержку 102 проекта на сумму свыше 177 млн рублей. «Регион проведения сессии был выбран неслучайно – красноярские проекты активно включились во взаимодействие с разработчиками оценочной системы», – отметил Первый заместитель генерального директора ПФКИ Игорь Соболев.

Эксперты разобрали существующие практики и подходы для реализации социокультурных проектов, получивших поддержку ПФКИ, поговорили о результатах исследований международного и российского опыта оценки и ответили на вопросы участников. В качестве примера участники рассмотрели ход реализации форума «Яркие краски креативных индустрий».

Проект «Форум «Яркие краски креативных индустрий» представили Ольга Евдокимова и эксперты проекта Наталья Сергиевская и Ольга Заводилкина. Наталья Сергиевская выступила с темой «Результаты исследований передового международного и российского опыта оценки креативных (творческих) проектов». Ольга Заводилкина представила кейс оценки проекта «Мобильная опера-прогулка «Дмитрий Хворостовский. Начало», она рассказала об оценочном дизайне, логической модели и методологии оценки проекта.

Во второй части сессии, участники определяли  области социокультурного воздействия, формулировали социокультурные результаты и показатели ним. 

«Сейчас перед фондом стоит большая задача выработки механики и методик оценки проектов, определения их значимости и влияния на вклад в развитие культурной среды в различных сферах», – подчеркнул Первый заместитель генерального директора ПФКИ Игорь Соболев.

4 марта прошла встреча участников проекта «Форум «Яркие краски креативных индустрий» (ЯККИ)

4 марта прошла встреча участников проекта «Форум «Яркие краски креативных индустрий» (ЯККИ), в которой приняли участие 12 специалистов, занятых в проекте.

В начале встречи Ольга Евдокимова рассказала о методической поддержке, которую участники творческих проектов получат в рамках ЯККИ, а также рассказала о ключевых принципах и подходах к оценке программ и проектов. Она напомнила, что оценка может быть использована для улучшения результатов работы, мотивации сотрудников и прозрачности для доноров. (презентация).

Далее на встрече были представлены разработанные оценочные дизайны творческих проектов.

Ольга Заводилкина, куратор проекта «Мобильная опера-прогулка «Дмитрий ХворостовскийНачало», отметила, что были выделены ключевые критерии, в частности, востребованность продукта, его устойчивость и факторы, влияющие на эти критерии; а также сформулировано социокультурное воздействие на пользователей, которое будет оцениваться — влияние на знания, чувства и ценности посетителей.

Надежда Рождественская представила проект «Онлайн-платформа проекта «Всероссийская актёрская биржа»«, описала его цели, изменения и результаты, рассказала о результатах оценки потребностей пользователей и плане сбора данных, включая интервью с представителями работодателей и вузов, а также использование метрик для оценки эффективности платформы. Цель оценки — выявить необходимость и конкретные направления доработки онлайн-платформы проекта «Всероссийская актёрская биржа» для достижения запланированных социальных результатов.

На встрече также был представлен проект молодежного фестиваля «Стихия металла«. Дизайн оценки проекта представила его куратор Татьяна Арчакова. Это проект для молодых металлургов города Первоуральска и окрестностей, он включал в себя фестиваль и тренинги по социальному проектированию. Оценочный дизайн проекта включал вопросы о достижении социальных результатов, устойчивости достигнутых результатов и возможности видоизменения проекта для расширения целевой аудитории. На встрече обсуждались планы проведения глубинных интервью с экспертами и активными участниками проекта из Первоуральска, а также подходы к сбору данных на предстоящем очном мероприятии.

Наталья Сергиевская представила планы работы и оценочный дизайн Уральского паблик-арт фестиваля ЧО, который ставит целью вовлечение жителей в творчество и современное искусство. Она подчеркнула важность оценки влияния фестиваля на формирование позитивного отношения жителей к районам и выявление перспектив развития продуктов фестиваля, а также влияние фестиваля на формирование культуры паблик-арта в регионе и в России. В планах команды проведение глубинных интервью с экспертами и активными участниками сообщества. Интерес представляет влияние фестиваля на вовлечение жителей города и бизнеса в обсуждение развития городской среды и бренда города.

Наталья также рассказала об оценке проекта Чеховский книжный фестиваль. Критериями для оценки проекта были выбраны вопросы: как фестиваль влияет на включение литературы/культуры в обыденную практику жителей город? Насколько фестиваль влияет на туристический бренд города?

Инга Пагава, куратор проекта «Молодежная программа оперных артистов» (программа реализуется АНО «Центр поддержки творческих и социально-культурных инициатив «Арт-Гелиос» и ГБУК г. Москвы «Московский музыкальный театр «Геликон-опера»), представила дерево результатов проекта, анализ ключевых стейкхолдеров и ключевой оценочный вопрос — «В какой степени (действительно ли?) молодёжная программ оперных артистов содействует повышению профессионализма молодых артистов?». На этот вопрос команда будет отвечать с помощью сравнения оценок экспертов и педагогов, работодателей и участников.

Проект «Форум «Яркие краски креативных индустрий» поддержан Президентским фондом культурных инициатив.

Результаты исследования по теме оценки влияния культурных проектов были представлены на конференции «Про развитие городов и сообществ»

21 февраля Наталья Сергиевская представила результаты исследования, проведенного в рамках проекта «Форум «Яркие краски креативных индустрий» на конференции «Про развитие городов и сообществ». Организатор — фонд «Добрый город Петербург». Тема ее выступления: «Как оценить влияние культурных проектов?»

Наталья рассказала о проекте «Форум «Яркие краски креативных индустрий» — этапах реализации проекта, планах на 2024 год. Так, в 2023 году был проведен анализ международного и российского опыта оценки культурных проектов, в 2024 году проводится оценка пилотных проектов, будут подготовлены отчетные кейсы и презентации проектов. При разработке дизайна оценки учитываются области влияния, масштаб влияния, темпоральные рамки, используются логические модели проектов (ЛМП) (презентация).