18-19 апреля вг. Ростове-на-Дону прошла экспертная научно-практическая сессия по обсуждению подходов к оценке результативности социокультурных проектов, реализуемых на территории Ростовской области при грантовой поддержке ПФКИ.
18 апреля с приветственным словом к участникам обратились Игорь Соболев, первый заместитель генерального директора ПФКИ, и Анна Дмитриева, министр культуры Ростовской области.
Игорь Соболев рассказал о задачах Президентского фонда культурных инициатив в свете приоритетов государственной культурной политики, задачах мониторинга и оценки поддержанных творческих инициатив.
Ольга Евдокимова и Наталья Сергиевская, эксперты АНО «Эволюция и Филантропия», представили проект «Яркие краски креативных индустрий» и результаты анализа международного и российского опыта оценки творческих проектов.
Людмила Скрынникова, доцент Донского государственного технического университета, и Наталья Сергиевская представили кейс «Чеховский книжный фестиваль».
Далее участники сессии перешли к практической работе в группах по темам:
определение/приоритезация областей социокультурного воздействия и формирование банка социокультурных результатов;
определение способов измерения и оценки: показатели, методы сбора данных (к выбранным ранее социокультурным результатам).
Игорь Соболев и Анна Дмитриева ответили на вопросы участников и подвели итоги экспертной сессии.
19 апреля работа была продолжена. Эксперты АНО «Эволюция и Филантропия» и пригашенные участники обсудили вопросы измерения и сбора данных и оценки качества творческих проектов.
Была организована практическая работа в группах по теме «Определение возможных номинаций и характеристик творческих проектов» и представлены ее результаты.
25 марта в Красноярске прошла фокус-группа с посетителями мобильной оперы-прогулки «Дмитрий Хворостовский. Начало». В ней приняли участие 12 сотрудников красноярского представительства Фонда культурных инициатив. Провела фокус-группу Надежда Максименко, консультант по вопросам развития НКО, фасилитатор.
Проект «Мобильная опера-прогулка «Дмитрий Хворостовский. Начало» был выбран для методического сопровождения в рамках проекта «Форум «Яркие краски креативных индустрий«.
Целью фокус-группы было оценить потенциал оперы-прогулки для сохранения культурно-исторической памяти (актуальность, значимость, возможности влиять на изменения в знаниях и ценностях).
Основные задачи фокус-группы
Выявить, какими концептами пользуются участники обсуждения для описания содержания оперы
Раскрыть, как особенности формата влияют на восприятие содержания
Сопоставить потенциальное воздействие оперы с уровнями воздействия
Поиск эффективных каналов коммуникации об опере
Основные выводы будут представлены в финальном отчете о проекте.
26 марта эксперты АНО «Эволюция и Филантропия» выступили на экспертной сессии «Оценка результатов социокультурных проектов» в Красноярске. Сессия прошла на базе Государственной универсальной научной библиотеки. В мероприятии приняли участие 40 специалистов: эксперты в области оценки и культуры, представители министерства культуры, региональных учреждений культуры, региональные грантополучатели ПФКИ, которые закончили реализацию проектов. Мероприятие проводилось Президентским фондом культурных инициатив (ПФКИ) совместно с АНО «Центр поддержки творческих и социально-культурных инициатив «АРТ-ГЕЛИОС» и АНО «Эволюция и Филантропия».
На сессии выступили Первый заместитель генерального директора фонда Игорь Соболев и министр культуры Красноярского края Аркадий Зинов. По итогам 11 грантовых конкурсов ПФКИ в Красноярском крае получили поддержку 102 проекта на сумму свыше 177 млн рублей. «Регион проведения сессии был выбран неслучайно – красноярские проекты активно включились во взаимодействие с разработчиками оценочной системы», – отметил Первый заместитель генерального директора ПФКИ Игорь Соболев.
Эксперты разобрали существующие практики и подходы для реализации социокультурных проектов, получивших поддержку ПФКИ, поговорили о результатах исследований международного и российского опыта оценки и ответили на вопросы участников. В качестве примера участники рассмотрели ход реализации форума «Яркие краски креативных индустрий».
Проект «Форум «Яркие краски креативных индустрий» представили Ольга Евдокимова и эксперты проекта Наталья Сергиевская и Ольга Заводилкина. Наталья Сергиевская выступила с темой «Результаты исследований передового международного и российского опыта оценки креативных (творческих) проектов». Ольга Заводилкина представила кейс оценки проекта «Мобильная опера-прогулка «Дмитрий Хворостовский. Начало», она рассказала об оценочном дизайне, логической модели и методологии оценки проекта.
Во второй части сессии, участники определяли области социокультурного воздействия, формулировали социокультурные результаты и показатели ним.
«Сейчас перед фондом стоит большая задача выработки механики и методик оценки проектов, определения их значимости и влияния на вклад в развитие культурной среды в различных сферах», – подчеркнул Первый заместитель генерального директора ПФКИ Игорь Соболев.
В начале встречи Ольга Евдокимова рассказала о методической поддержке, которую участники творческих проектов получат в рамках ЯККИ, а также рассказала о ключевых принципах и подходах к оценке программ и проектов. Она напомнила, что оценка может быть использована для улучшения результатов работы, мотивации сотрудников и прозрачности для доноров. (презентация).
Далее на встрече были представлены разработанные оценочные дизайны творческих проектов.
Ольга Заводилкина, кураторпроекта «Мобильная опера-прогулка «Дмитрий Хворостовский. Начало», отметила, что были выделены ключевые критерии, в частности, востребованность продукта, его устойчивость и факторы, влияющие на эти критерии; а также сформулировано социокультурное воздействие на пользователей, которое будет оцениваться — влияние на знания, чувства и ценности посетителей.
Надежда Рождественская представила проект «Онлайн-платформа проекта «Всероссийская актёрская биржа»«, описала его цели, изменения и результаты, рассказала о результатах оценки потребностей пользователей и плане сбора данных, включая интервью с представителями работодателей и вузов, а также использование метрик для оценки эффективности платформы. Цель оценки — выявить необходимость и конкретные направления доработки онлайн-платформы проекта «Всероссийская актёрская биржа» для достижения запланированных социальных результатов.
На встрече также был представлен проект молодежного фестиваля «Стихия металла«. Дизайн оценки проекта представила его куратор Татьяна Арчакова. Это проект для молодых металлургов города Первоуральска и окрестностей, он включал в себя фестиваль и тренинги по социальному проектированию. Оценочный дизайн проекта включал вопросы о достижении социальных результатов, устойчивости достигнутых результатов и возможности видоизменения проекта для расширения целевой аудитории. На встрече обсуждались планы проведения глубинных интервью с экспертами и активными участниками проекта из Первоуральска, а также подходы к сбору данных на предстоящем очном мероприятии.
Наталья Сергиевская представила планы работы и оценочный дизайн Уральского паблик-арт фестиваля ЧО, который ставит целью вовлечение жителей в творчество и современное искусство. Она подчеркнула важность оценки влияния фестиваля на формирование позитивного отношения жителей к районам и выявление перспектив развития продуктов фестиваля, а также влияние фестиваля на формирование культуры паблик-арта в регионе и в России. В планах команды проведение глубинных интервью с экспертами и активными участниками сообщества. Интерес представляет влияние фестиваля на вовлечение жителей города и бизнеса в обсуждение развития городской среды и бренда города.
Наталья также рассказала об оценке проекта Чеховский книжный фестиваль. Критериями для оценки проекта были выбраны вопросы: как фестиваль влияет на включение литературы/культуры в обыденную практику жителей город? Насколько фестиваль влияет на туристический бренд города?
Инга Пагава, куратор проекта «Молодежная программа оперных артистов» (программа реализуется АНО «Центр поддержки творческих и социально-культурных инициатив «Арт-Гелиос» и ГБУК г. Москвы «Московский музыкальный театр «Геликон-опера»), представила дерево результатов проекта, анализ ключевых стейкхолдеров и ключевой оценочный вопрос — «В какой степени (действительно ли?) молодёжная программ оперных артистов содействует повышению профессионализма молодых артистов?». На этот вопрос команда будет отвечать с помощью сравнения оценок экспертов и педагогов, работодателей и участников.
Проект «Форум «Яркие краски креативных индустрий» поддержан Президентским фондом культурных инициатив.
21 февраля Наталья Сергиевская представила результаты исследования, проведенного в рамках проекта «Форум «Яркие краски креативных индустрий» на конференции «Про развитие городов и сообществ». Организатор — фонд «Добрый город Петербург». Тема ее выступления: «Как оценить влияние культурных проектов?»
Наталья рассказала о проекте «Форум «Яркие краски креативных индустрий» — этапах реализации проекта, планах на 2024 год. Так, в 2023 году был проведен анализ международного и российского опыта оценки культурных проектов, в 2024 году проводится оценка пилотных проектов, будут подготовлены отчетные кейсы и презентации проектов. При разработке дизайна оценки учитываются области влияния, масштаб влияния, темпоральные рамки, используются логические модели проектов (ЛМП) (презентация).
Прошло почти полгода с начала работы ЯККИ, и достигнут очередной важный рубеж: 13 февраля состоялась установочная встреча организаторов форума и авторов творческих инициатив, пожелавших принять участие в проекте. Мероприятие проведено при поддержке и активной модерации Ольги Евдокимовой, главы основного партнера ЯККИ, АНО «Эволюция и Филантропия».
С июля, когда начались активная исследовательская работа и сбор данных, организаторам и партнерам проекта удалось сформировать первые библиотеки подходов, социокультурных результатов, кейсов, а также инструментарии, которые в перспективе станут основой для самооценки авторов творческих инициатив и их качественного стороннего анализа во всем многообразии культурного спектра.
Игорь Светославович Соболев, первый заместитель генерального директора ПФКИ, отметил, что хотя сегодня существует адекватная экспертиза и сложилась определенная оценочная система, она достаточно сложна и не всегда обладает достаточной гибкостью. Поэтому крайне важно создать доступный широкому кругу авторов проектов и благотворителей набор инструментов и подходов, которые помогут оперативно определить, в каком объеме поддержки нуждается та или иная творческая инициатива.
«Есть необходимость развития уже существующих подходов и поиска новых, большего упрощения процессов, с тем чтобы они стали применимы в широком спектре проектов и у широкого диапазона организаций, придумывающих и воплощающих такие инициативы в реальность после получения президентского гранта, — отметил Игорь Соболев. — Это острый вопрос: например, профинансированными нашим фондом проектами серьезно интересуется Экспертный совет при Правительстве РФ, где уверены в необходимости разработки системы определения результатов, которая бы могла быть распространена на всё проектное поле».
Спикер выделил три важных последовательных этапа развития проекта «ЯККИ»:
✓ начать подбор показателей, позволяющих оценивать результаты творческих проектов и подходов, методик, дающих возможность правильно их использовать;
✓ проанализировать российскую и международную практику оценки творческих проектов и сформировать наборы таких показателей;
✓ в дальнейшем найти определенные соотношения между результатами и стоимостью проектов, а также определить пул социокультурных технологий, позволяющих решить ту или иную проблему и добиться результата уже существующим набором инструментов и мероприятий.
Исходя из этих перспектив и проводился отбор в ЯККИ команд для участия в пилотном исследовании эффективности оценочных технологий творческих инициатив. Они обеспечили широкую представленность российского культурного поля, а также географическое разнообразие нашей страны.
ЯККИ и ПФКИ удалось собрать в 2021–2023 годах проекты, которые развивались в том числе в трех модельных регионах: Ростове, Екатеринбурге и Красноярске. В пул участников эксперимента вошло 7 таких проектов, отражающих разные аспекты социокультурного разнообразия России:
✓ Молодежная программа оперных артистов АНО «Центр поддержки творческих и социально-культурных инициатив “Арт-Гелиос”» и ГБУК г. Москвы «Московский музыкальный театр»;
✓ молодежный фестиваль «Стихия металла» (Свердловская область);
✓ онлайн-платформа проекта «Всероссийская актерская биржа»;
✓ Чеховский книжный фестиваль (Ростовская область, Таганрог);
✓ проект «Из России с любовью» (Ростовская область).
Ближайшие три месяца отобранные команды будут совместно с партнерами ЯККИ работать, пробуя и анализируя различные инструменты из уже наработанных в результате исследовательской работы библиотек-«артефактов». Это поможет им сформировать «дерево результатов», логическую модель проекта с аналитическими показателями, оценочный дизайн и корректное описание кейса.
На протяжении работы команды получат PR-поддержку, нарастят компетенции в области анализа и оценки творческих программ и получат навыки успешной презентации своих инициатив перед филантропами и фондами.
Результатом совместной работы станет форум, который пройдет в июне 2024 года, а его кульминацией будет гала-концерт участников.
Справка о проекте
Межрегиональный форум «Яркие краски креативных индустрий», победитель конкурса ПФКИ, — инновационная российская площадка, где в онлайн- и офлайн-режимах собирается и обсуждается передовой международный и российский опыт оценки социального воздействия творческих проектов.
Форум призван разработать рекомендации и подходы, с одной стороны, учитывающие специфику творческой сферы и компетенции её участников, с другой — принимающие во внимание ожидания финансирующих институтов. Полученные результаты будут способствовать развитию оценочного мышления у инициаторов проектов и предоставят им доступ к набору инструментов (например, к библиотеке результатов, показателей, кейсов) для оценки эффективности и повышения социокультурного потенциала. Над новыми подходами к оценке будут работать профессиональные эксперты, представители регионов, деятели культуры и креативных индустрий, а также участники успешно реализованных проектов, получивших поддержку ПФКИ.
13 февраля состоялась установочная встреча участников проекта «Форум «Яркие краски креативных индустрий» (ЯККИ). Во встрече приняли участие 22 специалиста из 9 организаций сферы культуры. Проект поддержан Президентским фондом культурных инициатив.
Цель проекта — создание креативных оценочных подходов для планирования и реализации творческих проектов.
АНО «Эволюция и Филантропия», ключевой контент-партнер проекта
ООО «Идеи&Решения», PR-поддержка
Задачи:
создать креативную площадку для обсуждения и визуального представления результатов
изучить существующий опыт оценки социокультурного влияния творческих проектов на общество
провести серию дискуссионных и методических мероприятий
оказать методическую поддержку отобранным пилотным проектам в части выбора подходов к их мониторингу и оценке
Ожидаемые качественные результаты:
повышение уровня мотивации, профессионализма и компетенций в области оценки результатов при реализации проектов
мотивация участников проектов создавать совместные творческие коллаборации
формирование и развитие сообщества заинтересованных людей, имеющих знания и компетенции в области оценки творческих инициатив
важность и необходимость мониторинга и оценки результатов реализации своих культурных проектов
В начале встречи Игорь Соболев, первый заместитель генерального директора ПФКИ, рассказал об ожиданиях фонда от реализации данного проекта, которые связаны с возможностью дальнейшего использования выработанных оценочных подходов для мониторинга и оценки творческих проектов. «Мы хотим посмотреть, какой есть опыт оценки творческих проектов, у которых безусловно есть своя специфика. Мы надеемся, что к концу реализации проекта мы сумеем нащупать набор показателей и результатов для оценки творческих проектов. Это в дальнейшем позволит авторам новых проектов, используя созданную библиотеку, самостоятельно закладывать критерии оценки на стадии разработки«, — сказал он.
Ольга Понкратова, руководитель социокультурных проектов театра «Геликон-опера», рассказала о том, что она видит важным направлением проекта — развитие навыков креативного представления и продвижения культурных инициатив.
Ольга Евдокимова, исполнительный директор АНО «Эволюция и Филантропия», рассказала о промежуточных результатах проекта и планах его дальнейшей реализации. Проект начался в 2023 году с исследования международного и российского опыта оценки творческих проектов — результаты исследований были представлены на Форуме меценатов, был проведен воркшоп по теме оценки проектов в сфере культуры, на конференции АСОПП-2023 была проведена онлайн-сессии «Для чего и кому нужна оценка творческих проектов?».
На данном этапе работа с проектами-участниками будет организована с февраля по июнь 2024 года. АНО «Эволюция и Филантропия» предоставит методическую поддержку участникам проекта, которая будет заключаться, в частности:
в разработке оценочного дизайна и инструментария сбора данных ;
в поддержке процесса сбора данных;
в анализе данных и составлении отчетности.
Презентация результатов состоится в июне 2024. АНО «Эволюция и Филантропия» проведет методические вебинары и групповые встречи для участников, в опорных регионах пройдет серия дискуссионных мероприятий (презентация).
Сергей Пархоменко, ООО «Идеи&Решения» рассказал об основных инструментах продвижения проекта.
В завершающей части встречи прошло представление проектов-участников.
Молодежная программа оперных артистов АНО «Центр поддержки творческих и социально-культурных инициатив «Арт-Гелиос» и ГБУК г. Москвы «Московский музыкальный театр»». Илья Милованова рассказал о проекте, в котором ежегодно театр готовит 10 оперных артистов. Интерес участия связан с тем, что есть желание оценить влияние проекта на зрителей и более широко на сферу оперного искусства.
Молодежный фестиваль «Стихия металла» (Свердловская обл.). Кристина Костина рассказала, что фестиваль направлен на молодых людей, занятых на металлургических предприятиях региона. Цель фестиваля — способствовать творческой реализации работающей молодежи. Интерес к ЯККИ связан с планами масштабировать проект и выработать критерии его оценки.
Онлайн-платформа проекта «Всероссийская актёрская биржа». Проект представил Павел Скворцов. Проект решает задачу дефицита творческих кадров в регионах, он налаживает связи между специалистами творческих профессий и работодателями.
Мобильная опера-прогулка «Дмитрий Хворостовский. Начало». Агаханова Наталья рассказала, что проект знакомит с творчеством Дмитрия Хворостовского в инновационном формате городской прогулки с элементами дополненной реальности. Команда проекта хочет оценить свой продукт и найти новые идеи и способы для его продвижения.
Уральский паблик-арт фестиваль ЧО (Екатеринбург) посвящен проращиванию локальных историй в формате паблик-арта через общение с современными художниками и вовлечение публики в создание художественных произведений, самовыражение, общение с художниками.
Чеховский книжный фестиваль (Ростовская обл., Таганрог). Проект представила Людмила Скрынникова. Фестиваль работает с 2007 года. Его цель — популяризация Таганрога как места рождения Чехова и развитие событийного туризма. Участие позволит оценить накопленный опыт, а также прояснить сильные и слабые стороны проекта.
Проект «Из России с любовью» (Ростовская обл.). Владимир Денисов рассказал, что проект собирает истории иностранцев, которые приехали в Россию и остались здесь жить. Истории создаются в виде текстов и подкастов, в ближайших планах создание видеоисторий. В рамках ЯККИ с этим проектом будет работать команда «Идеи и решения».
Как оценить эффект гастролей в небольшом городе и почему проекты становятся долгожителями, рассказали сотрудники фондов на IX конференции Ассоциации специалистов по оценке программ и проектов в социальной сфере, которая завершилась 18 октября в Москве.
Работа стала интереснее, изменился круг общения
В этом году в фонде «Искусство, наука и спорт» оценили социальные эффекты, которые на жителей небольших городов оказал проект «Культурная афиша». Его задача – улучшить культурную жизнь и дать людям возможности для качественного досуга.
«Это комплексный проект – гастроли творческих коллективов, поддержка театральных и музыкальных коллективов, фестивали, развитие музеев и выставочная деятельность, развитие местных культурных сообществ – все это в том числе развивает насмотренность жителей», – говорит руководитель проекта Ирина Муштатова.
В 2022 году гастроли, организованные фондом, посетили более 18 тысяч зрителей, фестивали – еще 9 тысяч. Но цифры, отмечает Муштатова, не показывают, как именно проект влияет на жизни людей, в то время как оценка помогает придать проектам «качественный окрас».
Систему оценки фонд разработал вместе с фондом «Культура благотворительности». Задача была – не просто придумать методику, но дать возможность использовать ее руководителям проектов и людям, которые реализуют проекты на местах.
«Методика помогает оценить, какие положительные, отрицательные или незапланированные результаты дает наша деятельность в регионе. Главный вопрос – не что сделали мы, а как изменилась жизнь участников наших проектов», – объясняет Муштатова.
Опросы, которые касались проекта «Культурная афиша», проводили в конце 2022-начале 2023 года онлайн и очно – с помощью волонтеров на местах. Виды исследований и периодичность опросов отличались: например, зрителей опрашивали несколько раз в год, во время гастролей, а участников – сразу после фестиваля и через год.
Сначала анализировали респондентов: пол, возраст, наличие детей, город проживания. После – оценивали вовлеченность человека в культурную жизнь города. Больше половины (63%) ответили, что активно посещают культурные события, 71% сказали, что с появлением мероприятий фонда культурная жизнь в городе «значительно улучшилась».
Потом – вопросы о культуре в целом: качество досуга, возможность провести время с семьей. Эти ответы дают сотрудникам фонда понимание общей картины. Затем исследователи собрали отзывы зрителей – «живая речь помогает сделать выводы для дальнейшего развития проектов», поясняет Муштатова.
Следующая группа респондентов – активные участники фестивалей, то есть люди, которые были задействованы в проектной деятельности. В персональных результатах многие отметили творческий рост и повышение своих профессиональных навыков: 71,4% респондентов создали свой проект.
«Мы видим, что наша деятельность подтолкнула людей к дальнейшему развитию. Многие отмечают, что без проекта у них не было бы возможности получить такие знания и навыки», – говорит Муштатова.
Среди самых важных изменений люди называли:
возможность посетить выставки ведущих музеев страны (71%);
улучшение качества культурного досуга (75%);
улучшение качества культурного развития у детей (59%);
изменение круга общения (37%).
Отдельно опросили представителей профессионального сообщества – сотрудников музеев города Железногорска Курской области, вовлеченных в проекты фонда. «В подготовке наших проектов были задействованы всего 20% сотрудников – мы бы хотели, чтобы эта цифра была больше», – говорит Муштатова.
Зато о росте профнавыков сообщили 80% сотрудников, еще 60% рассказали, что у них появились новые профессиональные связи, у 80% «работа стала интереснее». О том, что без проектов фонда они бы не получили таких знаний, заявили 80% опрошенных.
Обобщенные результаты исследований показали: 86,7% респондентов считают, что проекты фонда «положительно влияют на культурную жизнь их города», 70% — что помогают в профессиональном росте и развитии.
«Созданная система оценки помогает нам анализировать все, что происходит в городе в культурном смысле, и на основе этого решать, как мы можем улучшить свое положительное воздействие. Мне как руководителю проекта эти опросы помогают сделать выводы и менять вектор своей деятельности», – говорит Муштатова.
При этом, подчеркивает заместитель директора фонда «Искусство, наука и спорт» Николай Троцкий, результаты опросов не говорят, что надо корректировать цель и задачи проекта. Подкорректировать в проекте планируют только тактику. «Наша задача – учитывать в том числе небольшие показатели, которые наталкивают на мысли, что нужно поменять, чтобы повысить эффективность проекта», – говорит он.
Почему некоторые проекты живут долго: факторы успеха и риска
На той же секции «Оценка социокультурных проектов» Ирина Лапидус, директор программ Благотворительного фонда Владимира Потанина, рассказала об исследовании и картировании музейных проектов – победителей конкурсов «Меняющийся музей в меняющемся мире» и «Музейный гид» в 2005 – 2018 годах, которые они провели вместе с Ассоциацией менеджеров культуры.
Бывая в командировках, сотрудники фонда заметили, что довольно много проектов продолжают жить и развиваться даже после окончания поддержки фонда.
«Мы решили систематизировать проекты, которые прожили долгую жизнь после гранта, и понять, какие есть сценарии развития и какие факторы влияют на устойчивость проекта», – рассказывает Лапидус.
Методов исследования было несколько: анализ открытых источников, онлайн-анкетирование, глубинные интервью, блиц-опросы по телефону, включенное экспертное наблюдение. Всего в этих конкурсах было 259 грантополучателей, в опросе участвовала примерно половина – они рассказали о 80 проектах, которые получили поддержку фонда и продолжили развиваться после. Выяснилось, что 29 проектов прожили больше 10 лет; это стало неожиданностью для фонда, говорит Лапидус.
Регионами-лидерами оказались Москва и Московская область, Свердловская, Калининградская и Ярославская области, Пермский край. Среди победителей конкурса «Меняющийся музей в меняющемся мире» 44% проектов реализовывались региональными музеями, 19% – разными НКО. Такая же картина и среди финалистов «Музейного гида» – там тоже лидируют проекты — долгожители региональных музеев.
Говоря об эффекте, который дало участие в конкурсах фонда, респонденты в первую очередь отмечали:
новые аудитории и форматы;
переосмысление наследия;
продвижения музея/проекта;
исследование и развитие коллекции;
партнерские связи;
развитие территории.
«Результаты исследования подтвердили нашу теорию о том, что развитие проекта – человекоцентрично. Если человек остается в организации и у него есть не только мотивация, но и содержательный и административный ресурс, чтобы поддерживать эту тему, у проекта больше шансов на долгую жизнь»,– говорит Лапидус.
Исследователи выяснили, что проект более устойчив, если:
ориентирован на идею, которая выводит музей на новые горизонты, а не воспроизводит его типовую деятельность;
встроен в стратегию развития и влияет на деятельность организации в целом;
сфоркусирован на перспективах и масштабировании;
в проекте существенно влияние автора, и он продолжает участвовать в развитии.
Проанализировав результаты, фонд запустил новый конкурс #фондпотанина25 – участвовать в нем могут сотрудники организаций – выпускников одной или нескольких программ фонда, в том числе уже закрытых, или организаций, которые могут подтвердить правопреемственность результатов ранее поддержанных фондом проектов.
Оригинал статьи размещен на сайте Агентства социальной информации.
У творческих проектов есть множество эффектов, но до сих пор их либо не принято оценивать, либо отсутствуют необходимые инструменты и единый для участников процесса язык оценки. Поскольку воздействие культуры на общество широко и объемно, решение вопросов взаимопонимания и строгости анализа становится важнейшим для заинтересованных сторон — творцов, меценатов, государства. Поможет ли создание общего поля понятий участникам креативных процессов прогнозировать воздействие культурных инициатив на социум и насколько это необходимо донорам и организаторам проектов?
На эти вопросы попытались ответить представители экспертного сообщества, которые собрались на специализированной онлайн-сессии «Для чего и кому нужна оценка творческих проектов?». Она состоялась 18 октября 2023 года в числе мероприятий IX Конференции Ассоциации специалистов по оценке программ и проектов в социальной сфере (АСОПП) «Качество жизни, благополучие, оценка». На сессии присутствовало более 50 человек.
Среди участников сессии — эксперты, представители крупнейших частных фондов, среди которых — «Абсолют-Помощь», «Искусство, наука и спорт», «ОМК-участие», «Доброта Севера», фонда Тимченко, а также организаторы творческих проектов — руководители Библиотеки им. Н.А. Некрасова и Центра социокультурной анимации «Одухотворение».
Внести посильный вклад в сложнейшую задачу призван организатор мероприятия — Форум «Яркие краски креативных индустрий» (ЯККИ). Сейчас на его основе создается общая для всех участников культурного процесса всероссийская платформа, главной целью которой является обсуждение и сбор многообразных мнений, а также поиск тем и новых подходов в сфере оценки творческих проектов.
«Культура очень разнообразна в своих проявлениях, но эта цветущая сложность процессов в ней хотя и создает определенные трудности для оценки творческих феноменов, но делает процесс оценки творческих проектов увлекательным и мотивирующим, — говорит модератор сессии Ольга Евдокимова, исполнительный директор АНО «Эволюция и Филантропия (ЭиФ)», ключевого контент-партнера ЯККИ. — Мы видим активный интерес к этой проблеме со стороны и финансирующих организаций, и организаторов творческих процессов. В международном сообществе накоплен разнообразный опыт в области оценки программ вообще и проектов в сферы культуры и искусства, в частности. В нашей стране эта тематика только начала развиваться и важно с самого начала учитывать накопленный опыт, нарабатывать собственный и выстраивать равноправный диалог между всеми сторонами,участвующими в процессе оценки» (презентация).
Одним из предметов обсуждения на онлайн-сессии стали результаты первого этапа исследования, которые представили Наталья Сергиевская, генеральный директор Фонда «Будущее время», эксперт-консультант ЭиФ, и Инга Пагава, эксперт ЭиФ.
«Кроме очевидных заинтересованных сторон — доноров и организаторов проектов — результаты процесса оценки и сами оценки воздействия культурных проектов крайне важно обсуждать и с их аудиторией, — объяснила Наталья Сергиевская. — Обычно это остается внутри профессионального сообщества, но разговор с потребителем на равных позволит и повысить уровень доверия между всеми участниками и наладить равноправный диалог, чтобы точнее отследить возможные изменения в результате воздействия».
В фокусе внимания Инги Пагавы оказался российский опыт оценки влияния социокультурных эффектов на качество жизни общества (презентация).
«Основной запрос на понятную методологию оценки творчества формируют главные участники отечественного культурного поля — органы государственной власти, вроде Министерства культуры, и учреждения культуры, такие как музеи и театры, — уверена Инга Пагава. — И если первых интересует оптимизация расходов и реализация госзаказа на программированный социальный эффект, то вторых — развитие финансовой устойчивости или различных направлений фандрайзинга, а также собственных управленческих компетенций и организационных улучшений».
Чтобы учесть все подобные нюансы, включая интересы организаторов культурных инициатив, не нужно приводить все к одному-двум подходам, но необходимо продемонстрировать все их многообразие со всех сторон. Для этого планируется собрать уже наработанный опыт и практики, чтобы впоследствии на этой базе заинтересованные стороны смогли разрабатывать собственные логические модели, выбирать адекватные подходы и инструменты для измерений, использовать и развивать банки социальных результатов.
Выступившая на сессии с докладом сомодератор Инна Прилежаева, исполнительный директор Ассоциации менеджеров культуры (АМК), подчеркнула, что общая цепочка индивидуальных социальных изменений, которую инициирует любой творческий проект, сложна и многомерна.
«Сегодня социокультурное проектирование уверенно вошло в текущую практику деятельности многих организаций, однако способы оценки эффективности социокультурных проектов не до конца сформулированы и изучены, — говорит Инна Прилежаева. — Проблема видится в том, что такой тип проектов имеет высокую степень персонализации и требует внимательной интерпретации проектных результатов с учетом многих контекстов. Ведь отличительная особенность социокультурного проекта в том, что он работает со стратегическим типом ресурсов, лежащим, как правило, вовне организации или собственной системы и производит воздействия и эффекты в разных системах деятельности и сообществах. Вторая сторона этой проблемы — отсутствие института проектной критики в профессиональном сообществе, где формируется и систематизируется рефлексия и оценка проектной деятельности».
В дискуссии была высказана и другая точка зрения: — со стороны организаторов творческих проектов прозвучали опасения, что часто неясные цели оценки и необходимость соответствовать малопонятным критериям усложняет жизнь творцов и мешает им создавать и реализовывать проекты. Поэтому можно опасаться, что широкое использование методов измерения ограничит и обеднит культурную сферу. Такую позицию высказал Леонид Тарасов директор и учредитель Центра социокультурной анимации «Одухотворение».
«Нам не всегда нужно оценивать эффект от нашей деятельности, за короткий период это просто невозможно, и если донор вводит такую оценку, мы в ней тонем, — объяснил Леонид Тарасов. — С другой стороны, замеры необходимы, например на длительных, сложных комплексных проектах, которые существуют на волонтерских началах. В этом случае мы должны попадать в запросы как участников, так и спонсоров, и такая оценка очень сложна, но необходима — она дает возможность развиваться самостоятельно и ставить цели. Поэтому крайне важно сделать оценку не нагрузкой для организаторов культурных инициатив, а стимулом для развития».
Частично согласна с ним и Елена Коновалова, руководитель направления в Фонде Тимченко. Она считает, что для выработки общих критериев оценки каждому донору нужно четко определить собственные цели и задачи, которые у разных фондов могут сильно отличаться.
«Есть ли нужда оценивать проект? — задается вопросом Елена Коновалова. — Конечно, интерес есть у всех, но мы не должны навязывать слово „оценка“, лучше смотреть, на что мы повлияли. Это очень важный момент — у каждого донора есть своя специфика, которая выражается в том, что и в чем он хочет поменять, в каком направлении нужно производить изменения. Например, для нас важно изменять качество жизни людей, поэтому мы смотрим насколько это повлияло на них, используя теорию изменений и выстраивая цепочку результатов. И осознавая, что ждать результатов быстро невозможно».
Однако Эльвира Гарифулина, программный директор фондов «Свет» и «Абсолют Помощь», уверена, что возможность прогнозирования и адекватной оценки всех эффектов творческого проекта важна и для доноров, и для авторов творческих проектов.
«Нам нужно найти универсальные реперные показатели планируемых социальных эффектов, что очень важно и для доноров, и для организаций-инициаторов культурных проектов, — считает Эльвира Гарифулина. — В начале творческая команда может не всегда понимать, что оценка проектов будет полезна, прежде всего, им самим. Но передовые доноры вкладывают ресурсы в коммуникацию такого подхода и стараются гибко подходить к выбору системы показателей. Доноры дают свободу для творцов, но также нам нужно понимать как культурные проекты помогают решать наши задачи».
Активное участие в дискуссии приняли также Екатерина Светличная, генеральный директор Центральной универсальной научной библиотеки имени Некрасова, поделившаяся опытом работы с государственными структурами, Николай Троцкий, заместитель директора БФ «Искусство, наука и спорт», отметивший важность и сложность проблемы с точки зрения донора и Ксения Полетаева, руководитель социокультурных проектов БФ «ОМК-Участие», подчеркнувшая важность аналитического подхода в работе фондов.
Итог оживленной дискуссии подвела Эльвира Алейниченко, куратор программы «Музеи Русского Севера», директор Центра управления социальных инноваций GrantRafting.
«Нужно чаще встречаться и для этого должны быть постоянные площадки, — подчеркнула Эльвира Алейниченко. — Очевидно, что оценка проектов нужна, но далеко не все доноры имеют ресурсы, которые можно направить на нее, а не на творческие инициативы. Чем больше будет возможностей для объединения усилий в этом направлении и выработки общих подходов, тем лучше мы будем понимать, что усиливает эффекты нашей работы, какая инфраструктура поддержки нам всем нужна и на что мы должны обращать внимание в первую очередь».
Хотя участники сессии не пришли к единому мнению, все согласились с важностью поднятых вопросов и договорились продолжить обсуждение, в том числе — в рамках проекта ЯККИ.
12 октября 2023 года в московском общественном центре «Благосфера» состоялся воркшоп «Планирование и оценка социального воздействия», который прошёл в рамках VII Конференции «Фабрика пространств. Территория» и межрегионального форума «Яркие краски креативных индустрий» (ЯККИ). Его участники в интерактивном режиме попробовали себя в качестве экспертов — оценщиков культурных инициатив и получили практический опыт прогнозирования, измерения и оценки социокультурного воздействия творческих проектов. В воркшопе участвовали около 80 представителей творческих проектов.
Мероприятие включило в себя изучение международных и отечественных наработок в сфере оценки креативных инициатив, их обсуждение, а также практическую часть. На ней под руководством модераторов — экспертов форума «Яркие краски креативных индустрий» — участники собирали логическую модель, которая служит основой для планирования и оценки конкретного примера: деятельности муниципальной библиотеки в небольшом наукограде с технопарком, ставшей центром социального взаимодействия для разных поколений.
«Фактически, наше мероприятие стало инновацией, пробой пера для создаваемой платформы. И несмотря на экспериментальный формат, мы увидели острый интерес к нашему начинанию — количество участников приятно удивило, — делится Ольга Евдокимова, исполнительный директор АНО «Эволюция и Филантропия, соорганизатор мероприятия. — Хотя присутствующие не сразу включились в процесс, активность порадовала: в ходе воркшопа коллеги не только использовали предложенные нами инструменты, но и инициировали массу интересных идей — они обязательно войдут в инструментарий оценки, который мы формируем. Думаю, массовая практика и внедрение наработанных в результате таких мероприятий методов поможет создать общий профессиональный язык, понятный как создателям творческих проектов, так и экспертам, меценатам, который сделает креативный процесс более результативным и эффективным. Безусловно, мы будем продолжать развивать эту тему: пробовать новые подходы, искать новые формы взаимодействия с представителями культурного сообщества».
Проблемы не только адекватной оценки, но и формирования общей понятийной базы для всех участников творческой деятельности давно волнуют профессиональное сообщество. Поэтому задумку и результат воркшопа, а также проект ЯККИ в целом по достоинству оценили организаторы конференции и специалисты в сфере культуры.
«Довольно часто случается, что творческие команды и бизнес-партнёры говорят на разных языках и по-разному видят ожидаемый результат деятельности, — говорит директор по коммуникациям и стратегическому развитию центра «Благосфера» Елена Темичева, центр «Благосфера». —Использование общих методов оценки культурного воздействия поможет во многом сблизить позиции и “на берегу” договориться о тех критериях, по которым обе стороны смогут оценить результаты. При наличии понятной технологии оценки, подразумевающей заложенные на этапе проектирования социокультурной инициативы показатели и способы сбора информации для их формирования, можно обойтись даже без экспертной поддержки. Но пока мы говорим об этапе внедрения оценки социокультурного воздействия как практики, конечно, нужны эксперты и, что еще важнее, амбассадоры этого процесса».
Согласна с экспертом и Екатерина Светличная, генеральный директор Центральной универсальной научной библиотеки имени Н.А. Некрасова: «Как просчитать ожидаемый эффект от вложения средств в то, что не будет приносить дохода, но изменит жизнь в сообществе? Наличие прозрачных механизмов оценки способно облегчить диалог мецената и творца, помочь органам власти в планировании культурных стратегий».
Организатор воркшопа — межрегиональный форум «Яркие краски креативных индустрий», получивший грант Президентского фонда культурных инициатив, — своей целью ставит формирование общероссийской дискуссионной платформы, где будут инициироваться, обсуждаться и внедряться в практику наиболее эффективные методы оценки креативных инициатив через измерение их социокультурного воздействия.
Модераторами мероприятия стали эксперты форума «Яркие краски креативных индустрий»:
Наталья Сергиевская, генеральный директор Фонда «Будущее время», эксперт-консультант АНО «Эволюция и Филантропия»;
Инга Пагава, консультант по организационному развитию НКО, фандрайзингу, филантропии и оценке благотворительных программ;
Ольга Евдокимова, исполнительный директор АНО «Эволюция и Филантропия».
Конференция «Фабрика пространств», которую в седьмой раз организовал центр «Благосфера», традиционно является местом выработки общих стратегий развития общественных пространств различных типов, призванных стимулировать социальную активность граждан.
