От оценки творческих проектов — к развитию культуры оценки: итоги проекта «Яркие краски креативных индустрий»

30 октября состоялась итоговая онлайн-встреча проекта «Яркие краски креативных индустрий: палитра влияния» (ЯККИ). Команда представила результаты работы, обновлённую базу знаний, Методологию ценностно ориентированной оценки творческих проектов, Сборник кейсов и выводы внешней оценки самого ЯККИ. Встреча стала возможностью подвести итоги и обсудить, как использовать созданные материалы и развивать практику оценки в сфере культуры (презентация).

Проект ЯККИ, реализованный при поддержке Президентского фонда культурных инициатив, объединил творческие команды, специалистов по оценке, исследователей и представителей культурных организаций. Его главная задача — помочь увидеть и обоснованно оценить результаты творческих инициатив, которые не сводятся к числу зрителей, проведённых мероприятий и созданных произведений. Особое внимание на новом этапе проекта уделялось социокультурным результатам и ценностному влиянию.

От практики оценки — к накоплению знаний

О масштабах проделанной работы рассказал Сергей Мартыщенко. На новом этапе ЯККИ оценку при поддержке АНО «Эволюция и Филантропия» и привлечённых экспертов прошли семь творческих проектов, ещё шесть — при участии вузов. В рамках партнёрских инициатив оценивались и другие проекты. С учётом первого этапа ЯККИ опыт оценки накоплен примерно по 30 творческим проектам.

Практическая работа позволила существенно расширить методическую базу. Только на новом этапе подготовлены 53 инструмента сбора и анализа данных и 31 инструмент планирования оценки. Среди них — не только привычные анкеты и интервью, но и креативные способы получения обратной связи, учитывающие художественную специфику проектов и особенности взаимодействия с аудиторией.

Важной составляющей ЯККИ стал профессиональный диалог. В региональных мероприятиях приняли участие 477 человек, в федеральных — более 360. К работе были привлечены около 20 экспертов различных направлений и пять вузов.

Что показала внешняя оценка ЯККИ

Отдельной темой встречи стали результаты внешней оценки проекта, которую провела Елена Андреева. Исследование включало 13 полуструктурированных интервью и 35 анкет, заполненных представителями творческих команд, экспертами и участниками мероприятий.

По представленным на встрече выводам, творческие команды высоко оценили полезность полученного опыта. Участники стали лучше понимать возможности оценки и увидели, как её результаты могут помогать в развитии проектов.

Одним из важных результатов стала востребованность практико-ориентированной модели ЯККИ: специалисты по оценке работали вместе с творческими командами над конкретными вопросами, помогали уточнять ожидаемые изменения, анализировать собранные данные и обсуждать выводы.

При этом внешняя оценка показала, что интерес к новым методам ещё не означает их устойчивого применения. Для закрепления полученного опыта необходимы дальнейшая практика и экспертная поддержка.

Особого внимания требует оценка ценностного влияния творческих проектов. Чтобы глубже понять происходящие изменения, необходимо сопоставлять ценностный замысел авторов с тем, как произведения и события воспринимаются аудиторией, какие смыслы зрители в них находят и как этот опыт отражается на их представлениях и отношении к окружающему миру. Важной задачей остаётся и изучение отсроченных эффектов культурного участия.

Методология ЯККИ: ценностный взгляд на оценку

Ольга Евдокимова, исполнительный директор АНО «Эволюция и Филантропия», представила два взаимосвязанных документа — Резолюцию по оценке социокультурного влияния творческих проектов и разработанную в её развитие Методологию ЯККИ.

Резолюция формировалась на основе профессиональных обсуждений, прежде всего семи региональных дискуссий, а также федеральных и экспертных встреч. Она отражает общие принципы, подходы и направления развития оценки в сфере культуры.

Методология развивает эти положения, предлагая ценностно ориентированную рамку оценки творческих проектов. В её основе — три взаимосвязанных аспекта: ценности самой оценки, ценность проекта для разных заинтересованных сторон и ценностное влияние творческого проекта.

Такой подход предполагает внимание не только к достигнутым изменениям, но и к тому, как организована оценка, чьи интересы и представления о ценном учитываются, на каких основаниях формируются выводы.

Разработанная Методология — основа для профессионального осмысления и обоснованного выбора оценочных решений с учётом специфики культуры. Её предстоит обсуждать, апробировать и развивать. В дальнейшем на её основе планируется подготовить более прикладные материалы для творческих команд.

Новая база знаний: от результата к инструменту оценки

Одним из центральных событий встречи стала демонстрация обновлённой базы знаний ЯККИ. Её представила Ольга Заводилкина.

Главная особенность нового ресурса — взаимосвязь материалов. Пользователь может начать знакомство с конкретного творческого проекта, интересующего социокультурного результата, ценности или инструмента оценки и переходить между связанными материалами.

Например, Банк результатов позволяет найти интересующую область влияния, посмотреть возможные формулировки результатов и показателей, а затем перейти к реальным кейсам и инструментам, использованным для их оценки.

Карточки инструментов содержат не только описание и рекомендации по применению, но и сведения об ограничениях, рисках и связи конкретных позиций инструмента с оценочными вопросами и показателями. Таким образом, база помогает проследить логику оценки — от вопроса, на который требуется ответить, до получения необходимых данных.

На встрече была показана рабочая версия базы, содержащая 20 кейсов, 118 инструментов и материалы, связанные с 17 ценностями.

В дальнейшем планируется добавить шаблоны, методические материалы и пользовательские маршруты, которые помогут творческим командам, оценщикам и донорам ориентироваться в ресурсе в зависимости от своих задач.

Участники также обсудили возможность апробировать базу знаний вместе с командами, готовящими грантовые заявки. Это позволит проверить, насколько ресурс удобен и полезен в реальной практике, и учесть пользовательский опыт при дальнейших доработках.

Восемь историй о том, как оценивали творческие проекты

Ещё один представленный продукт — сборник «Социокультурные и ценностные эффекты: опыт оценки творческих проектов». О работе над ним рассказала Татьяна Арчакова.

Восемь кейсов показывают, как оценка проводилась в разных культурных контекстах: какие вопросы ставили команды, как выбирали методы, собирали и анализировали данные, какие выводы получили и с какими ограничениями столкнулись.

Важной задачей авторов было сделать сложный профессиональный материал доступным не только специалистам по оценке, но и представителям творческих проектов. Поэтому кейсы объединяет общая структура, а особое внимание уделено наглядному представлению инструментов, реальным примерам и практическим рекомендациям.

В каждом кейсе рассматриваются не только результаты оценки, но и основания доверия к выводам, трудности и профессиональные находки. Отдельное место занимают креативные способы сбора данных и представления результатов.

Сборник задуман как самостоятельное издание и одновременно как часть общей системы знаний ЯККИ, связанная с материалами сайта.

Продолжение следует

На встрече также представили видеоматериалы о творческих проектах, прошедших оценку. Один из примеров — фестиваль «Пушкин без границ», организованный музеем-заповедником А. С. Пушкина «Болдино». В видео представители проекта рассказали, как оценка помогла проверить, достигает ли фестиваль поставленных целей, и получить данные для дальнейшего развития.

Итоговая встреча показала, что за время реализации ЯККИ удалось накопить значительный практический опыт и приступить к его систематизации: от отдельных оценочных исследований — к общей методологии, базе знаний, сборникам кейсов и профессиональному обсуждению результатов.

Впереди — апробация Методологии, развитие базы знаний, подготовка прикладных материалов и продолжение взаимодействия с творческими командами и экспертным сообществом.

Проект завершает очередной этап, но работа по развитию культуры оценки социокультурного и ценностного влияния продолжается. Созданные материалы и профессиональные связи становятся основой для дальнейшей совместной работы — чтобы оценка помогала рассказывать о результатах творческих проектов и лучше понимать их значение для людей, сообществ и культурной жизни.

Материалы проекта размещаются на сайте «Яркие краски креативных индустрий».

Проект «Яркие краски креативных индустрий: палитра влияния» реализуется при поддержке Президентского фонда культурных инициатив.