28 октября на конференции Ассоциации специалистов по оценке программ и политик (АСОПП) состоялась дискуссия «Новая физика социального эффекта: от механики контроля к практикам развития». В обсуждении приняла участие Ольга Евдокимова, исполнительный директор АНО «Эволюция и Филантропия». Она подняла вопросы ответственности доноров за результаты собственных программ, противоречий между ожиданиями грантодателей и задачами культурных организаций, а также возможностей новых исследовательских инструментов.
Донорам важно оценивать не только грантополучателей, но и собственный вклад
Одна из центральных тем выступления — роль донора в оценке социальных результатов. По мнению Ольги Евдокимовой, признание необходимости партнёрства с грантополучателями — важный шаг, но недостаточный, если оценка фактически сводится к анализу предоставленной ими отчётности.
«Начинать надо в этом партнёрстве с самого себя», — подчеркнула она.
Донору необходимо исследовать, какой вклад в достижение результатов вносят его собственные действия: организация конкурса, условия предоставления поддержки, требования к отчётности, взаимодействие с грантополучателями. Важно понимать не только то, чего достигли поддержанные проекты, но и то, насколько деятельность самого донора помогает партнёрам развиваться и решать поставленные задачи.
При этом степень участия донора в оценочных процессах грантополучателя должна соотноситься с его компетенциями. Излишнее вмешательство в разработку исследовательских инструментов и анализ данных не обязательно повышает качество оценки.
Культурные проекты: когда ожидания доноров и авторов расходятся
Особое внимание Ольга Евдокимова уделила оценке в сфере культуры, опираясь на опыт проекта «Яркие краски креативных индустрий» (ЯККИ).
В социальной сфере донор и грантополучатель чаще объединены стремлением решить определённую общественную проблему. В культуре ситуация сложнее: для творческой команды главной задачей может быть создание качественного художественного произведения, тогда как донор ожидает общественно значимых изменений.
Это противоречие способно приводить к формальному переосмыслению культурного проекта как социокультурного ради получения финансирования. При этом средства могут выделяться преимущественно на создание продукта или проведение мероприятия, а от команды ожидают доказательств гораздо более широких эффектов.
По мнению выступающей, такое расхождение целей и ожиданий необходимо учитывать ещё при проектировании поддержки и оценке её результатов.
Как исследовать то, что не измеряется обычной анкетой?
Ещё один важный тезис выступления касался самой природы оценки. Её ценность не ограничивается подсчётом участников и фиксацией заранее предусмотренных результатов. Особенно полезной оценка становится тогда, когда позволяет обнаружить неочевидные изменения.
В культурных проектах это прежде всего индивидуальный опыт зрителя. Восприятие произведения может существенно отличаться от авторского замысла, но такое расхождение само по себе не свидетельствует о неэффективности проекта.
Чтобы исследовать переживания, впечатления, вдохновение, удовольствие, доверие и другие трудноуловимые изменения, команда «Эволюции и Филантропии» использует креативные исследовательские инструменты, близкие к проективным методикам.
Они помогают получить информацию, которую трудно выявить даже с помощью хорошо разработанных анкет. Однако возникает следующая методическая задача: как анализировать и интерпретировать разнообразные качественные данные, чтобы на их основе формировать обоснованные оценочные суждения?
Ольга Евдокимова отметила, что опыт применения таких инструментов в культурных проектах уже представляет интерес и для социальной сферы. Вместе с тем перенос подходов между сферами требует учитывать специфику каждой из них, а не просто воспроизводить привычные оценочные решения.
От контроля результатов — к новым знаниям
Выступление Ольги Евдокимовой обозначило несколько принципиальных вопросов для развития оценочной практики: как оценивать собственный вклад донора, как согласовывать разные представления о ценности результатов и как работать с изменениями, которые не укладываются в стандартные формы отчётности.
Общая линия этих вопросов связана с переходом от оценки как проверки выполнения обязательств к оценке как способу получения новых знаний. Именно исследование неочевидных результатов, различий в восприятии и механизмов возникновения изменений позволяет использовать оценку не только для отчёта о проделанной работе, но и для развития программ, проектов и практик поддержки.