Разные ракурсы к системному анализу Инклюзивной среды

14 апреля на V Научно-практической конференции «Ценность каждого»: преодоление исключенности» был представлен прототип системной модели развития инклюзивной среды, которая объединяет три ключевых методологии: анализ динамики обратных связей, учет системной травмы и социально-поведенческие изменения. Модель разрабатывалась БФ «Вклад в будущее» совместно с АНО «Эволюция и Филантропия».

Начиная сессию Инна Ширшова, Благотворительный фонд «Вклад в будущее» сказала, что Фонд инвестирует в самые разнообразные программы развития Инклюзивной среды, которые находятся  на разных этапах пути семьи с особенным ребенком и Фонду важно понимать , как инвестиции в одно направление могут повлиять на развитие другого.

Презентацию модели провели О.Евдокимова, исполнительный директор АНО «Эволюция и филантропия», и О. Заводилкина, старший научный сотрудник ФГБУ ИИДСВ РАО, эксперт центра доказательного социального проектирования МГППУ (презентация).

Ключевые моменты, важные для понимания контекста и особенностей представляемой модели из выступления О.Евдокимовой:

1)  Во-первых, эта задача стояла в рамках нашего сотрудничества с Фондом по развитию методики МОРСЗ. Эта методика сама по себе довольно инновационная, не самая простая и она предполагает использование Деревьев проблем, логических моделей и т.д.  И количественное измерение проблематики. И изначально задача стояла как создание Дерева проблем для направления инклюзивной среды, в его, скажем так, классическом виде.  

2) Когда мы приступили к выполнению этой задачи, то столкнулись с серьезным методологическим вызовом. Инклюзивная среда — это чрезвычайно сложная, динамическая система с множеством взаимосвязанных и взаимодействующих на разных уровнях акторов. Традиционные подходы анализа и визуализации здесь не работают, поскольку не позволяют уловить и отобразить  всю сложность и динамику происходящих процессов.

3) И нам пришлось  осваивать принципиально новые инструменты системного мышления и системного подхода. Мы, конечно, изучали соответствующий зарубежный опыт, но сами руками никогда не делали. Более того, нам не удалось найти какие-то российские аналоги, возможно они есть, но у нас было довольно ограниченное время на все 2-3 месяца на все. Таким образом, для нас  это был одновременно сложный и увлекательный такой пилот и мы благодарим лично Инну Ширшову и Екатерину Ядову  за уникальную возможность и сам Фонд в целом за лидерство в вопросах социальных  и управленческих инноваций  по развитию Инклюзивной среды.  Вообще, очень хорошо для сектора, когда есть частные и корпоративные Фонда, которые берут на себя  определенные риски, потому что без них невозможны никакие системные изменения.

 4) При этом мы придерживаемся позиции, что системные изменения можно рассматривать по-разному — от реального опыта до научных теорий. Все подходы полезны, просто смотрят на систему под разным углом. Но для старта важно было выбрать какой-то один ракурс и это был конечно ракурс Фонда. Я сейчас вот говорю конечно, но на практике этот этап согласования ракурса оказался если не самым сложным,  то как минимум самым длительным.  

5) В итоге у нас получился такой методологический бриколаж. Мы остановились на популярном системном подходе « 6 вод системеных изменений» (вот он на рисунке представлен). Он специфичен для Инклюзивной тематики и  предусматривает  анализ системы одновременно на 3-х уровнях: это т.н структурный уровень ( обычно здесь сосредоточены усилия анализа). Но мы постарались уйти  на 2 уровня глубже , то есть на уровень взаимодействий и на уровень ментальных моделей. Для этого и для учета инклюзивной специфики дополнительно применили еще 2 методические рамки  — травмо-информированный подход и методология социальных и поведенческих изменений, рекомендованная ЮНИСЭФ.

6) Для визуализации этих сложных взаимосвязей мы использовали специальные инструменты — диаграммы причинно-следственных связей (CLD).  Вообще Петли обратной связи – это ключевой механизм в системной анализе, помогающий понять динамику систему и выявить ключевые точки воздействия. И также мы попытались использовать  диаграммы запасов и потоков (SFD), но это инструмент больше для количественного моделирования и мы пока вглубь него  не пошли, это м.б. следующим шагом.  

7) На основе этого анализа мы создали прототип модели, который является только началом пути и требует осмысления, корректировок и дальнейшего развития. Мы осознаем его ограничения, прежде всего, сложности восприятия особенного с первого раза, да и не с первого тоже. Вообще нелинейная  визуализация требует сопровождающего нарратива. Кроме того, пока нет общепринятого у нас в секторе глоссария для описания таких систем, что добавляет сложности в коммуникации.

8) Сейчас мы находимся на важном этапе верификации модели. Через диалоги с различными стейкхолдерами мы наполняем ее доказательной базой, уточняем гипотезы и ищем точки роста. При этом, повторюсь,  мы понимаем, что у разных акторов могут быть свои ракурсы восприятия системы, и это и нормально и правильно. И мы надеемся, что представляемая модель, а возможно будут еще и другие модели, станет общим пространством для критического осмысления и сбора доказательств, что будет способствовать  развитию инклюзивной среды в целом.

Ольга Заводилкина представила подробно алгоритм системного подхода к анализу Инклюзивной среды и отдельно показала на примере, как работают петли обратной связи при анализе ключевой точки «Школьное образование» и как находить рычаги воздействия. В заключении Ольга представила варианты развития Подхода и его использования.

И.Дуденкова, кандидат социологических наук, декан факультета социальных наук МВШСЭН, предложила более четко продумать , как связана представляемая система и внешняя среда. Один из основных обсуждаемых вопросов — где граница система?

Е. Ярская-Смирнова, доктор социологических наук, профессор, заведующий Международной лаборатории исследований социальной интеграции НИУ ВШЭ, отметила: «Очень хорошо, что в системе переплетена статика и динамика», и предложила усилить акцент на работе с неравенством и с «динамикой власти и представленности семей с ЛСИ». Для того, чтобы придать этому подходу больше доказательности и практичности, необходимо разрабатывать критериальные шкалы, определяющие необходимый уровень поддержки со стороны акторов.

А. Маньшин, старший специалист по мониторингу и оценке проекта «Все получится!», член Правления АСОПП, отметил практическую пользу представленной модели, которую он видит, прежде всего, в коммуникационной составляющей. Комментируя диаграмму с анализом трудоустройства, Александр предложил конкретные корректировки для фактора «альтернативное трудоустройство».

Ю. Богданова, руководитель направления КСО Кэпт, член попечительского совета БФ Кэпт, остановилась на важности понимания стрессовых факторов, упомянула важность анализа факторов взаимодействия людей с инвалидностью и общества и экономических расчетов.

Самсонова Е.В., к.псих.н.. вед.н.сотрудник Федерального центра по развитию инклюзивного общего и дополнительного образования ФГБОУ ВО «Московский государственный психолого-педагогический университет», сфокусировалась на вопросе «Что есть инклюзивная среда вообще и для каких детей она выстраивается?». Фактически Елена предложила сменить ракурс с положения семей с ОВЗ на другой, поставив в центр качество школьного образования со всем его многообразием.

А. Мошкин, председатель РООРДИ «Дорогою Добра», г. Киров, рассказал о том, как в их НКО обеспечивается бесшовный путь семьи.

Участвующие в зале слушатели из регионов подчеркнули, что важно оставить пространство для доработки модели и для учета локального контекста, а также предложили свою помощь в этом вопросе.

Cсылка на видео.

Завершился проект «Построение системы МиО программы «Семейная школа» организации БФ «Дети ждут»

Проект «Построение системы МиО программы «Семейная школа» организации БФ «Дети ждут» реализовывался АНО «Эволюция и Филантропия» с 10 сентября 2024 по 1 марта 2025 при финансовой поддержки Фонда Потанина.

Цель проекта — построить систему МиО для модели «Семейной школы», которая предполагается к дальнейшему тиражированию.

Ключевые активности:

  1. Проведение серии методических вебинаров и формирование системы мониторинга и оценки программы.

Темы вебинаров:

  1. Краткое ведение в оценку программ
  2. Теория изменений. Практическая работа на Miro. Определение объекта оценки — проблемы, результаты, гипотезы 
  3. Анализ стейкхолдеров, уровень подотчетности. Анализ внешней среды
  4. Логическая модель, терминология, типы систем, включая анализ стейкхолдлеров
  5. Показатели. Анализ стейкхолдеров. Логическая модель с показателями
  6. Методы сбора данных
  7. План сбора данных.

В результате была разработана Теория изменений с гипотезами и логическая модель с показателями.

2. Оказана поддержка на этапе разработки инструментария. Подготовлены рекомендации по инструментарию для сбора данных. Оказана консультационная поддержка на этапе сбора данных. 

Методология оценки Семейной школы

Для оценки эффективности Семейной школы был разработан комплексный план сбора данных, включающий различные методы исследования. В рамках этого плана были составлены гайды для интервью с детьми, родителями и педагогами, а также анкеты для каждой из этих групп. Основными оценочными вопросами были достижение социальных результатов, определение внутришкольных факторов, влияющих на успеваемость и самооценку детей, а также выявление групп детей, для которых обучение в Семейной школе наиболее эффективно.

3. В декабре 2024 — феврале 2025 сотрудники БФ «Дети ждут» самостоятельно осуществили сбор данных от учеников, родителей и преподавателей школы. Всего было опрошено 32 ученика, 27 родителей и 12 педагогов.

4. Для анализа данных с участниками проекта были проведены методические вебинары по количественному анализу и разработана структура базы данных. Участники в пилотном режиме проанализировали некоторые социальные результаты.

5. Заключающим этапом проекта была офлайн встреча, во время которой участники проекта дали обратную связь, поделились тем, что было наработано во время проекта, а также составили планы на ближайшее время по развитию системы МиО.

6. Реализация проекта сопровождалась мониторингом и оценкой. Были проведены входные тестирования и определение мотивации участников, а в конце были проведены финальные опросы.

Отчет

Соответствие ожиданиям

Большинство участников отметили, что проект соответствовал их первоначальным ожиданиям -на 75-100%, что указывает на высокую степень удовлетворенности.

Достижение персональных целей

Участники в основном достигли своих персональных целей участия в проекте. Оценки варьировались от 80% до 90% достижения целей, что свидетельствует о высокой эффективности проекта.

«На 9 из 10 я поняла для чего оценка, и приняла это и ее необходимость. Понимаю как и зачем ее делать, кого приглашать для сотрудничества и что спрашивать, удалось понять, как это поможет при развитии проектов».

Приобретение знаний и навыков

Респонденты отметили приобретение конкретных знаний и навыков, включая:

  • Умение выбирать группы для анализа
  • Подбор методик и анализ результатов
  • Формулирование оценочных вопросов
  • Проведение опросов и интервью

«Формулирование оценочных вопросов, проведение опросов и интервью, базовые инструменты анализа данных».

«Знания в области выбора предмета оценки, понимания ожиданий и технологии работы с результатами и понимание для, чего и как их использовать».

Планы по применению знаний

Участники планируют применять полученные знания в различных аспектах своей работы:

  • При создании новых проектов и улучшении существующих
  • Для проведения регулярных мероприятий по мониторингу и оценке
  • При подготовке материалов уроков и домашних заданий
  • Использование результатов исследований для подготовки учебных материалов
  • Улучшение распределения ресурсов
  • Оценка эффективности и развитие проектов

«Периодически проводить интервью детей и анкетирование родителей по важным вопросам школьного процесса».

«При создании новых проектов и улучшении уже существующих для понимания эффективности деятельности и поиска вариантов развития проектов».

Области для дальнейшего развития

  • Анализ данных
  • Работа со статистическим инструментарием
  • Верификация практики

Изменения в результате проекта

Участники отметили положительные изменения:

  • Улучшение взаимопонимания между службой сопровождения и школой
  • Формирование общего понятийного аппарата
  • Ускорение управленческих процессов
  • Повышение интереса к благополучателям

«Появилось больше взаимопонимания между службой сопровождения и школой, общий понятийный аппарат, что в целом оздоравливает атмосферу в коллективе и убыстряет управленческие процессы. Лично для меня это важно, т.к. по своим функциональным обязанностям я отвечаю за оперативное управление и внедрение новых технологий в работу».

«Появился еще больший интерес к благополучателям и хочется еще включеннее с ними работать».

Неожиданные результаты проекта

  • Интерес к сбору данных и их анализу
  • Командная работа

Полезность проекта

Большинство участников высоко оценили полезность проекта как для себя лично, так и для организации в целом. Оценки варьировались от 9 до 10 из 10, что указывает на высокую ценность проекта.

Рекомендации по улучшению:

  • Увеличение количества встреч
  • Привлечение большего числа участников
  • Больше внимания практической работе и разбору с экспертами

Рекомендации коллегам

Участники с высокой вероятностью (8-10 из 10) порекомендовали бы участие в подобном проекте своим коллегам из других некоммерческих организаций.

  • 50% респондентов — 10 баллов
  • 50% респондентов — 8 баллов

Таким образом, основываясь на ответах участников, можно сделать вывод, что проект был весьма успешным. Он соответствовал ожиданиям, помог достичь персональных целей, предоставил ценные знания и навыки, и привел к положительным изменениям в работе организации.

Методы вовлечения детей и молодых взрослых с особенностями развития в оценку

Вебинар «Методы вовлечения детей и молодых взрослых с особенностями развития в оценку» был проведен БФ «Абсолют-помощь» 13 ноября 2024

16 октября на конференции АСОПП эксперты обсуждали развитие доказательного подхода в социальной сфере

16 октября на X конференции АСОПП «Развитие оценки в социальной сфере в России: достижения и точки роста» состоялась сессия «Внедрение доказательного подхода на федеральном уровне: стратегия развития консорциума партнерских организаций», на которой представители академического сообщества, государственных и некоммерческих организаций обсудили развитие доказательного подхода в социальной сфере. Провела сессию Татьяна Подушкина, руководитель Центра доказательного социального проектирования МГППУ.

Участники обсуждали, как доказательное проектирование может повысить эффективность социальных программ и улучшить качество социальной работы в целом. Татьяна Подушкина, руководительница «Центра доказательного социального проектирования» МГППУ, представила трехуровневую модель сетевой верификации и поделилась опытом работы инкубатора доказательных социальных практик.

Алексей Газарян, руководитель Аппарата Уполномоченного при Президенте РФ по правам ребенка, рассказал о проблеме тиражирования программ: «не каждая практика, успешная в одном регионе, может быть столь же эффективной в другом. Практики требуют адаптации и гибкости при внедрении на новом месте». Газарян отметил, что такие различия связаны с местными особенностями, что делает процесс распространения более сложным, чем может показаться на первый взгляд.

Игорь Тимофеев, представитель Института дополнительного образования работников социальной сферы Москвы, выделил важную роль грантовых конкурсов в популяризации доказательного подхода среди государственных и некоммерческих организаций. Он отметил, что необходимо вовлекать участников в исследовательскую работу и обучать их научным методам на ранних этапах.

Для успешного распространения доказательного проектирования важна подготовка специалистов. Андрей Некрасов, руководитель Точки кипения МГППУ, рассказал о подготовке специалистов через образовательные программы на базе университета, которые помогают глубже понять доказательный подход и применять его на практике.

Ольга Евдокимова, директор АНО «Эволюция и филантропия», подчеркнула, что образовательные коллаборации должны базироваться на потребностях системы верификации и предложила также обратить внимание на обучение основам доказательного подхода представителей финансирующих организаций. Она отметила, что образовательные коллаборации нужны для повышения уровня знаний специалистов в области доказательных практик   (конкурсы, образовательные программы). Необходимо ответить на вопросы: каким образом можно связать подготовку специалистов к участию в конкурсах и существующие образовательные программы, какие оптимальные стратегии привлечения специалистов к повышению квалификации в области доказательного подхода. Профессионализация специалистов социальной сферы возможна через просвещение и обучение доказательному подходу: разработку разноуровневых образовательных программ по доказательному подходу, развитие синтетической образовательной инфраструктуры для специалистов государственных и некоммерческих организаций сферы детства на основе общей методологии. 

Светлана Гани, заведующая сектором Федерального ресурсного центра психологической службы в системе высшего образования РАО отметила необходимость создания инфраструктуры для независимой оценки социальных практик, включая междисциплинарные исследования и цифровые платформы для обработки данных.

Эльвира Гарифулина, программный директор фонда «Абсолют-Помощь», рассказала, как доказательный подход помогает организациям лучше планировать деятельность, избегать выгорания сотрудников и привлекать больше ресурсов. Это особенно важно для работы с уязвимыми группами населения, где точные данные и научный подход существенно повышают качество помощи.

Екатерина Ядова из фонда «Сбербанк — Вклад в будущее» отметила важность баланса при внедрении доказательного подхода. Глубокая аналитика и научная верификация улучшают результаты, но важно не перегружать социальные организации сложными требованиями. Необходимо сохранить мотивацию и энергию работников, чтобы они могли эффективно реализовывать свои программы, не отвлекаясь на чрезмерные бюрократические процессы.

Видео доступно по ссылке.

При подготовке новости использовался материал, опубликованный на сайте МГППУ.

14 июня в Московском городском педагогическом университете прошла первая экспертная сессия по проблеме оценки социально-ориентированных программ, проектов и инициатив

14 июня в Московском городском педагогическом университете состоялась открытая экспертная сессия «Продукт, результат, воздействие: проблема оценки и измерения социально ориентированных программ, проектов и инициатив».

На площадке МГПУ ведущие эксперты России в области оценки социального воздействия обсудили вопросы, связанные с проблемой измерения импакта проектных инициатив в сфере науки и высшего образования.

На сессии рассматривались следующие вопросы:

  1. Какие этапы работ необходимо выполнить при разработке подхода к оценке социального воздействия от реализации социально-ориентированных практик, проектов, программ и инициатив университета?
  2. Какова специфика оценки проектов негосударственного (НКО) и государственного сектора?
  3. Какова специфика разработки подхода к оценке импакта проектов / программ в сфере образования?
  4. Какова специфика разработки подхода к оценке импакта проектов / программ в сфере науки и технологий?
  5. Возможно ли оценить социальное воздействие проекта после его завершения?

Ключевым направлением экспертной дискуссии стал вопрос создания многоуровневой модели оценки социального воздействия социально-ориентированных проектов, программ и инициатив для российских университетов, включающей образовательную, научно-исследовательскую и общественную миссии вузов.

Ольга Евдокимова, исполнительный директор АНО «Эволюция и Филантропия», предложила проанализировать потребности заказчика проектов внутри вуза и понять, какую пользу должны приносить университетские проекты, возможно ли увеличить данную пользу.

Наталья Гладких, главный редактор журнала «Позитивные изменения», ведущий эксперт центра технологических инноваций института социально-экономического проектирования НИУ ВШЭ, и Владимир Вайнер, заведующий центра инновационных экосистем в социальной сфере института социально-экономического проектирования НИУ ВШЭ, лидер Фонда развития медиапроектов и социальных программ «Глэдвэй» (Gladway Foundation), в качестве подхода к оценке предложили опираться на теорию позитивных изменений и использовать модель создания уникального оценочного профиля (УОП) проекта, адаптировав его под потребности университета.

В качестве важного аспекта разработки и оценки социально-ориентированных проектов университета, а также в контексте стратегии развития проектных инициатив университета Владимир Вайнер обозначил необходимость принятия во внимание контекста третьей миссии, которая характеризуется вкладом в социально-экономическое развитие общества, в том числе через обучение служением.

Владимир Балакирев, консультант по оценке программ в компании «Процесс Консалтинг», отметил важность взаимодействия с заказчиком для определения целей и задач проекта, включая ожидаемое социальное воздействие, которое планируется измерять.

В качестве конкретной рекомендации Ольга Евдокимова предложила провести пилотное оценочное исследование для специально отобранных университетских проектов, в рамках которого создать карту проектов, ранжированных по актуальным критериям. Важным аспектом пилотного исследования должно стать вовлечение заинтересованных сотрудников, например, руководителей проектов и научно-исследовательских групп

Общая рекомендация экспертов состояла в том, что для разработки модели оценки университетских проектов необходимо переходить от кабинетной (теоретической) части исследования к практической (эмпирической), в том числе к проведению интервью со стейкхолдерами проектов для определения конкретных потребностей и направлений их решения.

Более подробно с мнениями экспертов можно ознакомиться в видеозаписи трансляции

Гайд обсуждения доступен в презентации. Видео доступно по ссылке.

7 июня на Петербургском международном экономическом форуме прошла секция «Калькулятор эффективности для НКО»

7 июня на Петербургском международном экономическом форуме прошла секция «Калькулятор эффективности для НКО». Организатором секции выступила Социальная платформа фонда «Росконгресс». Модератором секции выступил Дементьев Иннокентий Андреевич, заместитель генерального директора Фонда президентских грантов

Основная задача секции состояла в том, чтобы обсудить перспективы разработки и внедрения ключевых и комплексных методик по оценке результативности и эффективности деятельности некоммерческих организаций, которые бы учитывали многообразие и специфичность направлений НКО и могли быть доступными в использовании для самих команд социальных проектов. Одним из ключевых вопросов, затронутых на секции, был вопрос о необходимости и возможности разработки ясных, объективных, измеримых и сопоставимых показателях положительного социального и экономического влияния проектов.

Приглашенные спикеры отвечали на поставленные модератором вопросы.

Тополева-Солдунова Елена Андреевна, директор автономной некоммерческой организации «Агентство социальной информации», генеральный директор благотворительного фонда «Доброта севера», председатель комиссии по развитию некоммерческого сектора Общественной палаты РФ, ответила на вопросы, насколько сообщество НКО готово к принятию необходимости постоянной оценки результатов своей работы? Какая динамика в этой части наблюдается по линии Общественной палаты в рамках мониторинга и рейтингования НКО.

Шадрин Артём Евгеньевич, генеральный директор Национального агентства развития квалификаций, директор Института социально-экономического проектирования НИУ «Высшая школа экономики», поделился перечнем инструментов, которые помогают сделать культуру оценки результатов понятной не только для институтов развития, но и для самих НКО. Артем Евгеньевич, в частности, упомянул Теорию изменений, а также рассказал, какие методики оценки результатов могут дать НКО импульс для улучшения своих практик и для более системного взгляда на сами практики.
Александрова Александра Борисовна, первый заместитель руководителя Департамента труда и социальной защиты населения города Москвы, поделилась интересным опытом разработки показателей эффективности использования помещений, выделяемых Департаментом на безвозмездной основе для НКО.
Евдокимова Ольга Анатольевна, исполнительный директор АНО поддержки
и развития инноваций в социальной сфере «Эволюция и филантропия», в своем выступлении затронула тему сопоставимых показателей и рейтингов эффективности и необходимости фокусировки на осмыслении некоммерческими организациями и финансирующими сторонами своей работы.

В частности, в своем выступлении Ольга Евдокимова отметила несколько моментов:

  • Цель НКО – это максимизация  социального воздействия и акселерация социальных преобразований для улучшения качества жизни людей.  В этой связи оценка играет важную роль, которая не сводится к определению только набора показателей, пусть даже ясных.  Более того, фокусировка исключительно на показателях даже вредна, в определенном смысле.
  • Показатели  редко дают возможность принимать решения, направленные на развитие, на обучение, на управление неопределенностью. Фокус должен быть на развитии оценочного мышления, на принятии решений, основываясь на глубоком понимании, как и почему и для кого и в каких обстоятельствах работает программа. Показателями это многообразие не охватишь. В сложном мире оценка играет новую роль: не столько для подсчета эффекта, сколько для прогнозирования и для корректировки и максимизации социальных преобразований.  Сейчас важен акцент на кастомизацию, гибкость, уникальность.  Трудность создает отсутствие бенчмарков для сравнения.
  • Чтобы оценка становилась более массовым явлением,  более зрелым процессом в НКО, необходимо,  с одной стороны,  снижать  методологические барьеры (больше простых доступных руководств и материалов,  примеров и  площадок для обмена). С другой стороны, необходимо сохранять профессиональный уровень и профессиональный дискурс, в том числе этические стандарты, особенно при вовлечении благополучателей.  
  • Нужны независимые верификации социальных результатов.  ВУЗы должны включаться  более активно и профессионально. Важны осмысление, обобщение, теоретические  и практические рамки. В исследования могут включаться студенты.
  • IT-технологии, в том числе, искусственный интеллект, будут в некой перспективе снижать методологические барьеры. Кроме внешних барьеров, НКО надо уметь управлять изменениями внутри команды, которая будет сопротивляться новациям, связанными с оценкой. Нужны стимулы для НКО  со стороны донорского сообщества, но и оно само должно становиться более зрелым. 
  • В целом донорское сообщество остается довольно незрелым в плане оценки программ. Культура принятия решений о социальном инвестировании  на основе доказательств  остается довольно низкой. Подход к оценке влияния донорского сообщества должен соотноситься со стратегией социального воздействия, а мало у кого она разработана в виде, пригодном для создания полезной модели оценки. Отсутствует внятная Теория изменений, например.  Многие доноры заявляют о том, что их стратегия предполагает системные изменения.  Но мало у кого есть внятное описание, что такое системное воздействие и его оценка.
  • Это не означает, что показатели вообще не нужны. Могут быть наборы показателей на разных уровнях и для разных моделей воздействия, для разных стейкхолдеров, для разных целей. Нужно использовать показатели верхнего (национальный уровень), среднего (на уровне тематики (приемные семьи), нижнего (на уровне организации). Необходима кластеризация моделей воздействия: типовые модели оценки, включая показатели.  Стоимостные оценки  (оценки социально-экономической эффективности) очень нужны, но у нас практически отсутствует необходимая  статистика.
  • Растет запрос со стороны общества на рейтинги, рэнкинги.

Гурцкая Диана Гудаевна, народная артистка России, художественный руководитель «Центра социальной интеграции Дианы Гурцкая», председатель комиссии по доступной среде и развитию инклюзивных практик Общественной палаты РФ, рассказала о том, как центр проводит оценку и отслеживает долгосрочные результаты своей работы.
Маковецкая Дарья Тимофеевна, руководитель ресурсного центра развития добровольчества Республики Карелия, член Совета Ассоциации волонтерских центров, поделилась своим опытом исследований развития добровольчества.
Афрова Елена Викторовна, директор центра реабилитации животных «Верность», рассказала об успехах в масштабировании практики, и о том, какие есть индикаторы для понимания, что центр движется в правильном направлении.
Бесшапошникова Екатерина Николаевна, руководитель образовательных программ, Фонд «Наше будущее», ответила на вопрос, получается ли у социальных предпринимателей выразить экономически прогнозируемые ими социальные результаты и эффекты, уложить их в бизнес-модель.

Видео секции доступно по ссылке.

Развитие общей базы знаний в области МиО для кризисных центров было представлено на встрече 20 мая

20 мая в Москве прошла рабочая встреча руководителей и юристов организаций, имеющих в своем составе кризисные центры временного проживания для женщин с детьми, на которой Ольга Евдокимова рассказала о развитии общей базы знаний в области МиО для Кризисных центров. В частности, Ольга рассказала о наработках сообщества практиков в сфере оценки , которое развивалось в рамках проекта, реализованного АНО «Эволюция и Филантропия» в 2021- 2022 годах, представила онлайн-сервис «ПИОН» и продемонстрировала собранные там инструменты для кризисных центров. Также были представлены возможности обучения на онлайн-курсе «Оценка проектов и программ в сфере детства», очередной старт которого запланирован на лето 2024 года и сервисы проекта «Больше историй«, направленном на расширение применения практик вовлечения благополучателей в деятельность НКО сферы детства через использование сторителлинга для оценки программ (презентация).

Во время мероприятия участники встречи обсуждали вопросы оценки эффективности работы Кризисных центров. Был согласованы следующие ключевой показатель социальной эффективности: Количество решенных случаев (ребенок/cемья в безопасности, ребенок сохранен в семье и пр.) за определенный срок и за определенную сумму. При формулировании такого ключевого показателя сохраняется вариативность решаемой проблематики и учет сложности кейсов. При этом учитываются доступные для организации ресурсы. Что такое решенный случай организация может решить самостоятельно, определив необходимый минимум решенных задач с заданным качеством. Отдельно обсуждался вопрос — как оценить эффективность, если ребенок не смог остаться в семье. Было предложено оценивать качество работы и меру снижаемого вреда.

Критерием устойчивости может служить — количество семей, в которых результат сохраняется, например, в течение года или другого срока, определенным Кризисным центром. При этом важно обращать внимание и на устойчивость самой организации , на ее возможность быть эффективной в течение продолжительного времени. Для этого нужны показатели организационной и финансовой устойчивости. В разрезе этого обсуждался вопрос о роли информационной открытости в работе КЦ и об управлении «потоком клиентов». Было также отмечено, что для разных стейкхолдеров на разных этапах будут полезны разные наборы индикаторов

Какими инструментами можно пользоваться, чтобы измерять эти показатели?

  1. Административная отчетность (планы развития, например)
  2. Интервью на входе и выходе, сторителлинг через какое-то время, наблюдения администраторов и специалистов.
  3. Самооценка Кризисного центра, экспертные оценки и бенчмаркинг.

Какие сложные вопросы озвучивали участники?

  1. Границы подотчетности КЦ
  2. Решенный кейс или субъективное благополучие женщины
  3. Отсутствие бенчмарков, позволяющих сохранять ценность многообразия
  4. Вклад женщины и вклад КЦ в решение проблемы
  5. Как работать с негативной обратной связью
  6. Влияние показателей эффективности на гос. задание

На встрече был также проведен опрос участников о состоянии МиО в кризисных центрах, в котором приняли участие 15 специалистов.

33% ответили, что у них в организации был значительный прогресс в области МиО за последний год, 47% — что прогресс был незначительным, 13% сообщили, что прогресса скорее не было.

53% респондентов сообщили, что им скорее актуальная задача по развитию МиО в организации, 40% — что очень актуальна.

17 октября на конференции АСОПП прошла сессия «Анализ данных в оценке проектов и программ»

17 октября в рамках IX конференции АСОПП прошла сессия «Анализ данных в оценке проектов и программ», которую провели Ольга Заводилкина и Ольга Евдокимова.

Ольга Евдокимова рассказала об актуальном состоянии анализа данных для оценки социальных результатов программ и проектов в сфере детства и рассказала о возможностях для развития в этой теме, которые предоставляет АНО «Эволюция и Филантропия», в частности, об онлайн-курсе «Оценка программ в сфере детства» и работе группы «САД» («Статистический анализ данных») (презентация).

Ольга Заводилкина, эксперт АНО «Эволюция и Филантропия», представила кейс «Как формировать группы сравнения на этапе сбора данных и на этапе анализа» на примере исследования «Влияние деятельности НКО на социальную адаптацию детей-сирот: опрос благополучателей», которое проводил БФ «Расправь Крылья!» (презентация). Ольга также рассказала о работе группы САД (презентация).

Елена Лянгузова, РООРДИ «Дорогою добра» Кировской области, рассказала об анализе данных и выборе инструментов для их сбора (презентация).

Марина Ушакова, руководитель МБУ города Челябинска «Центр помощи детям, оставшимся без попечения родителей, «Акварель» рассказала об использовании результатов анализа для развития практики (презентация).

Видео доступно по ссылке.

Система мониторинга и оценки для учебного и сопровождаемого проживания

Вебинар «Система мониторинга и оценки для учебного и сопровождаемого проживания» проведен БФ «Абсолют-помощь» 27 сентября 2023

Доказательный подход в сфере детства был представлен на VII Всероссийской научно-практической конференции «Сохраним семью для ребенка!»

31 мая Ольга Евдокимова, исполнительный директор АНО «Эволюция и Филантропия», выступила с докладом «Доказательный подход в сфере детства – как основа для устойчивости и роста эффективности социальной сферы» на VII Всероссийской научно-практической конференции «Сохраним семью для ребенка!» .

Ольга рассказала о создании необходимой инфраструктуры и пилотирование доказательного подхода в период с 2016 по 2023 гг. Говоря о барьерах, с которыми сталкиваются организации, решившие работать в доказательном подходе, Ольга отметила такие факторы как организационная культура, методические сложности и недостаток компетенций в сфере МиО, затратность и отсутствие доступных и качественных данных. В докладе также освещались вопросы условий для развития доказательного подхода и уделялось внимание доступным ресурсам.

Организатор: Межрегиональная общественная организация по содействию семьям с детьми в трудной жизненной ситуации «Аистенок» ( МОО «Аистенок») основана в 2003 г.

Участники Конференции — руководители и специалисты государственных учреждений, социально ориентированных некоммерческих и религиозных организаций из регионов РФ, имеющих на базе организаций стационары (приюты, шелтеры, убежища и др.) для проживания женщин с детьми в трудной жизненной ситуации.

Конференция направлена на повышение эффективности деятельности в сфере профилактики социального сиротства и помощи семьям с детьми в кризисных ситуациях. Конференция проводится с использованием пожертвования Благотворительного фонда «Абсолют-Помощь».

Презентация доступна по ссылке.