Социальные результаты и показатели

21 февраля состоялась первая в 2023 году встреча участников сообщества специалистов-практиков в области оценки программ в сфере детства. Мероприятие проводилось совместно с Точкой кипения МГППУ. Как отметила в самом начале модератор встречи Ольга Евдокимова (АНО «Эволюция и Филантропия») — «Наша задача на сегодня — познакомиться с ключевыми результатами и планами в области мониторинга и оценки (МиО) и сформировать общую тематическую повестку на 2023 год». На встрече присутствовало более 100 специалистов сферы детства (включая тех, кто смотрел трансляцию на Youtube и Вконтакте).

Первая тема была посвящена доказательному подходу. Доказательный подход — является трендом и драйвером для развития социальных практик, особенно в сфере детства, где уже сложилась разветвленная эко-система, состоящая из множества акторов, среди которых сейчас на первый план, как отметила Ольга, «должны выходить ВУЗы, что и происходит в случае с МГППУ».

И выступление Татьяны Подушкиной, руководителя центра доказательного социального проектирования МГППУ, было посвящено итогам сотрудничества Центра, Агентства стратегических инициатив и Министерства просвещения РФ по развитию в 2022 году доказательного подхода (презентация). Татьяна отметила, что в рамках полученного гос.задания от Министерства Просвещения будет продолжена работа по верификации практик в соответствие со Стандартом доказательности и последующее их размещение на Смартеке АСИ в Реестре доказательных практик, а также проведена серия обучающих мероприятий и для экспертов и для разработчиков практик.

В рамках методической работы будет продолжена серия встреч, в частности, 1 марта в 13:30 состоится онлайн-семинар «Диагностические инструменты в технологии наставничества», на котором Вероника Нисоновна Ослон, профессор кафедры «Возрастная психология имени профессора Л.Ф. Обуховой» МГППУ, представит разработанный в рамках гос.задания диагностический комплекс, который может применяться в работе технологии наставничества. Зарегистрироваться для участия в мероприятии можно будет перейдя по ссылке:  https://mgppu.ru/news/12021. Мы приглашаем участников тематической площадки «Социализация подростков и выпускников сиротских учреждений» и всех заинтересованных принять участие во встрече.

Подробная презентация работы Центра и Точки Кипения МГППУ состоится в середине марта, о чем будут дополнительные анонсы.

Далее участники встречи обратились к практическому опыту лидеров-НКО, активных участников сообщества. «Я хочу напомнить, что планы по включению Агентства стратегических инициатив (АСИ) в экосистему доказательности и по созданию на платформе Смартека Реестра доказательных практик, были озвучены около года назад на проектной сессии «Доказательные социальные практики в сфере детства: финансирование и масштабирование» , организаторами которой выступили АСИ, МГППУ, Фонд Тимченко, АНО «Эволюция и Филантропия» и Форум доноров. На этой сессии были представлены практики, получившие по итогам верификаций в 2021 году, когда эту инициативу возглавлял Фонд Тимченко, продвинутый уровень доказательности. И сегодня представители этих НКО кратко поделятся результатами того, чего они достигли за прошедший период и какие у них планы», — отметила Ольга Евдокимова, предваряя выступление следующих спикеров.

Елена Андреева и Антонина Попова (БФ «Волонтеры в помощь детям сиротам», (презентация)) рассказали о результатах развития программ Фонда в области МиО. В частности, в рамках проекта «Теплый дом» проведено исследование факторов результативности работы с мамами и их детьми на базе центра временного
пребывания. Кратко о предварительных результатах этого исследования коллеги уже рассказывали на встрече сообщества по анализу данных в августе 2022 года.

Для того, чтобы более подробно ознакомиться и с результатами и с методологией оценочного исследования, узнать про возможность бенчмаркинга похожих практик, мы приглашаем, особенно участников тематической площадки «Кризисные центры», на встречу 2 марта с 9.00 до 11.00. Регистрация по ссылке, более подробная программа будет в последующей рассылке.

Также среди результатов развития МиО в Фонде — автоматизация учета и хранения данных всех проектов программы «Профилактика социального сиротства»; развитие процессов и инструментария обратной связи от благополучателей. Коллеги являются еще одними из лидеров — поставщиков знаний в нашу базу «Слушай с Пользой!». Инструментарий и кейсы от них по ссылке.

Среди перспективных тем — мониторинг общественного мнения в отношении приемного родительства, его изменение в сторону более принимающего. Планирование и оценка адвокационных практик — будет одной из методологических тем на 2023 год.

Ирина Бобылева, аналитик Центра защиты прав и интересов детей и главный специалист-эксперт БФ «Расправь крылья!», рассказала о результатах и планах передачи практики «Технологии индивидуального сопровождения выпускников детских домов» вместе с разработанной системой МиО.

Елена Лянгузова (Региональная общественная организация родителей детей-инвалидов Кировской области «Дорогою добра») поделилась опытом настройки и поиска наиболее точного инструментария сбора данных от благополучателей.

После этого участники встречи ответили на вопрос о прогрессе в области МиО в своих организациях:

Опыт организаций лидеров — в области МиО подтверждает важность внешней методической поддержки, особенно на этапе становления системы, внутренней культуры, нацеленной на самосовершенствование и систематической многолетней командной работы над процессами МиО.

Далее повестка была посвящена доступности методической базы и экспертной поддержки для развития систем МиО. Тему представила Евдокимова Ольга, АНО «Эволюция и Филантропия» (презентация).

Ольга отметила, что основным фокусом внимания компании в 2023 году в рамках развития культуры и практик оценки в сфере детства явились: рост информированности, мотивации и компетенций специалистов-практиков за счет:

1)проведения онлайн-курса «Оценка программ в сфере детства», который в 2023 году закончило более 50 слушателей и который проводился при партнерстве с Благотворительным образовательным фондом Мархамат, что позволило выдать участникам удостоверения гос.образца о повышении квалификации в объеме 72 часов.

Ольга анонсировала открытие 6-го потока курса в начале апреля — «Пока мы не знаем окончательно всех деталей по поводу нового потока, но предварительную запись открыли». Запись и более подробная информация на сайте.

2) организации встреч сообщества практиков, в которых в 2023 году приняло участие более 200 участников;

Все записи и презентации встреч доступны по ссылке.

3) за счет наполнения методическим инструментарием и практическими кейсами онлайн-сервиса ПИОН (в библиотеках которого собрано около 50 логических моделей и деревьев результатов; более 20 социальных результатов и инструментов; более 60 кейсов; число пользователей — 80 человек) и сопряженной с ПИОНом по API базы знаний «Слушай с Пользой!», на которой предлагаются более 100 инструментов обратной связи от благополучателей сферы детства. Ольга отметила, что в 2023 году фокус внимания АНО «Эволюция и Филантропия» перейдет от роста доступности методической базы к росту ее востребованности. Также в 2022 году было сделано довольно много (28) информационных рассылок про различные анонсы и новации в области оценки, что способствовало росту информированности участников сообщества.

4) Экспертная поддержка в 2022 году проходила по запросам от участников, в частности, несколько раз, были проведены рабочие встречи по созданию проектов Теорий изменений; а также работала в пилотном режиме группа САД (статистический анализ данных).

Участникам встречи было предложено ответить на вопросы о доступности методической и экспертной поддержки:

«Результаты опросов, говорят, что задача с доступностью поддержки в целом решена» — отметила Ольга Евдокимова — «Для тех же, кто только начинает, напоминаю, на онлайн-сервисе ПИОН у нас есть форма записи на консультации (индивидуальные, групповые и пр.). В частности, сейчас проводятся консультации о включении расходов на МиО в бюджет грантовых заявок«.

Далее с краткой презентацией результатов и планов в области МиО выступили представители НКО, которые получили индивидуальную методическую поддержку от АНО «Эволюция и Филантропия» в рамках проекта «Оценка программ в сфере детства: развитие сообществ практиков».

Анна Хегай, БФ «Бюро добрых дел» (Москва) (кейс) выделила распространение системы МиО на другие программы Фонда и особо остановилась на исследовании стратегий трудоустройства выпускников детских домов. «У нас довольно интересная технология, сначала был качественный этап, в результате которого мы выявили несколько факторов, влияющих на успешное трудоустройство. Сейчас идет количественный этап, а на выходе мы надеемся в том числе получить конкретные психологические и социальные показатели, которыми будем измерять эффективность нашей программы.» Результаты исследования будут в конце мая презентованы заинтересованным коллегам.

Анна попросила коллег, кто работает с практиками трудоустройства, заполнить небольшую анкету: опрос

Людмила Нам, АНО «Центр помощи семьям детей с ограниченными возможностями здоровья «Содействие» (Ростовская обл.) (кейс) представляла систему МиО на Всероссийской конференции и рассказала, что «работа идет по плану, сделали 3-й замер. Сейчас приступили к разработке логической модели оценки для программы «Я в группе».»

Гульнара Данильченко , БФ «Звезда» (Казань) (кейс) выделила необходимость постоянных изменений в различных элементах МиО и полезность сбора обратной связи как от специалистов, так и от родителей. Основная задача на 2023 года — визуализация получающихся данных.

Продолжая встречу, Ольга Евдокимова отметила, что АНО «Эволюция и Филантропия» не перестает систематически изучать передовой международный опыт в области оценки и старается определять ключевые методологические аспекты, которые требуют развития на уровне сектора. «Так было и с Теорией изменений, которую мы привнесли в РФ в 2010 году, а сейчас уже это относительно известная практика. Теорией изменений мы продолжили заниматься и в 2022 году, углубляясь в тему «предположений и допущений», а также применяя нехитрые IT-инструменты для того, чтобы ТИ не оставалась просто картинкой, как это часто пока происходит». Также Ольга отметила такие важные методические аспекты как формулирование оценочных вопросов и составление технических заданий. Все эти вопросы требуют пристального внимания оценщиков и могут быть предметом обсуждения на самых различных экспертных площадках, которые в последнее время появляются как ответ на возрастающий спрос на оценку.

Одну из таких площадок представил Владимир Балакирев («Процесс-Консалтинг»), это Клуб PROОЦЕНКУ , в рамках которого обсуждаются различные методологические темы, связанные с оценкой программ, и проводится периодическое обучение.

Продолжая тему важности Теории изменений, выступила Анастасия Декина, БФ развития сопровождаемого трудоустройства Всё получится!», Санкт-Петербург, (презентация) и сразу пригласила всех заинтересованных лиц принять участие в обсуждении Теория изменений (ссылка) Фонда, которая пройдет 27 февраля. Приглашение на инфо-сессию (ссылка). Анализ пилотного интервью с благополучателями (ссылка). Анастасия поделилась планами развития МиО на 2023 год, среди которых , в частности, доработка инструментария для сбора обратной связи от благополучателей и разработка Положения о системе МиО. Всеми этими материалами Фонд планирует делиться с сообществом.

Далее выступили представители пилотной группы САД (Статистический анализ данных). Ольга Заводилкина, эксперт-консультант АНО «Эволюция и Филантропия», куратор группы, презентовала сводные итоги работы двух пилотных групп (презентация) и анонсировала набор на следующий поток, который начнется 10 марта. Анкета для участия в следующей группе САД (ссылка). Более подробно, как работает группа можно посмотреть в записи. Марина Ушакова, руководитель МБУ Центр «Акварель» г. Челябинска (презентация), кратко представила получившиеся в результате участия в группе выводы. В частности, Марина отметила, что участие в группе должно быть командным; участники группы должны владеть базовыми компетенциями в области МиО; группа должна оставаться немногочисленной для сохранения возможности индивидуальных консультаций. В заключении Марина сказала «Традиционно обучение в этой группе было очень сложным, но мы со всем справились в итоге».

Представление практического опыта НКО завершил Александр Боровых, директор отдела стратегий БФ «Даунсайд Ап» (Москва), который кратко рассказал о методологии и результатах оценки вклада фонда в достижение социальных результатов для благополучателей (презентация). Подробно об этом исследовании коллеги уже рассказывали на конференции АСОПП. «Это очень интересное оценочное исследование, с хорошей аналитикой и дизайном. Оно безусловно заслуживает того, что его отдельно обсудить. И методологию и результаты»- считает Ольга Евдокимова.

22 марта с 9.00 до 11.00 (мск) мы приглашаем участников тематической площадки «Семьи с особыми детьми» и всех заинтересованных принять участие в онлайн-встрече по обсуждению этого исследования. Регистрация по ссылке. Более подробный план будет разослан позднее.

Заключительной частью мероприятия стали выступления представителей донорских организаций.

Эльвира Гарифулина, программный директор фонда «Абсолют-Помощь», представила систему МиО Фонда, ее ключевые элементы, особенности сбора отчетности от грантополучателей (презентация). Эльвира заметила, что мониторинг и оценка — это обязательная часть и основа для формирования доверия к помогающим организациям со стороны благополучателей, доноров, государства.

 Резюмируя итоги дискуссии, Ширшова Инна, руководитель направления “Инклюзивная среда» БФ Сбербанка «Вклад в будущее» отдельно отметила важность темы оценки рисков, в том числе и при реализации доказательного подхода. В 2022 году Фонд при участии АНО «Эволюция и Филантропия» и ряда независимых экспертов разработал Методику прогностической оценки решений с учетом социальной значимости, в которой было особое место уделено теме управления рисками.

Также Инна выделила ряд ключевых драйверов для развития доказательного подхода — должен быть запрос внутри организации на саморефлексию и развитие; должна быть сонастройка образа результата между донором и грантополучателем и путей его достижения. Реализация доказательного подхода требует определенных компетенций, которые надо приобретать и которым внутренняя организационная культура должна давать возможность применения. Еще одна точка роста — валидные и чувствительные инструменты сбора данных и научные исследования.

В заключении выступила Элина Илларионова (eillarionova@timchenkofoundation.org), руководитель аналитической службы Фонда Тимченко (презентация) с предложением по развитию Индекса детского благополучия. В частности, можно использовать разработанный инструментарий для опросов детей и родителей и в перспективе получать бенчмарки, о которых несколько раз говорили на встрече.

Участникам было предложено ответить на вопрос:

Благодарим всех спикеров и участников.

Видео-запись rutube, youtube.

21 февраля с 9.00 до 11.00 (время московское) состоится открытая онлайн-встреча сообщества  специалистов-практиков по оценке программ в сфере детства. Регистрация по ссылке. 

На мероприятии будет представлены результаты работы организаций сферы детства, НКО, доноров по развитию культуры и процессов оценки социальных практик, обсужден полученный опыт, а также сформированы тематические планы работы сообщества на 2023 год.

На встрече, в частности, выступят:

• Ольга Заводилкина, эксперт-консультант АНО «Эволюция и Филантропия» с презентацией результатов работы 2-ой пилотной  группы «Статистический анализ данных».   
• Татьяна Подушкина, руководитель центра доказательного социального проектирования МГППУ, с обзором  итогов сотрудничества Центра, Агентства стратегических инициатив и Министерства просвещения РФ по развитию в 2022 году доказательного подхода. 
• Александр Боровых, директор отдела стратегий БФ «Даунсайд Ап», c представлением проекта по оценке вклада фонда в достижение социальных результатов для благополучателей.
• Эльвира Гарифулина, программный директор фонда «Абсолют-Помощь», расскажет о развитии в фонде культуры и практик оценки.   
• Ширшова Инна, руководитель направления “Инклюзивная среда» БФ Сбербанка «Вклад в будущее» поделится своим видением перспектив развития программной оценки в донорских организациях.
• Элина Илларионова, старший аналитик Фонда Тимченко.

Также будут представлены кейсы от БФ «Рауль»,  БФ «Волонтеры в помощь детям-сиротам» и других активных участников сообщества.

Мероприятие проводит АНО «Эволюция и Филантропия» в сотрудничестве с «Точкой кипения МГГПУ». 

После регистрации вы получите письмо-напоминание за сутки и за час до мероприятия — в письме будет ссылка на страницу мероприятия с кнопкой «присоединиться» для входа.

В связи с большим количеством участников будет организованы дополнительные трансляции на ютьюб-канале АНО «Эволюция и Филантропия» и в VK «Точки кипения».

В октябре-декабре 2022 года был проведен опрос участников онлайн-курс «Оценка проектов и программ в сфере детства», которые прервали или не начали обучение. Всего было получено 20 ответов.

«Не получил(а) вовремя информацию о сроках регистрации» — об этой причине того, что они не начали обучение на курсе сообщили 35% респондентов. 15% ответили, что не смогли закончить курс из-за «слишком большого и сложного объема информации для изучения». 10% написали, что для них оказались «слишком короткими сроки для прохождения регистрации на Stepik». О трудности «совмещать работу и учебу, большой загруженности на работе» сообщили 20% респондентов. Из-за проблем со здоровьем прервали обучение 10% участников опроса. «Технические проблемы» и «короткий срок между модулями» назвали в качестве причин прекращения обучения по 5% ответивших.

Респонденты прокомментировали свои ответы и сформулировали пожелания.

Хочется на этапе  заявки понимать примерную временную загрузку и сроки курса (периодичность, старт-окончание, время для самостоятельной и групповой работы в течение курса) в какой-то инфосправке, это позволит лучше оценить есть ли реальная возможность в том или иной моменте года принять активное и постоянное участие, прежде чем отправлять заявку.

Программа курса очень интересная и насыщенная, объем материалов действительно большой, но главная причина, почему я не закончила обучение в том, что я проходила одна, а не в составе команды от организации, а также неудачный выбор тематики проекта для выполнения ДЗ. Для успешного прохождения обучения нужно обязательно участвовать командой. Жалею, что не прислушались к вашим рекомендациям изначально.

2 декабря состоялся завершающий круглый стол для участников онлайн-курса «Оценка проектов и программ в сфере детства-2022».

Курс завершили 57 человек из 29 организаций сферы детства, из них 20 организаций участвовали в курсе впервые. На курсе учились участники из 19 регионов РФ. На курсе было 14 команд из двух и более человек из одной организации. 45 участников получили сертификат с отличием.
На основе анкеты финальной анонимной обратной связи был определен индекс лояльности — NPS, который составил 85,7%, что выше индекса прошлого потока (71,4%). На анкету ответили 49 участников курса. Индекс лояльности или NPS – это простой, общепризнанный стандартизированный инструмент сбора быстрой обратной связи о ценности своей деятельности.
Сравнение результатов входного и финального тестирования участников показал, что в среднем рост уровня знаний составил 29% — этот результат почти повторяет показатель предыдущего потока (30%).

В завершающей встрече 2 декабря приняли участие 42 специалиста сферы детства (презентация).

Основную часть встречи шла работа в группах, где участники курса представили планы работы по развитию мониторинга и оценки в своих организациях в 2023 году и обменялись своими впечатлениями о курсе. Среди пожеланий по поводу улучшения курса в будущем участники назвали работу с наставником после завершения обучения, использование мультимодальных принципов в педагогическом дизайне курса, а также предложения по увеличению времени освоения курса или модуля «анализ данных».

Был проведен опрос участников об удовлетворенности обучением на курсе, в котором приняли участие 33 респондента. 67 и 27 процентов ответивших назвали курс полностью или скорее соответствовавшим их ожиданиям. 70% респондентов готовы рекомендовать курс коллегам.

Представляем вам цитаты слушателей о курсе:

Качественный и глубокий курс для проработки проектной деятельности организации. Я бы рекомендовала руководителю организации вводить как обязательный для прохождения проектным менеджерам.

Курс помог структурировать знания об оценке и научил создавать систему оценки и мониторинга результативности деятельности, а также позволил пообщаться с экспертами в оценке. К тому же очень много полезного теоретического и практического материала.

Курс полезен всем, кто вообще работает с благополучателями. Поможет проанализировать свою деятельность, заметить слепые пятна в оценке, если ранее она производилась. Советовать буду с оговоркой, что для прохождения курса необходимы хорошие ресурсы временные и лучше его проходить всей командой (отдела, программы) для лучшего понимания при внедрении изменений в деятельности и оценке программы/ проекта. Также прохождение курса командой позволяет рассмотреть собственную деятельность с разных сторон. Для состоявшихся программ полезно будет накопленные результаты деятельности преобразовать в инструмент изменений и фандрайзинга.

Надеюсь, будет ещё обучение, чтобы наша группа могла развиваться в данном направлении.

Мы благодарим преподавателей курса: Екатерину Богомолову, Ирину Гарт, Ольгу Заводилкину, Татьяну Подушкину.

Мы также благодарим модераторов групповых обсуждений, которые работали на курсе: Елену Андрееву, Викторию Анейчик, Татьяну Арчакову, Ирину Бобылеву, Эльвиру Гарифулину, Ольгу Заводилкину, Ингу Пагава, Татьяну Подушкину, Инну Ширшову, Ирину Шелпакову, Наталию Фреик, Екатерину Хохлову.

Мы благодарим Благотворительный образовательный фонд «Мархамат» за сотрудничество и поддержку в проведении онлайн-курса.

22 ноября 2022 года Ольга Евдокимова приняла участие в научно-практической конференции «Результаты и проблемы внедрения доказательного подхода в сферу детства в России». Конференция проводилась Центром доказательного социального проектирования МГППУ и была посвящена описанию опыта внедрения доказательного подхода в социальной сфере и образовании.

Первый день конференции был посвящен анализу прорывов и барьеров внедрения доказательного подхода социальной сферы РФ на федеральном уровне в контексте задач Десятилетия детства. Ольга Евдокимова приняла участие в стратегической сессии «От научных исследований к доказательному подходу в образовании и социальной сфере: мечта или реальность?». Модератором cессии выступила Гарифулина Эльвира Шамильевна, программный директор благотворительного фонда «Абсолют‑Помощь». На сессии обсуждались вопросы мотивации и барьеров в развития доказательного подхода со стороны разных акторов.

На круглом столе «Опыт разработки и проведения дистанционных образовательных программ в области доказательного подхода со специалистами сферы детства», который модерировала Коновалова Ирина Валентиновна, декан факультета повышения квалификации, член Ученого совета МГППУ, был представлен опыт и результаты проведения онлайн-курса «Оценка проектов и программ в сфере детства» (презентация) за 3 года.

Во второй день были презентации и разбор кейсов практик, описанных на основе Стандарта доказательности и размещенных в Реестре доказательных практик Десятилетия детства» на федеральной платформе обмена практиками «Смартека» Агентства стратегических инициатив.

Видео-запись конференции доступна по ссылке.

16 ноября прошла экспертная встреча сообщества практиков для разработки Теории изменений для программы «Социальный диалог на основе открытых данных»  Ассоциации «Драйвер роста», Белгородская область.

Программу «Социальный диалог на основе открытых данных»  (см. презентацию), а также наработки по Теории изменений сделанные в рамках обучения на онлайн-курсе «Оценка проектов и программ в сфере детства-2022» представил Сергей Назаров, исполнительный директор Ассоциации «Драйвер роста».

На встрече в формате группового обсуждения участники разобрали проект Дерева результатов программы и озвучили свои идеи по ее доработке. На встрече присутствовали: Сергей Назаров, Марина Ушакова, Центр «Акварель», Челябинск, Ольга Заводилкина, эксперт АНО «Эволюция и Филантропия», Владимир Тараненко, ВОРДИ, Анна Доменик, ОГКУСО «Центр помощи детям, оставшимся без попечения родителей, Свердловского района г. Иркутска», Эльвира Гарифулина, БФ «Абсолют-Помощь», Ольга Евдокимова, исполнительный директор АНО «Эволюция и Филантропия». Мы благодарим всех принявших участие в обсуждении.

В октябре был проведен опрос участников онлайн-курса «Оценка проектов и программ в сфере детства-2022». Основное темой опроса были потребности участников.

Было получено 53 ответа.

Большинство участников (77%) ответили утвердительно на вопрос, понадобится ли им дальнейшая поддержка после завершения курса.

«Хотим доработать практику до возможности войти в реестр практик с доказанной эффективностью. Сами не справимся».

«Уникальная возможность задать вопросы профессионалам».

На вопрос о том, какие форматы поддержки наиболее для востребованы, респонденты назвали обязательной формой поддержки наличие постоянного доступа к базе знаний по релевантным практикам.

Более половины респондентов (64%) назвали желательными такие виды поддержки как «Обсуждение своих кейсов среди коллег-практиков». От 46% до 62% ответивших назвали желательными остальные виды поддержки: Индивидуальные разовые консультации экспертов, супервизии по наиболее сложным темам; Стажировка к коллегам; Фасилитация групповых обсуждений внутри организации; Методическое сопровождение по внедрению различных элементов МиО; Подготовка к верификации практики.

«Есть моменты в работе, когда консультация просто необходима или знакомство с кейсами».

На вопрос «Оцените, пожалуйста,  уровень системы МиО в вашей организации»  57% ответивших оценили его как средний, 34% как начальный, 8% как довольно зрелый.

Среди ответивших 60% являются представителями НКО, 30% — госучреждений, 10% — иных организаций.

Сообщество практиков по оценке программ в сфере детства существует около десяти лет. Какие сейчас есть достижения, тренды и практические возможности, чтобы развивать доказательный подход и культуру оценки? 18 октября роль сообщества практиков обсуждалась на VIII Конференции Ассоциации специалистов по оценке программ и политик.

Модератором встречи выступила Ольга Евдокимова, АНО «Эволюция и Филантропия». Ольга отметила, что именно сфера детства явилась драйвером развития оценки в последние 5 лет, и как результат — в этой сфере есть и развитая методическая база и онлайн-курс и сообщество практиков со специализированными площадками. В небольшой дискуссии на тему того, какие есть трудности и дефициты, приняли участие активные члены сообщества Анна Доменик, «Центр помощи детям, оставшимся без попечения родителей, Свердловского района г. Иркутска» и Ольга Андросова, Международный детский фонд «Дети Саха-Азия». В частности, они отметили:

• Нехватку грантовых конкурсов, поддерживающих проекты, связанные с развитием мониторинга и оценки назвала
• Трудности связанные с необходимостью обучения новых сотрудников.

В 2022 году сообщество практиков продолжило апробировать инновационные форматы поддержки специалистов. В частности, стартовала пилотная группа по внедрению в практику организаций приемов анализа количественных данных. Ольга Заводилкина, эксперт АНО «Эволюция и Филантропия», рассказала о том, как работает группа «САД» (статистический анализ данных). Ольга, отметила, что формат работы сложился опытным путем и он выражает актуальные тенденции в обучении взрослых: это «обучение членов сообщества» и «обучение действием». Встречи группы ориентированы на потребности участников и разбор актуальных кейсов и задач. Уже на старте строится содержательная гипотеза и предположения о том, какие решения могут быть приняты на основе анализа. Это позволяет выбрать наиболее релевантные методы статистического анализа и прийти к результатам, которые потом могут применяться на практике.

В заключение встречи, Андрей Некрасов, программный директор «Точки кипения МГППУ», рассказал о работе междисциплинарной площадки «Точка кипения МГППУ», которая открылась менее полугода назад. В частности о рассказал о серии вебинаров по теме оценки в сфере детства для представителей сообщества из разных регионов, которая проходит сейчас. В планах площадки — проведение методологических вебинаров для обмена опытом между академическим сообществом и сообществом практиков.

Презентация Ольги Евдокимовой, где собраны ресурсы, наработанные сообществом практиков.

Видео-запись обсуждения доступна.

В рамках прохождения онлайн-курса «Оценка проектов и программ в сфере детства-2022», участники определяли, какие тренды развития мониторинга и оценки для них наиболее актуальные, а также формулировали задачи на 2023 год. Около 30 команд специалистов НКО и ГБУ сферы детства приняли участие в этой работе.

Среди трендов безусловно лидирует тренд на внутреннюю оценку и применение IT-технологий.

Также часто упоминался тренд — на развитие доказательного подхода.

«Развитию доказательного подхода в секторе, безусловно, способствует огромная просветительская работа в этом направлении. Если есть интерес к этой теме, специалисты НКО могут найти достаточное количество материалов для ознакомления и для обучения»

«Способствует развитию доказательных практик на мой взгляд запрос доноров, ведь для них важно использовать средства с максимальным социальным эффектом»

«Я думаю, что развитию доказательного подхода способствует в большей степени потребность самих организаций в представлении результатов своей работы таким образом, чтобы можно было объяснить внешней аудитории, как именно они получились»

Говоря о препятствиях для внедрения доказательного подхода, участники назвали следующие факторы: отсутствие навыков и умений в оценке у сотрудников организаций, недостаток внимания к этой теме со стороны руководства организаций и доноров, низкая осведомленность со стороны представителей детских учреждений (центров, детских домов и т.п.) о доказательном подходе в секторе в целом, трудоёмкость, большие временные и финансовые затраты, низкая осведомленность об исследованиях в сфере доказательных практик, заявительный характер использования доказательного подхода.

Какие же актуальные задачи по развитию мониторинга и оценки организации ставят в 2023 году?

Наиболее часто указывались следующие задачи: систематизация внутренней оценки и внедрение ее на регулярной основе, обучение команды сотрудников работе с МиО, улучшение доказательной базы практик, проведение исследований качества услуг, фокус-групп и глубинных интервью благополучателей, внедрение crm.

Завершился отбор участников на онлайн-курс «Оценка проектов и программ в сфере детства-2022».

На курс было подано около 164 заявок — принято 103 участника из 43-х организаций, среди которых 25 НКО. На курсе учатся представители организаций сферы детства из 19 регионов РФ.

28 из 43-х организаций будут учиться командами от 2-х человек. Руководителей организаций – 42; специалистов — 61.

Распределение участников по площадкам:

18 — работают с замещающими семьями;
20 – в кризисных центрах;
25 — с семьями с детьми с ОВЗ;
37 – с подростками и выпускниками сиротских учреждений.

11  НКО, сотрудники которых проходили курс ранее, отправили учиться новых сотрудников.

Так участники обозначили свой функционал в области МиО в регистрационных анкетах:
1) Мониторинг/ оценка – 13
2) Оценка эффективности — 14
3) Анализ и отчетность — 2
4) Разработка методологии и инструментов — 4
5) Напрямую не занимаюсь МиО – 21

Так выглядят основные запросы участников в этом году:
Повышение уровня профессиональных знаний; cистематизация -55;
Наработка практических навыков/инструменты — 6;
Внедрение в деятельность организации, cистематизация; масштабирование — 15;
Повышение эффективности и качества – 14;
Развитие доказательного подхода -1.

7 октября состоялась установочная встреча для участников курса, на которой Ольга Евдокимова провела презентацию курса и рассказала о том, как устроено обучение. Особое внимание было уделено целям и мотивации участников, возможности соотнести цели и возможности, предлагаемые на курсе.

На встрече своим опытом прохождения курса, впечатлениями и советами поделились выпускники предыдущего курса:

Анна Доменик, ОГКУСО «Центр помощи детям, оставшимся без попечения родителей, Свердловского района г. Иркутска»;
Евгения Канцыпко, Благотворительный фонд «Рауль»;
Марина Ушакова, Муниципальное бюджетное учреждение города Челябинска «Центр помощи детям, оставшимся без попечения родителей, «Акварель».

В 2022 году курс «Оценка программ в сфере детства» проводят совместно Благотворительный образовательный Фонд «Мархамат» и АНО «Эволюция и Филантропия».