25 марта состоялась очередная встреча тематической площадки «Мониторинг и оценка практик поддержки семей с особыми детьми»

25 марта состоялась состоялась очередная ( 2-ая в 2022 году) встреча тематической площадки «Мониторинг и оценка практик поддержки семей с особыми детьми». Во встрече приняли участие 28 человек из 13 регионов.

В начале  встречи Ольга Заводилкина представила новый функционал онлайн-сервиса ПИОН: Библиотека кейсов и Библиотека инструментов. На данный момент в них размещено 5 кейсов и 8 инструментов, относящихся к тематической группе «Практики поддержки семей с особыми детьми». Ольга продемонстрировала новые возможности сервиса. От участников встречи поступили предложения по его доработке.

В продолжении темы Елена Яндуктина представила кейс РООРДИ «Дорогою добра» по итогам использования разработанного при поддержке АНО «Эволюция и филантропия» алгоритма доказательного анализа данных. Был представлен сам инструмент, результаты его применения и решения, которые были приняты на основе полученных результатов. См. презентацию.

По итогам дискуссии было принято решение предложить заинтересованным участникам тематической площадки объединится в небольшую группу и провести анализ своих данных с использованием представленного алгоритма при поддержке работы группы со стороны АНО «Эволюция и Филантропия». Работа группы будет проходить в дистанционном формате. Группа начнет работать 15.04.2022 года. Если Вы хотите присоединиться, напишите на почту info@ep.org.ru.

Также участникам встречи были представлены новые инструменты, которые были помещены в онлайн-базу «Слушай с пользой»! и ее промо-ролик.

В конце вебинара были анонсированы предварительные темы  встреч в 2022 году:

  • Как исследовать негативный эффект практики? – май 2022 года
  • Автоматизация  мониторинга и оценки, инструменты, которые используются в организациях, в которых уже внедрены  CRM – июль 2022 года
  • Границы практики и профиль благополучателя: как они связаны между собой – сентябрь 2022 года

Практикумы по построению теории изменений на основе дерева результатов и коллективному поиску решений задач построения или развития системы мониторинга и оценки практики – по запросу.

Если у вашей организации есть такой запрос, напишите на почту info@ep.org.ru или зайдите на сервис ПИОН и заполните там форму.

Познакомиться с записью встречи можно по ссылке.

«Мониторинг и оценка практик поддержки семей с особыми детьми» — результаты и планы

31 января 2022 состоялась онлайн встреча тематической группы «Мониторинг и оценка практик поддержки семей с особыми детьми».  Во встрече приняли участие 28 человек из 11 регионов.

В первой части встречи подвели итоги работы тематической группы за 2021 год.

В 2021 году прошло 5 встреч, в которых приняли участие 185 человек из 125 организаций, 22% участников были больше, чем на одной встрече.  

Основные выводы по результатам обсуждения работы группы

  1.  работа над развитием системы мониторинга и оценки требует внешней поддержки, которая должна иметь как образовательную, так и экспертную составляющую
  2. сложности в развитии системы МиО связаны с совмещением позиций практика и оценщика практики, эти сложности касаются не только временных ресурсов, но и требует определенного уровня развития профессиональной рефлексии, гибкости мышления
  3. для организации важна фокусировка именно на ее задачах развития МиО, такую фокусировку может обеспечить индивидуальная работа с консультантами или встреча по принципу «один кейс за один раз»
  4. появилась готовность перейти от разработки деревьев результатов и логических моделей практик к построению теории изменений

Темы, предложенные к обсуждению в 2022 году:

  1. Автоматизация мониторинга и оценки, инструменты, которые используются в организациях, в которых уже внедрены CRM
  2. Практикумы по построению теории изменений на основе дерева результатов
  3. Профиль благополучателя практики и как это связано с ее границами.
  4. Как исследовать негативный эффект практики?
  5. Встречи для коллективного поиска решений задач МиО конкретной практики
  6. Как преодолеть сложности, связанные с совмещением разных ролей ключевыми сотрудниками организации, включая руководителей?
  7. Знакомство с зарубежным опытом

Очевидно, что участники приходят на площадку с разными запросами: кто-то «просто послушать пока» — и такие участники не готовы активно включаться в обсуждение, в отличите от более опытных участников, которые готовы формировать общую повестку. Кто-то приходит получить конкретный совет и тогда нужны несколько иные форматы. Кому-то важно быть в тренде и понимать, что в целом происходит в плане МиО у соответствующих практиков. Звучала тема необходимости повышения профессионализма в области МиО у донорских организаций. В этом ключе площадка являет собой способ фокусировки на профессиональных и этических стандартах.

Также звучали предложения о сокращении общего времени встречи, добавления образовательного контента, большей чувствительности встреч к индивидуальным запросам организаций.

Во второй части встречи Наталья Ульянова представила кейс АНО «Центр помощи семьям детей с ограниченными возможностями здоровья «Содействие» (г. Ростов-на-Дону). Она рассказала о результатах работы организации с индивидуальным консультантом, благодаря которой были разработаны дерево результатов и логическая модель программы, произведена сегментация социального воздействия, усовершенствована система измерения непосредственных и социальных результатов.

В третьей части встречи прошла панельная дискуссия с участием приглашенного эксперта Наталии Фреик.

Основные выводы по ключевым вопросам дискуссии.

Для определения актуальной задачи, решение которой позволит качественно улучшить систему мониторинга и оценки возможно:

1) провести встречу или встречи с широким кругом участников, в том числе и стейкхолдеров, результаты «проверить» в диалоге с экспертом

2) посмотреть, какие другие задачи, не связанные с мониторингом и оценкой, стоят перед организацией, и как внесение изменений в МиО может способствовать их решению

3) воспользоваться алгоритмами, которые предложены в онлайн курсе, разработанном АНО «Эволюция и Филантропия»

4) возможно, в будущем появится специальная методическая разработка

На вопрос, можно  ли «поставить точку» в развитии системы мониторинга и оценки, и если да, то в какой момент, отвечает, как правило, команда практики, при этом важно учитывать:

  1. цикл жизни практики, нужно дать время, чтобы успеть собрать данные для оценки
  2. преемственность инструментария, чтобы обеспечить данные для оценки динамики
  3. нет ли ограничений на внесение изменений со стороны донора или профессионального сообщества
  4. фокусы оценки со стороны доноров (экономическая и пиар составляющие)

Отвечая на вопрос, применима ли оценка рентабельности к «вложениям» в развитие системы мониторинга и оценки, высказали следующие мнения:

  1. можно посчитать сколько средств вложено в развитие системы МиО, но сложно посчитать сколько получено
  2. можно применить оценку вложений в компетенции сотрудников, которая используется в образовательных проектах, в т.ч. в проектах крупных компаний, например ПАО «Сбербанк России»   
  3. можно посчитать, сколько было затрачено на внешнюю оценку и сколько пожертвований было получено благодаря тому, что был представлен отчет
  4. можно говорить о появлении дополнительной уверенности при подаче грантов

Благодарим всех участников встречи!

Мероприятие прошло в рамках проекта «Оценка в сфере детства: развитие сообщества практиков», реализуемого АНО «Эволюция и Филантропия» при поддержке Фонда президентских грантов. 

Видео-запись встречи.

Верификация практик поддержки семей с особыми детьми

1 декабря 2021 прошел вебинар «Верификации социальных практик», на котором был представлен опыт прохождения независимой верификации организациями, которые оказывают поддержу семьям с особыми детьми. 

В самом начале вебинара слушатели получили уникальную возможность задать вопросы Инне Ширшовой (БФ «Вклад в будущее»), которая была в этом году экспертом-верификатором нескольких практик, и прояснить основания присвоения того или иного уровня доказанности, а также конкретизировать содержание полученных рекомендаций.

Больше всего слушателей интересовали вопросы валидности применяемых инструментов. Многие инструменты, которые советуют эксперты, не являются общедоступными, применение зарубежных методик должно предваряться адаптацией к культурно-социальному контексту нашей страны, инструменты, которые разрабатывают сами организации, как правило не проходят психометрическую проверку. В этой ситуации, по совету Инны, необходимо в описании провести аргументы, почему был выбран тот или иной инструмент, почему не были взяты другие инструменты, особенно, общеизвестные. И в целом, описывая практику, важно показывать не только конечные результаты ее рефлексивного анализа, как это есть сейчас, но и промежуточные. Это поможет экспертам понять контекст работы организации по сбору доказательств.

В диалоге родилась тема дискуссии следующей встречи, а именно: «Анализ допущений и оценка рисков негативного влияния практики».   

Во второй части вебинара результаты работы в рамках Конкурса Фонда Елены и Геннадия Тимченко «Реестр доказательных практик» представили:

  • АНО «Центр сопровождения детей и семей «Содействие», практика «Группа поддержки родителей детей с ограниченными возможностями здоровья и инвалидностью «Равновесие» (презентация);
  • АНО «Центр развития и реабилитации детей «Светлый город», практика «Развитие и социальная адаптация детей с особыми образовательными потребностями» (презентация);
  • АНО «Ресурсный центр помощи людям с ментальными нарушениями «Вера. Надежда. Любовь», практика «ЭМО» — мессенджер для детей и молодых людей с ментальными нарушениями» после реализации плана повышения доказательности (презентация).

Все организации поделились результатами верификации, полученными рекомендациями и тем, как рекомендации были ими трансформированы в задачи плана повышения доказанности.

В третьей части слушатели примерили на себя роль верификаторов практики «Непрерывное сопровождение детей с выраженными интеллектуальными нарушениями» (ГБУ ЦСПР «Семь-Я»). Надо отметить, что результаты коллективной публичной экспертизы по разделам «Регламентированность» и «Обоснованность практики» совпали с мнением экспертов, как по присвоенным уровням, так и по содержанию рекомендаций. 

В заключении слушатели обменялись своими впечатлениями о прошедшем вебинаре.  Многие отмечали, что на вебинаре ещё больше укрепились во мнении о необходимости специальных навыков для «упаковки » практики в описание в соответствии со Стандартом доказательности практик.

Видео встречи доступно по ссылке.

«Мониторинг и оценка практик поддержки семей с особыми детьми» — результаты встречи

11 октября состоялась встреча тематической площадки «Мониторинг и оценка практик поддержки семей с особыми детьми», которая была посвящена вопросам отбора и экспертизы инструментов сбора и анализа данных.

Во встрече участвовало 34 специалиста из 21 региона, представляющих государственные и некоммерческие организации, работающие с семьями с особыми детьми.

В начале встречи были представлены ключевые выводы по итогам ранее проделанной работы, а именно выделенные особенности системы МиО практик поддержки семей с особыми детьми и пример разработки теории изменений для таких практик.

Работа продолжилась обзором инструментов, используемых в практиках поддержки семей с особыми детьми и представленных на сервисе ПИОН. О сервисе ПИОН рассказала куратор площадки — Заводилкина О.В.  Анализ представленных инструментов по их видам показал, что чаще всего в практиках используются анкеты и опросники, реже стандартизированные шкалы. При этом предпочтение отдается разработанным внутри практики инструментам.

Среди участников встречи был проведен опрос, который подтвердил представленные в обзоре выводы. Так 93% ответивших на вопрос указали на то, что чаще всего используют анкеты и опросники, разработанные в организации.

Во второй части встречи был представлен новый формат проведений обсуждения открытая блиц-экспертиза инструмента в диалоге с экспертом. Инструмент на экспертизу представила Жимаева Е.М. – руководитель просветительского проекта «Сфера инклюзии» АНО МИКС. В роли эксперта выступила куратор группы Заводилкина О.В.

Вводные данные об инструменте: в настоящий момент инструмент используется для составления индивидуальных планов работы с детьми с ОВЗ. Инструмент направлен на оценку сформированности представлений об окружающем мире.  

Запрос на экспертизу: можно ли использовать получаемые с его помощью данные для оценки социального результата, а именно для оценки повышения уровня сформированности представлений об окружающем мире.

Рекомендации по итогам экспертизы.

  1. Адаптировать вопросы к современным условиям жизни ребенка.
  2. Продумать систему дополнительных вопросов или использования визуальных помощников, которые дадут возможность оценить, насколько ребенок адекватно понимает содержание вопроса и потенциально имеет данные для ответа.
  3. Разбить составные вопросы на отдельные вопросы.
  4. Продумать систему перевода системы фиксации ответов   «+», «+/- », «-»  в числовые значения.
  5. Определить уровень фиксируемых с помощью данного инструмента изменений в представлениях ребенка, которые могут быть определены как их расширение.

В третьей части встречи участники работали по группам.

Был составлен перечень вопросов к описанию инструмента, ответы на которые помогут организации принять решение, подходит данный инструмент для ее целей или нет.

  1. На что направлен инструмент?
  2. Какой социальной результат измеряет?
  3. К какому методу относится?
  4. Есть ли сведения о том, кто разработал, была ли психометрическая проверка, стандартизация, адаптация, модификация?
  5. Для какой целевой группы?
  6. Кто выступает источником информации?
  7. Время заполнения?
  8. Что входит в инструмент (бланки, инструкция и т.п.)?
  9. Какие есть ограничения при использовании (как часто можно использовать, можно ли оценить динамику, какие условия при применении инструмента надо контролировать («контроль поля»), нужны ли дополнительные компетенции, нужно ли пройти дополнительное обучение и др.)?
  10. В каком виде будут представлены индивидуальные результаты?
  11. Как измеряется успех по социальному результату?
  12. Есть ли примеры использования?
  13. Прошел ли инструмент экспертизу и какую именно?

А также были определены: вопросы по инструменту, при ответе на которые организации может потребоваться помощь, удобные формы получения помощи, условия, обеспечивающие доступ к инструментам и их тиражирование, представлен разработанный одной из групп пример цепочки действий при желании получить помощь при выборе инструмента.

В продолжение работы площадки было решено:

  1. Организовать сбор инструментов для общей базы инструментов практик поддержки семей с особыми детьми, которые могут быть использованы в целях мониторинга и оценки.

2. Составить чек-лист для самостоятельного принятия решения о том, подходит ли инструмент под задачи практики и обсудить его на следующей встрече.

3. Продолжить проведение экспертных встреч, как общих, так и индивидуальных.

Записаться на экспертизу можно по ссылке.

Смотрите видео-запись встречи.

Мероприятие проводится в рамках проекта «Оценка в сфере детства: развитие сообщества практиков», реализуемого АНО «Эволюция и Филантропия» при поддержке Фонда президентских грантов.

Итоги встречи тематической группы «Мониторинг и оценка практик поддержки семей с особыми детьми»

11 августа состоялась встреча тематической группы «Мониторинг и оценка практик поддержки семей с особыми детьми».

Во встрече участвовало 62 специалиста из 22 регионов, представляющих государственные и некоммерческие организации, работающие с семьями с особыми детьми.

Запись встречи доступна по ссылке.

В начале встречи выступила Ольга Заводилкина, которая рассказала о фокусе работы площадки и поделилась с участниками информацией о возможностях онлайн-сервиса ПИОН. Презентация доступна по ссылке.

В первой части встречи участники обсудили особенности системы мониторинга и оценки практик поддержки семей с особыми детьми. С импульсным сообщением «Взгляд 360◦» выступила Елизавета Романова, директор Ресурсного центра помощи людям с ментальными нарушениями «Вера. Надежда. Любовь». Она рассказала о практическом воплощении принципа триангуляции в инструменте оценки готовности семьи с особым ребенком к участию в решении вопросов, связанных с его жизнеустройством после совершеннолетия. Презентация доступна по ссылке.

В ходе групповой работы и обсуждения с приглашенным экспертом Наталией Фреик были выделены особенности системы МиО, относящиеся к выбору методов и инструментов мониторинга и оценки, источников информации, определению процедур и графика сбора данных.

Вот некоторые из них:

  • При выборе метода необходимо убедиться, что метод линейно связан с параметром, который достоверно значим в клинической практике.
  • Так как работа с детьми длится продолжительное время, необходимо использовать сквозные инструменты, адекватные задачам практики в течении всего времени оказания поддержки.
  • Необходимо  сочетать разные методы, не только статичные, но и динамичные. Например, использование ретроспективного видео, его кодирования и т.д.
  • Включать в качестве источников информации ближайшее окружение ребенка: родителей, других членов семьи, специалистов, которые работают с ребенком и семьей.
  • При составлении графика сбора данных учитывать общую длительность работы с семьей
  • Использовать гетерохронность в сборе данных (разные данные собираются в разное время)

Работа над выделением особенностей системы МиО практик поддержки семей с особыми детьми будет продолжена на следующих встречах тематической группы.

Во второй части встречи фокус внимания сместился на обсуждение системы МиО   как динамической системы, которая может и должна меняться в соответствии с запросами практики.

Своим опытом внесения изменений в систему МиО с целью повышения уровня доказанности практики поделились Яна Зятикова  ( Бюджетное учреждение социального обслуживания Вологодской области «Комплексный центр социального обслуживания населения города Череповца и Череповецкого района «Забота»), см. презентацию, и Елена Лянгузова (Региональная общественная организация родителей детей-инвалидов «Дорогою добра» Кировской области), см. презентацию.

Коллеги поделились, какие изменения они внесли в свои системы МиО после прохождения верификации своих практик в соответствие с доказательным подходом и переходе к реализации планов повышения доказанности, какие рекомендации экспертов они получили и как именно их учли.  А также рассказали, что еще может быть стимулом для внесения изменений в инструменты мониторинга и оценки. Например, как обратная связь от родителей особых детей повлияла на инструмент сбора данных.

В заключении встречи участники поделились своими новостями в области мониторинга и оценки, а также внесли предложения по дальнейшей работе группы.

Мы хотим сделать работу группы максимально полезной для ее участников и просим ответить на небольшую анкету.

Итоги онлайн-семинара «Как обеспечить рост уровня доказанности практик поддержки семей с особыми детьми»

5 марта  состоялся онлайн-семинар «Как обеспечить рост уровня доказанности практик поддержки  семей  с особыми детьми», в котором приняли участие более 70 специалистов  из более чем 30 регионов РФ.

«Семинар является продолжением практической работы тематической группы «Мониторинг и оценка при реализации практик работы с семьями с особыми детьми», созданной в 2020 году в рамках проекта «Онлайн-курс по оценке программ в сфере детства». Основные задачи группы – организация обмена опытом в области мониторинга и оценки между специалистами практиками,  реализующими  программы поддержки семей с особыми детьми; формирование cоответствующей базы знаний и популяризация доказательного подхода при проектировании и оценки социальных программ.

В начале мероприятия Ольга Евдокимова, директор АНО «Эволюция и Филантропия»,  напомнила участникам ключевые итоги  первого семинара, основные выявленные проблемы и задачи.

«Мы видим все возрастающий интерес к теме мониторинга и оценки со стороны специалистов-практиков, мы наблюдаем  высокий рост посещаемости наших мероприятий. В тоже время большинство участников сегодняшнего мероприятия  считают, что у них начальный уровень компетенций по теме МиО. Поэтому особенно важно обеспечить доступ таким организациям и специалистам к уже накопленной методической базе, наладить обмен опытом» — отметила Ольга Евдокимова.

Далее  спикеры представляли практический опыт своих организаций по развитию доказательного подхода.

(1) Образова Ирина Юрьевна, главный специалист по социально-бытовой реабилитации АНО «Марфо-Мариинский центр для детей с ОВЗ», рассказала об опыте  верификации практики «Жизнь без боли» (группа дневного пребывания для детей с ДЦП). Говоря о мотивах  развивать доказательный подход Ирина подчеркнула: « …Требования доноров, с которыми мы работаем, все больше внимания уделяется эффективности практик и данных, с которыми мы работаем».  На момент описания практики в доказательном ключе,  в организации были разработаны регламенты и запущены  процессы сбора обратной связи от благополучателей и специалистов. Одна из ключевых сложностей была в определении границ комплексной практики и формулировании тех социальных результатов, которые должны  были подаваться на верификацию. Так как организация работает с  детьми с ДЦП, акцент  был поставлен именно на медицинскую составляющую. «Нам было довольно сложно верифицировать эту практику, ведь по сути были представлены результаты, связанные с улучшением физического состояния. Это не совсем то, что предполагает Стандарт. Над этим нам надо еще поработать, если мы хотим, что такие практики проходили верификацию» — прокомментировала Ольга Евдокимова. Ольга Заводилкина считает, что в рамках описания практик и подготовки к верификации надо обязательно учитывать множество промежуточных результатов, без которых невозможно дальнейшее достижение благополучия ребенка и семьи.  «Работа с консультантом помогла  нам понять логику выстраивания программ, которую мы теперь будет применять для других программ»  — отметила спикер.  Логическая модель  этой программы есть в библиотеке моделей онлайн-сервиса ПИОН. Так как Центр находится в начале пути по выстраиванию системы МиО, пока ее практика не была включена в Банк доказательных практик, однако организация будет продолжать  двигаться в сторону доказательности. «Однозначно продолжать! Мы будем стараться закладывать средства на развитие МиО в грантовые заявки» — сказала Ирина Образова.

Презентация Ирины Образовой.

(2) Лянгузова Елена Владимировна, руководитель центра поддержки семей с детьми с особенностями развития РООРДИ «Дорогою добра» Кировской области, представила опыт вхождения в Банк  доказательных практик своей организации. Представляя в самом начале спикера Ольга Евдокимова подчеркнула: « Дорогою Добра – наш давний партнер, организация прошла хороший пусть в развитии системы МиО, участвовала во многих наших проектах и это пока единственная практика, нацеленная на работу с семьями с особыми детьми, которая имеет высокий уровень доказанности по критерию «Обоснованность» в Банке доказательных практик». В начале своего выступления Елена отдельно остановилась на том, что было создано уже с точки зрения МиО и какие были мотивы пройти верификацию. Елена считает, что повышение доказательности практики способствует росту доверия к ней со стороны ключевых стейкхолдеров. Хотя этот путь очень непростой. Описывая трудности на пути развития системы мониторинга и оценки, Елена, помимо общих (нехватка времени, экспертизы, людей), выделила еще ряд специфических для практик поддержки семей с особыми детьми: сложность адаптации инструментов сбора данных под большое количество семей с разными детьми (по возрасту, по нозологии); фрустрация родителей детей с тяжелыми нарушениями во время опроса, анкетирования; особенности взросления таких детей и пр. Также организация пока испытывает затруднения при сопоставлении данных от родителей и специалистов.  Елена подчеркнула: «Процесс описание практики был очень полезен для нашего осознания сильных и слабых сторон практики». Спикер подробно представила и прокомментировала рекомендации, которые были даны  экспертами при прохождении верификации и отдельно отметила, что сейчас  организации есть выделенные специалисты, которые занимаются сбором и анализом данных.

Презентация по ссылке.

Описание практики в Банке доказательных практик.

Описание системы МиО (на 2018 год): РООРДИ «Дорогою Добра» (Кировская область)

Кейс, описывающий процесс сбора и анализа обратной связи.

Заводилкина Ольга Владимировна,  старший научный сотрудник ФГБНУ «Институт изучения детства, семьи и воспитания Российской академии образования «, специалист-эксперт  БФ «Расправь крылья!», педагог-психолог ГБУ ЦСПР «Семь-Я» презентовала опыт применения кластерного анализа в целях повышения доказательности практики непрерывного сопровождения детей с ментальными нарушениями. Ольга немного коснулась теории кластерного анализа, объяснила, зачем он стал нужен, какие данные и в каком виде должны быть, какие результаты были получены и какие далее изменения можно внести в программу.  «Результаты кластерного анализа будут включены в следующую подачу практики на верификацию, чтобы нам получить продвинутый уровень доказанности по критерию «Обоснованность данных»» — сказала Ольга Заводилкина. Ольга Евдокимова отдельно заметила важность сбора данных об объеме оказываемой помощи. «Только имея такие данные, мы сможем перейти к расчету  стоимости социальных результатов и оценке социально-экономической эффективности» — сказала  Ольга.

Презентация О.Заводилкиной.

Описание практики в Банке доказательных практик (до проведения анализа).

Система мониторинга и оценки (на 2018 год) АНО «Вера.Надежда.Любовь».

Кейс, описывающий процесс сбора и анализа обратной связи.

Перед перерывом всем участником было предложено ответить на следующие вопросы:

  1. Насколько востребована в целом, на Ваш взгляд, идея формирования сообщества специалистов для развития  мониторинга и оценки?
  2. Насколько актуально для Вас лично участие в тематической группе по практикам мониторинга и оценки?

Подавляющее большинство (в опросе приняли участие 35 слушателей) отвечали утвердительно на оба вопроса.

Также был задан вопрос об уровне организационного потенциала в области мониторинга и оценки и про востребованность соответствующего онлайн-курса.  

«Приятно видеть востребованность наших  предложений – тематических площадок и онлайн-курса» — отметила, подводя итоги анкетирования, Ольга Евдокимова.

После  перерыва выступила Ширшова Инна Владимировна,  руководитель направления «Инклюзивная среда» БФ Сбербанка «Вклад в будущее», которая представила взгляд  на верификацию практик с позиции донора. Инна поделилась своим видением, зачем донорским организациям доказательные практики,  а также подтвердила необходимость более четкого определения, что такое практика и того, как определить тот набор результатов, который следует верифицировать.  Спикер считает, что нужна рамка целей/ценностей, с которой необходимо сверяться в определении результатов практики.  «Такая рамка позволит донорам, экспертам и проектным командам «смотреть в одну сторону», поможет четче формулировать цели и результаты, и, определенно, повысит качество практик» — заметила Инна. Отдельно Инна обратила внимание на необходимость опираться на научные методики с доказанной эффективностью, которые  частично есть в доступе у российского профессионального сообщества.

Презентация И.Ширшовой здесь.

После выступления спикеров, участники обсудили барьеры для развития МиО в программах поддержки семей с особыми детьми и  роль сообщества практиков для развития мониторинга и оценки.

В частности, были выделены следующие темы:  

  • партнерство с медицинским сообществом и включение в дискурс доказательности компонентов клинической работы . «Мы должны взять более широкую концептуальную рамку, объединяющую медицину,  социальные науки … должен быть широкий экосистемный подход»
  • привлечение гос.учреждений к развитию доказательного подхода
  • «важна работа на формирование спроса со стороны заинтересованных сторон, прежде всего клиентов и заказчиков, буквально, чтобы стороны понимали, что работает и как это должно выглядеть»
  • больше кейсов о том, как результаты влияют на качество практик
  • демонстрация социально-экономической эффективности
  • активней привлекать донорское сообщество , в том числе и к финансированию доказательного подхода

В конце семинара  выступила Ольга Евдокимова с презентацией формирующейся базы знаний в области МиО по практикам работы с семьями c особыми детьми. В частности, Ольга представила:

1) Библиотеку Деревьев результатов и Логических моделей: https://pion.org.ru/newpion/library

2) Инструменты сбора обратной связи от благополучателей: https://base.socialvalue.ru/instrumentysbora/naytiinstrument/

3) Практики, описанные в соответствии с методологией Стандарта доказательности практик в сфере детстваhttp://deti.timchenkofoundation.org/praktiki/

Для удобства пользования вышеперечисленными ресурсами, не забывайте выбирать тип практики!

4) База типовых результатов и показателей по практикам в аналитическом отчете по 1-му семинару.

5) Системы МиО: БФ «Дети+»АНО «Содействие» (Тамбовская обл);

6)Пилотная  анкета-конструктор  для измерения субъективного благополучия родителей

Также Ольга отметила, что в конце марта откроется онлайн-курс «Оценка программ в сфере детства» и что все желающие могут записываться, оставив свои координаты в анкете. Этот курс может стать хорошим стартом для тех, кто в начале пути.

Презентация О.Евдокимовой.

Видео-запись семинара доступна по ссылке.

Благодарим всех спикеров и участников, а также Фонд Тимченко за информационную поддержку.

Итоги семинара «Мониторинг и оценка практик работы с семьями с особыми детьми»

3 ноября состоялся онлайн-семинар «Мониторинг и оценка практик работы с семьями с особыми детьми».

Семинар проведен в рамках тематической группы, объединяющей организации и практики, работающие в данной социальной проблематике.

В семинаре приняли участие 16 человек – специалисты и руководители организаций сферы детства.

Цель тематической группы:

  • популяризация темы мониторинга и оценки социальных практик, использования доказательного подхода к оценке результативности,
  • формирование базы знаний по мониторингу и оценке практик работы с семьями с особыми детьми» – практические наработки, методические ресурсы и пр.,
  • организация площадки для специалистов сферы детства по обмену опытом и поиску решений в области мониторинга и оценки программ, развитие компетенций.

Семинар включал три содержательных части.

  1. Первая часть семинара была посвящена методической поддержке организаций в области мониторинга и оценки.

Ресурсы для разработки системы измерения результатов: библиотеку логических моделей, деревьев результатов действующих практик в области поддержки особого детства представила Александра Горячева  (АНО «Эволюция и Филантропия»). Также в выступлении были представлены возможности методического ресурса – онлайн-сервиса ПИОН. Презентация доступна по ссылке.

Типичные сложности, возникающие в процессе мониторинга и оценки практик работы с семьями с особыми детьми, как точки их роста охарактеризовала Ирина Бобылева (БФ «Расправь крылья!»).С презентацией можно ознакомиться по ссылке.

2. Вторая часть семинара освещала опыт создания системы мониторинга и оценки в государственных и некоммерческих организациях через представление практических кейсов: как складывалась и развивалась система, какие трудности и ресурсы были у организации, какие возможности открыла перед организацией система МиО и каковы перспективы ее развития.

  • Опыт комплексного центра социального обслуживания населения города Череповца и Череповецкого района «Забота» представила Яна Зятикова.  Спикер охарактеризовала практику «Социальное обслуживание на дому детей с ОВЗ» с точки зрения доказательного подхода, и рассказала, каким у организации был путь повышения доказательности практики. Подробнее смотрите в презентации.
  • Опыт региональной общественной организации «Красноярский центр лечебной педагогики» раскрыла Оксана Матвеева. И в частности, рассказала о том, какой путь в МиО прошла организация, какие задачи стоят перед ней в настоящее время, какие социальные результаты и показатели к ним в системе МиО практики «Ранняя помощь». Подробнее смотрите в презентации.

3. Третья часть семинара была направлена на практическое решение задачи доработки системы мониторинга и оценки конкретной практики с учетом информационных потребностей всех стейкхолдеров. Форматом стала групповая работа.

  • Систему МиО программы «Хочу. Могу. Делаю» Центра содействия семейному устройству города Москва «Вера. Надежда. Любовь» представила Ирина Бобылева (БФ «Расправь крылья!»). Презентация по ссылке.

Данный кейс лег в основу групповой работы, в ходе которой участники отвечали на вопросы о том, какая информация о программе необходима разным группам стейкхолдеров, а именно – родителям особых детей, специалистам и администрации Центра. Результатом работы трех групп стали оценочные вопросы / результаты, важные для обозначенных заинтересованных сторон.

Запись семинара доступна по ссылке.

Аналитический отчет по семинару доступен по ссылке.

Семинар проведен  в рамках тематической группы «Семьи с особыми детьми» проекта «Онлайн-курс по оценке проектов и программ в сфере детства», который реализуется АНО «Эволюция и Филантропия» на средства гранта Президента Российской Федерации на развитие гражданского общества. Стратегическую поддержку проекта осуществляет также Фонд Тимченко.