Итоги семинара «Мониторинг и оценка практик работы социальных приютов и кризисных центров для матерей с детьми»

30 сентября состоялся семинар «Мониторинг и оценка практик работы социальных приютов и кризисных центров для матерей с детьми».

Семинар проведен в рамках тематической группы, объединяющей организации и практики, работающие в данной социальной проблематике.

В семинаре приняли участие 32 человека.

Цель тематической группы:

  • популяризация темы мониторинга и оценки социальных практик, использования доказательного подхода к оценке результативности,
  • формирование базы знаний по мониторингу и оценке практик работы кризисных центров/приютов для женщин с детьми – практические наработки, методические ресурсы и пр.,
  • организация площадки для специалистов сферы детства по обмену опытом и поиску решений в области мониторинга и оценки программ, развитие компетенций.

С практической точки зрения семинар дал возможность познакомиться с подходами к измерению результативности практик работы кризисных центров и социальных приютов для матерей с детьми, обсудить типичные сложности, возникающие в процессе мониторинга и оценки проектов.

На семинаре были представлены:

— Типовые результаты и показатели практик работы социальных приютов и кризисных центров – базовые основы системы мониторинга и оценки, на которые можно опираться при разработке собственной системы измерения результатов (А. Горячева, эксперт-координатор АНО «Эволюция и Филантропия». Презентация доступна по ссылке.

— Практические кейсы организаций:

  • Опыт Центра временного пребывания для мам с детьми «Теплый дом» в построении и использовании системы мониторинга и оценки (Т. Арчакова, психолог-методист, БФ «Волонтеры в помощь детям-сиротам») – как складывалась и развивалась система МиО, какие возможности открывает перед организацией. Подробнее смотрите в презентации.
  • Карта результатов Центра временного пребывания для мам с детьми «Теплый дом».

Карта результатов представляет собой подход к планированию и измерению социальных результатов практики, который помогает структурировать всю комплексную работу Центра в единую картину. Подход отражает возникающие у благополучателей проблемы, воздействия практики, ожидаемые изменения (результаты) и стратегии, которые используются для их достижения. Презентация по ссылке.

  • А.Осипова (психолог МОО «Аистенок») представила систему МиО кризисного отделения временного проживания для женщин с детьми в трудной жизненной ситуации. 

И в частности, рассказала о том, как организация подходит к сбору данных, какие инструменты использует, как сопоставляет оценки от трех вовлеченных сторон: проживающих женщин, их близкого окружения и работающих с ними специалистов, а также о границах применимости такого подхода. Подробнее можно ознакомиться в презентации.

В завершении участники прошли короткий опрос на предмет того, несколько материал семинара применим на практике. Большая часть участников достаточно высоко оценили практическую применимость. Также среди участников были организации, которые отметили готовность поделиться своими наработками в области мониторинга и оценки с участниками группы.

Запись семинара доступна по ссылке.

Аналитический отчет по семинару доступен по ссылке.

Семинар проведен в рамках проекта «Онлайн-курс по оценке проектов и программ в сфере детства», который реализуется АНО «Эволюция и Филантропия» на средства гранта Президента Российской Федерации на развитие гражданского общества. Стратегическую поддержку проекта осуществляет также Фонд Тимченко.

Итоги семинара «Мониторинг и оценка практик работы с замещающими семьями»

11 сентября прошел онлайн-семинар «Мониторинг и оценка практик работы с замещающими семьями».

В семинаре приняли участие руководители и специалисты НКО, ассоциаций замещающих родителей, государственных учреждений, работающих в области поддержки и сопровождения замещающих семей.Общее количество участников семинара — 40 человек, среди них представители 9-ти регионов.

В начале семинара модератор Светлана Строганова, руководитель Клуба «Азбука приемной семьи» БФ «Арифметика добра» представила общую повестку семинара и план предстоящей работы.

В первом выступлении, Александра Горячева, эксперт-координатор проектов АНО «Эволюция и филантропия», познакомила участников с типовыми результатами и показателями практик работы с замещающими семьями, методическими онлайн-ресурсами, которые могут быть полезны для специалистов в планировании системы мониторинга и оценки своих практик — онлайн-сервис «ПИОН: Планирование, измерение и оценка социальных результатов»; база методов и инструментов сбора данных от благополучателей «Слушай с пользой!». Также были отмечены возможные зоны роста с точки зрения планирования и выбора результатов и показателей, основанные на практическом опыте работы с организациями. Презентация доступна по ссылке.

Затем участники семинара в мини-группах обсудили задачи, которые перед ними стоят в области мониторинга и оценки, наиболее проблемные зоны. Среди них можно выделить следующие:

— поиск релевантных и валидных методов и инструментов сбора данных,

— определение ключевых результатов в случае оказания организацией комплекса услуг,

— определение того, когда и как проводить внутреннюю оценку,

— мотивация и вовлечение благополучателей в процесс МиО, поиск оптимальных инструментов сбора обратной связи и пр.

В основной части семинара несколько организаций представили свой опыт в области мониторинга и оценки, а также доказательности практик. Стоит отметить, что все организации находятся на разном этапе становления системы МиО – от начального  — когда система измерения и оценки результатов только складывается, до достаточно устоявшихся, реализуемых не один год систем МиО.

  1. Опыт двух организаций — БФ «Дети+»ЦССВ «Соколенок» представила Полина Гальцова, руководитель службы содействия семейному устройству, сопровождения кровных и замещающих семей, руководитель проектов Фонда.
  2. Как развивалась система мониторинга и оценки общественной организации Томской области (ООШРТО «Рука в руке»), рассказала в своем выступлении Горбунова Любовь, руководитель организации.
  3. Шевцова Людмила, начальник отдела подготовки семей и Харламова  Юлия, начальник отдела сопровождения семей представили опыт государственной организации — МКУ Центр «Созвездие», который заключался в описании практики в соответствии с методологией Стандарта доказательности социальных практик в сфере детства в рамках конкурса Фонда Тимченко,
  4. Опыт в мониторинге и оценке БФ «Солнечный город» представил Дмитрий Клочков, психолог Фонда. Данный кейс лег в основу группового практикума семинара.

После данного выступления, участники семинара разбились на группы, и обсуждали общую задачу, а именно – определяли подходы к оценке эффективности службы сопровождения замещающих семей через составление оценочных вопросов, необходимых для дальнейшей разработки дизайна системы мониторинга и оценки эффективности службы. Также в рамках групповой работы удалось подискутировать на тему того, что в целом закладывается в понятие «эффективность службы сопровождения».

Видеозапись семинара доступна по ссылке.

С Аналитическим отчетом по мероприятию можно познакомиться здесь.

Семинар проведен в рамках проекта «Онлайн-курс по оценке проектов и программ в сфере детства», который реализуется АНО «Эволюция и Филантропия» на средства гранта Президента Российской Федерации на развитие гражданского общества. Стратегическую поддержку проекта осуществляет также Фонд Тимченко.

Итоги семинара «Мониторинг и оценка практик работы с замещающими семьями»

11 сентября прошел онлайн-семинар «Мониторинг и оценка практик работы с замещающими семьями».

В семинаре приняли участие руководители и специалисты НКО, ассоциаций замещающих родителей, государственных учреждений, работающих в области поддержки и сопровождения замещающих семей.Общее количество участников семинара — 40 человек, среди них представители 9-ти регионов.

В начале семинара модератор Светлана Строганова, руководитель Клуба «Азбука приемной семьи» БФ «Арифметика добра» представила общую повестку семинара и план предстоящей работы.

В первом выступлении, Александра Горячева, эксперт-координатор проектов АНО «Эволюция и филантропия», познакомила участников с типовыми результатами и показателями практик работы с замещающими семьями, методическими онлайн-ресурсами, которые могут быть полезны для специалистов в планировании системы мониторинга и оценки своих практик — онлайн-сервис «ПИОН: Планирование, измерение и оценка социальных результатов»; база методов и инструментов сбора данных от благополучателей «Слушай с пользой!». Также были отмечены возможные зоны роста с точки зрения планирования и выбора результатов и показателей, основанные на практическом опыте работы с организациями. Презентация доступна по ссылке.

Затем участники семинара в мини-группах обсудили задачи, которые перед ними стоят в области мониторинга и оценки, наиболее проблемные зоны. Среди них можно выделить следующие:

— поиск релевантных и валидных методов и инструментов сбора данных,

— определение ключевых результатов в случае оказания организацией комплекса услуг,

— определение того, когда и как проводить внутреннюю оценку,

— мотивация и вовлечение благополучателей в процесс МиО, поиск оптимальных инструментов сбора обратной связи и пр.

В основной части семинара несколько организаций представили свой опыт в области мониторинга и оценки, а также доказательности практик. Стоит отметить, что все организации находятся на разном этапе становления системы МиО – от начального  — когда система измерения и оценки результатов только складывается, до достаточно устоявшихся, реализуемых не один год систем МиО.

  1. Опыт двух организаций — БФ «Дети+»ЦССВ «Соколенок» представила Полина Гальцова, руководитель службы содействия семейному устройству, сопровождения кровных и замещающих семей, руководитель проектов Фонда.
  2. Как развивалась система мониторинга и оценки общественной организации Томской области (ООШРТО «Рука в руке»), рассказала в своем выступлении Горбунова Любовь, руководитель организации.
  3. Шевцова Людмила, начальник отдела подготовки семей и Харламова  Юлия, начальник отдела сопровождения семей представили опыт государственной организации — МКУ Центр «Созвездие», который заключался в описании практики в соответствии с методологией Стандарта доказательности социальных практик в сфере детства в рамках конкурса Фонда Тимченко,
  4. Опыт в мониторинге и оценке БФ «Солнечный город» представил Дмитрий Клочков, психолог Фонда. Данный кейс лег в основу группового практикума семинара.

После данного выступления, участники семинара разбились на группы, и обсуждали общую задачу, а именно – определяли подходы к оценке эффективности службы сопровождения замещающих семей через составление оценочных вопросов, необходимых для дальнейшей разработки дизайна системы мониторинга и оценки эффективности службы. Также в рамках групповой работы удалось подискутировать на тему того, что в целом закладывается в понятие «эффективность службы сопровождения».

Видеозапись семинара доступна по ссылке.

С Аналитическим отчетом по мероприятию можно познакомиться здесь.

Семинар проведен в рамках проекта «Онлайн-курс по оценке проектов и программ в сфере детства», который реализуется АНО «Эволюция и Филантропия» на средства гранта Президента Российской Федерации на развитие гражданского общества. Стратегическую поддержку проекта осуществляет также Фонд Тимченко.

Социальные практики Вологодской области на пути повышения доказательности

23 июля 2020 года состоялась онлайн встреча «Социальные практики в сфере детства на пути повышения доказательности», организатором которой выступил Благотворительный фонд «Дорога к дому» компании «Северсталь»
как региональный представитель проекта «Стандарт 2.0: комплексная поддержка СО НКО на пути повышения доказательности практик в сфере детства».

В мероприятии приняли участие 42 представителя сферы защиты детства из 26 некоммерческих, общественных и государственных организаций, учреждений социальной защиты, образования, здравоохранения и другие заинтересованные в повышении эффективности деятельности в сфере защиты детства специалисты. Несмотря на то, что мероприятие освещало преимущественно деятельность Вологодской области, к презентации присоединились специалисты их Севастополя, Смоленска, Свободного Амурской области, Москвы, Хабаровска, ХМАО. В Вологодской области география участников включает 5 населенных пунктов: Череповец, Вологда, Великий Устюг, Сокол, Чагода.

На встрече Стандарт доказательности социальных практик в сфере детства представила Татьяна Подушкина, руководитель Центра доказательного социального проектирования МГППУ. Она рассказала о его структуре и возможностях, как для новичков в теме, так и для организаций и специалистов с опытом. 

Описание практик в доказательном ключе – задача не простая, но полезная. Наталия Логинова, руководитель отделения содействия семейному устройству БУ СО ВО «Череповецкий ЦПД «Наши дети», руководитель проекта БФ «Дорога к дому» «Вместе ради детей» в ходе презентации практики по благополучному семейному устройству детей-сирот и детей, оставшихся без попечения родителей, описанной с использованием методологии Стандарта, пояснила: «Описывая свою практику мы пришли к выводу, что пора менять критерии готовности воспитанника к его передаче на семейные формы устройства, которые мы используем при диагностике, потому что за последние годы значительно сократилось время, которое ребенок находится в учреждении».

Ольга Цыбанова, методист Управления образования мэрии г. Череповца по направлению «Дошкольное образование», руководитель проектов БФ «Дорога к дому» «Новый путь», «Здоровая семья для ребенка» отметила, что работа по описанию практики реабилитационных клубов поддержки семей в кризисной ситуации «позволила ответить на такие вопросы, как: является ли достаточным ресурсное обеспечение практики для достижения социальных результатов, соответствует ли деятельность изначальному плану, как меняются модели поведения благополучателей. Также мы сократили количество показателей, которые использовали, выбрав только те, непосредственно демонстрируют достижение результатов».

Оба представленных кейса в этом году стали победителями конкурса фонда Елены и Геннадия Тимченко «Реестр (банк) доказательных практик».

Разработать, апробировать, внедрить, описать и оценить практики в сфере детства позволяет реализация проектов БФ «Дорога к дому». Для этого нужно принять участие в открытом конкурсе социальных проектов, который в этом году пройдет с 3 по 31 августа. Директор Фонда, Екатерина Фрыгина, привела примеры уже реализованных проектов Фонда по направлениям конкурса, а руководитель ресурсно-методического центра, Алена Богомолова, пояснила при заполнении каких разделов заявки может максимально пригодиться Стандарт.     

По ссылке доступны запись и материалы вебинара.

Проект «Стандарт 2.0: комплексная поддержка СО НКО на пути повышения доказательности практик в сфере детства» реализуется «АНО «Эволюция и Филантропия», при поддержке Фонда президентских грантов и Фонда Тимченко.

Итоги онлайн-сессии «Доказательный подход к исследованию, оценке и проектированию социальных практик» с участием Альнура Эбрахима (Alnoor Ebrahim)

16 июня состоялась онлайн-сессия научно-практического семинара «Доказательный подход в области исследования, оценки и разработки социальных практик».

С лекцией выступил профессор Школы права и дипломатии Флетчера при университете Тафтса Альнур Эбрахим (США). Он представил основные идеи своей книги «Измерение социальных изменений: эффективность и подотчетность в сложном мире» (Measuring Social Change: Performance and Accountability in a Complex World), вышедшей в прошлом году в издательстве Стэнфордского университета.

Альнур Эбрахим рассказал о результатах своих многолетних исследований деятельности некоммерческих организаций. Наибольший интерес вызвала предложенная Альнуром Эбрахимом модель типов организаций, в основание которой положены два измерения: концепция изменений, на которую опирается организация, и операционная стратегия, которой она главным образом следует. По мнению участников семинара, данная модель может быть очень полезна при разработке типологии социальных практик и методологии оценки их эффективности в зависимости от типа.

На семинаре речь шла о двух различных исследовательских стратегиях в оценке эффективности социальной деятельности – аттрибутивной и контрибутивной. И если первая (аттрибутивная) стратегия хорошо известна психологам и представляет собой оценку эффекта производимых психологических или социальных интервенций с использованием рандомизированных контролируемых исследований, то вторая (контрибутивная) стратегия очень часто выпадает из поля внимания исследователей, хотя в ряде случаев, когда наблюдаемый эффект является следствием целого комплекса факторов, мы не можем строго оценить отношения между конкретными практическими действиями и наблюдаемым эффектом, но можем ретроспективно описать возможный вклад в него этих действий.

Нам нужно избавиться от детской фантазии, что мы можем гарантировать объективную оценку того, что делают другие, – цитирует Альнур Эбрахим философа Онору О’Нил. И тем не менее, нам нужно понимать, что они делают, и нужно оценивать эффективность их действий. Культура оценки, культура измерения в условиях понимания особенностей той деятельности, которая является предметом оценки, – вот о чем, в конечном счете, шла речь на итоговой сессии семинара. Семинар вызвал огромный интерес как у представителей академического сообщества, так и у специалистов-практиков, представителей НКО и государственных структур.       

Материалы можно посмотреть здесь и здесь.

Презентация книги «Измерение социальных изменений: эффективность и подотчетность в сложном мире» (Measuring Social Change: Performance and Accountability in a Complex World).

Запись семинара можно посмотреть здесь.        

Семинар организован в рамках научно-исследовательского проекта «Доказательный подход к обоснованию и изучению результатов социальных практик» Московского государственного психолого-педагогического университета при поддержке Межотраслевого профессионального объединения «Оценка в сфере детства», Благотворительного фонда Елены и Геннадия Тимченко, а также в партнерстве с проектом «Стандарт 2.0», реализуемым АНО «Эволюция и Филантропия» при поддержке Фонда президентских грантов. 

Онлайн-семинар 16 июня «Доказательный подход к исследованию, оценке и проектированию социальных практик» с участием Альнура Эбрахима (Alnoor Ebrahim)

16 июня с 17.00 до 19.00 (по Мск) состоится очередная рабочая сессия научно-практического онлайн-семинара «Доказательный подход к исследованию, оценке и проектированию социальных практик».

В первой части семинара планируется выступление приглашенного спикера — Альнура Эбрахима (Alnoor Ebrahim), профессора Школы права и дипломатии Флетчера, США (The Fletcher School of Law and Diplomacy).

В 2019 году вышла книга Альнура Эбрахима “Measuring Social Change: Performance & Accountability in a Complex World”, Stanford University Press («Измерение социальных изменений: эффективность и подотчетность в сложном мире»).

В этой книге А. Эбрахим представляет различные модели управления социальной эффективностью в зависимости от сложности социальных преобразований и операционной стратегии организации. А. Эбрахим в своей публикации предлагает 4 типовые стратегии осуществления социальных преобразований и соответствующие подходы к управлению эффективностью в рамках этих стратегий. 
Данная работа является развитием методологического подхода по определению границ влияния НКО на общественные преобразования. Подробнее можно прочитать здесь.​​​​

Во второй части семинара пройдет панельная дискуссия с участием экспертов в области оценки программ и проектов, руководителей и практиков сферы детства и представителей академического сообщества.

Ведущие семинара:

  • Бусыгина Наталия Петровна – к.пс.н., доцент кафедры индивидуальной и групповой психотерапии факультета консультативной и клинической психологии МГППУ;
  • Подушкина Татьяна Геннадиевна – руководитель Центра доказательного социального проектирования МГППУ.

Семинар организован в рамках научно-исследовательского проекта «Доказательный подход к обоснованию и изучению результатов социальных практик» Московского государственного психолого-педагогического университета при поддержке Межотраслевого профессионального объединения «Оценка в сфере детства», Благотворительного фонда Елены и Геннадия Тимченко, а также в партнерстве с проектом «Стандарт 2.0», реализуемым АНО «Эволюция и Филантропия» при поддержке Фонда президентских грантов. 

К участию приглашается широкий круг заинтересованных специалистов. Семинар пройдет на онлайн-платформе Zoom, требуется предварительная регистрация на участие: ЗАРЕГИСТРИРОВАТЬСЯ НА ОНЛАЙН-СЕМИНАР ПО ССЫЛКЕ.

Ссылки на видео предыдущих семинаров:

Онлайн-курс «Оценка проектов и программ в сфере детства»

Об онлайн-курсе

Онлайн-курс «Оценка проектов и программ в сфере детства», основанный на передовом международном и российском опыте, дает обширную теоретическую базу знаний по оценке cоциальных программ, предлагает освоение практических навыков, инструментов для внедрения и развития в организациях сферы детства процессов и практик мониторинга и оценки. Курс разработан сотрудниками АНО «Эволюция и Филантропия», а также ведущими экспертами в области оценки программ и специалистами в сфере детства.

Прохождение онлайн-курса подразумевает изучение текста и видео материалов в соответствие с предлагаемым расписанием; выполнение тестов и практических заданий; участие в  групповых обсуждениях. Онлайн-курс размещен на онлайн-платформе Stepic.

Всем слушателям, успешно завершившим онлайн-курс, будет выдан соответствующий сертификат.  

Онлайн-курса состоит из следующих модулей:

·       Введение в оценку эффективности социальных программ

·       Планирование результатов и показателей социальных программ в сфере детства.

·       Методология измерения результативности. Методы сбора данных. Анализ данных. 

·       Вовлечение благополучателей в оценку. Оценка с участием детей.

·       Развитие культуры и практики оценки социальных программ. 

Онлайн-курс «Оценка программ и проектов в сфере детства» подготовлен в рамках проектов АНО «Эволюция и Филантропия» «Виртуальный ресурсный центр по оценке эффективности для организаций сферы детства«, который реализуется на средства гранта Комитета общественных связей и молодежной политики города Москвы  и «Онлайн-курс по оценке проектов и программ в сфере детства«, который реализуется на средства гранта Президента Российской Федерации на развитие гражданского общества. Стратегическую поддержку проектов осуществляет также Фонд Тимченко.

Для кого этот онлайн-курс

Руководители и ключевые программные сотрудники организаций сферы детства.

Знание предметной области  — не ниже начального.

Особых технических навыков не требуется. 

Эксперты онлайн-курса

  • Арчакова Татьяна Олеговна (Благотворительный фонд «Волонтеры в помощь детям-сиротам», Благотворительный детский фонд «Виктория», психолог-методист);
  • Вохмянина Ольга Владимировна  (АГО «Форум Доноров», руководитель направления по связям с общественностью);
  • Евдокимова Ольга Анатольевна (Автономная некоммерческая организация поддержки и развития инноваций в социальной сфере «Эволюция и Филантропия», исполнительный директор); 
  •  Ефремова-Гарт Ирина Юрьевна  (Компания IBM Россия / Восточная Европа / Азия,  руководитель направления «корпоративное гражданство корпоративные отношения»);
  • Колосова Анна Игоревна (сотрудник Института институциональных исследований НИУ ВШЭ);
  • Кошелева Наталья Александровна (ООО «Компания «Процесс Консалтинг», специалист по оценке);
  • Кузьмин Алексей Иосифович (ООО «Компания «Процесс Консалтинг», директор);
  • Подушкина Татьяна Геннадьевна (Московский государственный психолого-педагогический университет (МГППУ), руководитель Центра доказательного проектирования);
  • Рождественская Надежда Васильевна (РГПУ им. А. И. Герцена г. Санкт-Петербург, кандидат экономических наук, доцент кафедры отраслевой экономики и финансов института экономики и управления);
  • Фреик Наталия Викторовна (независимый эксперт, кандидат социологических наук);
  • Шамрова Дарья Павловна  (PhD, директор лаборатории оценки социальных программ при Школе социальной работы Государственного университета Вичиты (Канзас, США)).

Наши спикеры

Аватар пользователя

Ольга Евдокимова Директор АНО «Эволюция и Филантропия»Образование – высшее, экономическое. С отличием закончила бизнес-школу Университета г. Антверпен. Около 10 лет работала на различных руководящих позициях в финансовом секторе – в Банке УралСиб и его дочерних структурах (2013 – 2014гг. – член Совета Директоров ФК УралСиб).

В некоммерческом секторе с 2004 года, возглавляла несколько некоммерческих организаций. Руководила созданием и становлением Благотворительного детского Фонда «Виктория». Инициатор и основатель таких профессиональных объединений как «Оценка социальных программ, проектов и услуг в сфере детства» ( член Координационного Совета); «Ассоциация Фандрайзеров» ( 2014-2015 гг. — член Совета Ассоциации). Эксперт в области менеджмента НКО, международной филантропии и Cоздания Общей Ценности. Аккредитованный консультант международной инициативы «Общая ценность», сертифицированный специалист по оценке социального возврата на инвестиции (SROI). Член Правления Ассоциации специалистов по оценке программ и политик, эксперт Фонда президентских грантов и ряда других грантодателей.

Аватар пользователя

Dasha Shamrova PhD, MSW, MPA Кандидат наук (социальная работа), преподаватель в Школе социальной работы при Университете Вичиты (Канзас), США Консультант по оценке программ в АНО «Эволюция и Филантропия». Занимаюсь оценкой около 8 лет. Специализируюсь на оценке социальных результатов программ в сфере детства.

Консультирую организации по вопросам дизайна программы, разработки показателей и способов их измерения, а также подбора дизайна оценки программных результатов. В своей практике я использую как количественные, так и качественные методы оценки. Мне интересно работать с статистическим анализом данных и визуализацией, а также применять оценочные техники, связанные с организацией участия детей в принятии решений через оценку. В особенности, я специализируюсь на методологии Фотоголоса, которая дает ребенку возможность выражения мнения, подходящего по возрасту (и часто уровню развития). Последние оценочных проектов при моем участии включают оценку социальных результатов психолого-педагогической поддержки родителей, воспитывающих детей с ограниченными возможностями здоровья для РООРДИ «Дорогою Добра» (Киров, Россия), оценку программы альтернативного образования детей, совершивших правонарушения, с использованием Фотоголоса для МакАдамс Академи (Вичита, США) и оценка программы предотвращения попадания детей с психическими расстройствами в пенетенциарную систему (Лэнсинг, США). Также, я преподаю семестровый курс по оценке программ для магистров социальной работы в Государственном университете Вичиты (Канзас, США), благодаря партнерству с Эволюцией и Филантропией провожу онлайн вебинары и консультации для организаций в сфере детства в России. Являюсь членом Экспертного совета, консультантов и верификатором практик в рамках проекта «Стандарт доказательности социальных практик в сфере детства» и членом Межотраслевого профессионального объединения «Оценка программ в сфере детства».

Аватар пользователя

Наталья Кошелева Специалист по оценке, Компания «Процесс Консалтинг»Занимаюсь оценкой проектов и программ с 1996 года. Основные компетенции: проведение оценки проектов и программ социальной направленности, разработка и сопровождение систем мониторинга и оценки, обучение мониторингу и оценке.

Аватар пользователя

Александра Горячева Эксперт-координатор проектов «АНО «Эволюция и Филантропия»Магистр психолого-педагогического образования, магистерская программа «Проектирование психолого- педагогической деятельности в негосударственных организациях». В некоммерческом секторе работаю около 10 лет. Являюсь экспертом Фонда Елены и Геннадия Тимченко, в том числе занимаюсь консультированием организаций сферы детства в вопросах мониторинга и оценки, Член Межотраслевого профессионального объединения «Оценка программ в сфере детства». Проходила стажировку по теме «Оценка с участием детей», декабрь 2017, Великобритания.

1-й поток онлайн-курса

Пилотирование онлайн — курса проходило с 1 по 30 июня 2020 года. На курс было набрано 28 участников, 25 из них получили сертификаты о прохождении курса.

2 июля прошел итоговый круглый стол, в котором приняли участие 23 человека — участники первой (пилотной) группы дистанционного курса «Оценка проектов и программ сферы детства». Подробнее о подведенных итогах можно прочитать в заметке.

Тогда же была проведена фокус группа с участниками пилотного курса «Оценка проектов и программ в сфере детства». С полным текстом оценки пилотирования онлайн курса можно ознакомиться здесь.

2-й поток онлайн-курса

Курс проходил с 6 июля по 28 августа 2020 года. На втором потоке было 32 участника, из них 28 человек получили сертификаты о прохождении Курса.

28 августа прошел итоговый круглый стол с участниками второго потока онлайн-курса «Оценка проектов и программ сферы детства».

Мероприятие проходило в онлайн-формате, в нем приняли участие 16 слушателей.

В начале состоялись две параллельные фокус-группы, целью которых было обсуждение возможных дальнейших шагов по развитию и совершенствованию курса – выявление сильных сторон и зон развития, направлений повышения его результативности (эффективности) как с точки зрения содержания, так и процесса прохождения курса.

Фокус-группы проводили приглашенные специалисты, социологи – Светлана Сергеева и Наталья Полярная.

Отчет о результатах прохождения курса участниками второго потока можно посмотреть по ссылке.

Подробнее с итогами курса можно ознакомиться здесь.

3-й поток онлайн-курса

3 поток проходил с 7 сентября по 30 октября.

Всего курс прошли 46 слушателей из 29 организаций из 19 регионов!  21 человек окончили курс с отличием! 

30 октября прошел итоговый круглый стол с участниками 3-го потока онлайн-курса «Оценка проектов и программ сферы детства». Мероприятие проходило в онлайн-формате.

Во времы круглого стола приглашенные специалисты, социологи – Светлана Сергеева и Наталья Полярная провели две параллельные фокус-группы для определения возможных дальнейших шагов по развитию и совершенствованию курса, выявления сильных сторон и зон развития, направлений повышения результативности (эффективности) как с точки зрения содержания, так и процесса прохождения курса. Отчет по результатам фокус-групп можно посмотреть здесь.

Подробнее о финальном мероприятии можно прочитать в заметке.

Итоги рабочей сессии «Подходы к классификации социальных практик и методы их исследования» 19 мая 2020 года

19 мая 2020 года в МГППУ состоялась очередная рабочая сессия научно-практического семинара «Доказательный подход к исследованию, оценке и проектированию социальных практик».

Мероприятие было посвящено анализу оснований классификации социальных практик, позволяющих дифференцированно подходить к выбору дизайна и методов исследования их эффектов.

В начале семинара Алексей Кузьмин, международный консультант по оценке программ и организационному развитию, представил модель Кенэвин, помогающую учитывать характер ситуации в которой  реализуется социальная практика. В модели предлагается  4 типа ситуаций – простая, сложная, динамическая, хаотичная.  Эти типы отличаются между собой характером причинно-следственных связей, степенью предсказуемости событий и т.д. То, к какому типу ситуации относится проблема, во многом зависит от подготовленности, степени осведомленности людей, которые с ней имеют дело. Презентация доступна по ссылке.

Наталия Бусыгина в своем выступлении представила «Теорию оценки социальных изменений» А. Эбрахима.

Основные пункты теории:

  • уровни эффектов социальных практик;
  • логическая модель оценки;
  • структурная рамка для принятия решений об оценке социальных эффектов (структурная рамках обстоятельств);
  • методы и методологии оценки эффектов.

Более подробно в докладе была раскрыта тема структурной рамки обстоятельств, которая помогает классифицировать социальные практики и выбирать соответствующие методологические подходы к оценке их результатов. Презентацию смотрите тут.

Татьяна Подушкина рассказала о факторах, влияющих на выбор подходов к оценке эффективности социальных практик. Презентация по ссылке.

В докладе была представлена динамика развития ситуации в зоне социальных рисков: потенциал возникновения (норма) > возникновение риска (кризис) > реализация риска > необратимые последствия.

Как правило, организация/практика работает на одной из зон. Если на всех, то это, как правило, комплексные модели/программы помощи, которые требуют больших ресурсов. И в этом случае возрастают требования к квалификации специалистов, увеличивается длительность сопровождения.

Таким образом, ключевые факторы, которые влияют на определение типа практики — длительность сопровождения и комплексность подхода к оказанию помощи.

В соответствии с этими факторами можно выделить 4 типа практик – быстрая помощь (временное снижение остроты кризисной ситуации), помощь в решении проблемы (разрешение кризисной ситуации), помощь и сопровождение в ситуации, где проблема не может быть решена и профилактика возникновения проблемы.

Чем сложнее ситуация фокуса социально-психологической помощи, тем менее видимые изменения можно продемонстрировать. Последние 2 типа практик в предложенной классификации наиболее «уязвимы» с точки зрения представления доказательств, свидетельств результативности.

В завершении семинара прошла панельная дискуссия, в качестве дискутанта выступил Владимир Балакирев (специалист и консультант по оценке социальных программ), высказав свое видение относительно представленных моделей и возможностей их применения в области исследования эффектов социальных практик.  Общие выводы представлены ниже.

Основания для выбора методологии оценивания социальных практик:

  • задача оценивания (зачем?);
  • характеристики ситуаций, с которыми организация имеет дело (контекст применения практики, нечто внешнее, в том числе законодательство, мнение лиц, принимающих решения и т.д.);
  • характеристики реализуемой практики, в том числе ее сложность (комплексность воздействия, долгосрочность и т.д.);
  • типология результатов практики — краткосрочные результаты, либо более отложенные;
  • с чем мы имеем дело? С практикой/проектом/программой? Важно понять, с каким типом воздействия имеем дело;
  • стоимость оценки;
  • компетенции специалистов, проводящих оценку.

Для учета всех факторов может быть составлена некая матрица для оценивания.

Вопросы, затронутые в процессе дискуссии участников:

  • разделение понятий «практика/проект/программа» — стоит ли разделять понятия, четко очерчивать их границы. В том числе определение «практики», заложенное в Стандарте доказательности социальных практик сферы детства;
  • изучение разных факторов воздействия  — поиск инструментов. Влияние практики – сложная задача, но такие методы есть. Есть подходы, позволяющие оценить влияние практики. Подбор инструментов – индивидуально стоит рассматривать в каждом конкретном случае;
  • вопрос об объективной оценки результатов (Возможно ли это? Как сделать оценку объективной?);
  • противоречие между требования доноров – ситуации, когда донор требует быстрых результатов (в перспективе года), но при том – ожидание, что это будут фундаментальные результаты, предполагающие системные изменения. Что не соответствует действительности, т.к. в случае системных изменений речь идет о более долгосрочных социальных результатах;
  • важность диалога с донорами, постановка вопроса об ожиданиях социальных эффектов.

Видеозапись семинара по ссылке:

Итоги вебинара «Подготовка описания практики в соответствии со Стандартом доказательности социальных практик в сфере детства»

15 мая состоялся вебинар «Подготовка описания практики в соответствии со Стандартом доказательности социальных практик в сфере детства».

В мероприятии приняли участие 33 представителя организаций сферы детства, из них 12 участников из Москвы, 21 участник – из 10-ти регионов РФ.

Спикером выступила Ольга Евдокимов, директор АНО «Эволюция и Филантропия».

На вебинаре разбиралась структура описания практики в соответствии с методологией Стандарта, состоящая из 5-ти разделов:

  1. Общая информация о практике,
  2. Краткое описание практики,
  3. Регламентированность практики,
  4. Обоснованность практики,
  5. Данные о достижении социальных результатов и влиянии практики.

Подробно были рассмотрены типичные вопросы, сложности, возникающие при подготовке описания практик, даны рекомендации по заполнению. Участникам также были обозначены разделы и вопросы формата, на которые особенно стоит обратить внимание при подготовке практики к профессиональной верификации. С презентацией можно ознакомиться тут.

Запись вебинара доступна по ссылке.

Мероприятие проведено в рамках проектов АНО «Эволюция и Филантропия»  — «Стандарт 2.0: комплексная поддержка СО НКО на пути повышения доказательности практик в сфере детства», проект реализуется с использованием гранта Президента Российской Федерации на развитие гражданского общества, предоставленного Фондом президентских грантов, а также «Виртуальный ресурсный центр по оценке эффективности для организаций сферы детства», проект реализуется при поддержке Комитета общественных связей и молодежной политики города Москвы. Поддержку проектов также осуществляет Фонд Тимченко.

Опубликованы новые переводы

  1. Как проводятся Рандомизированные контролируемые исследования (РКИ), (NFER — The National Foundation for Educational Research; Великобритания).
  2. Обзор результатов «Четырехгодичное рандомизированное контролируемое исследование (РКИ)», (WINGs helping kids soar).