Онлайн-курс «Оценка программ в сфере детства» за период 2020-2021 гг окончили более 150 выпускников . Сводные результаты оценки курса за 2021 год 22 февраля 2022 на Форуме «Оценка программ в сфере детства» представили Ольга Евдокимова и Светлана Сергеева (презентация).
Участникам Форума был задан вопрос по поводу возможности проходить обучение на платной основе. Количество ответивших ( 20 чел) было таково, что делать обобщающие выводы было бы неправильно, однако принять к сведению полученные результаты можно.
24 сентября 2021 были проведены фокус-группы по оценке онлайн-курса «Оценка проектов и программ в сфере детства».
Общее количество участников фокус-групп – 42 человек, по 14 в каждой фокус-группе. Онлайн-курс «Оценка проектов и программ в сфере детства» закончили 55 человек. Таким образом, в фокус-группах приняло участие большинство (84 %) завершивших обучение. На фокус-группах участники отвечали на вопросы полуструктурированного интервью. Проводили фокус-группы к.с.н. Сергеева Светлана Юрьевна, к.с.н. Полярна Наталья Геннадьевна, к.п.н. Асташина Екатерина Евгеньевна.
Целью оценки было определить направления повышения результативности онлайн-курса «Оценка программ и проектов в сфере детства».
Анализ материалов фокус-групп позволяет сделать следующие выводы:
Качество онлайн курса участники оценили как высокое, позволяющее создать после завершения курса основу для внедрения системы МиО программ и проектов в организациях. Было преодолено отношение к МиО как к чему-то чрезвычайно сложному. Слушатели курсов приобрели системные знания о мониторинге и оценивании, что позволяет использовать эти инструменты осознанно, с учетом особенностей каждой организации.
В ходе курса произошло формирование целостной картины процесса МиО. Этот результат внешне схож с предыдущим (формирование системных знаний о МиО), в то же время, в нем есть важный отличительный аспект. Формирование целостной картины процесса МиО означает, что слушатель курса воспринял этот процесс как четкий алгоритм, то есть строгую последовательность действий. Повысился уровень знаний по таким аспектам социального проектирования, которые тесно связаны с МиО. Среди них – знания о том, как правильно формулировать результаты проекта, выстраивать логические цепочки результатов пр.
Возросла готовность к взаимодействию с внешним специалистом по оцениванию.
Неожиданным эффектом курса стало улучшение взаимодействия внутри организации благодаря совместной работе микрогрупп из членов одной организации.
Система вышеназванных эффектов обеспечила такой результат, как повышение готовности разрабатывать и внедрять МиО в деятельность организации.
Слушатели курса оценили полезность групповых обсуждений как очень высокую, определив эти обсуждения как «изюминку курса». Групповые обсуждения позволили обменяться практическим экспертным опытом. Участники курсов, которые не имеют такого опыта, восприняли его от более компетентных коллег в доступной для понимания форме.
Формат домашних заданий был оценен в целом высоко. При этом некоторые участники курса заявили, что они не всегда понимали, чего именно от них хотят в домашнем задании, а обратная связь по поводу сделанных ошибок была недостаточно подробной.
Дальнейшая поддержка со стороны АНО «Эволюция и филантропия» внедрения систем МиО в организациях желательна в следующих формах:
Сопровождение команд сотрудников организаций, внедряющих системы МиО, мотивация этих команд и поддержка их командного потенциала.
Консультации экспертов АНО «Эволюция и филантропия» по практическим аспектам внедрения и использования систем МиО.
Продолжить сбор и обобщение конкретных практик/ситуаций использования МиО, распространение этой информации.
Анализ материалов фокус-групп убедительно свидетельствует о положительной динамике развития онлайн-курса.
Полный текст отчета по анализу материалов фокус-групп доступен по ссылке.
24 сентября прошла финальная встреча участников онлайн-курса «Оценка программ в сфере детства». Всего на курс записалось более 60 участников, из них сертификаты получили 54 человека. При этом 34 слушателя получили сертификат с отличием (80% от максимальной суммы баллов). Это представители 43 организаций сферы детства из 23 регионов РФ. 13 организаций учились командами от 2-х до 6-ти слушателей. «Мы благодарим всех слушателей курса за их вовлеченность, мотивацию в освоении не самого простого специализированного контента», — отметила Ольга Евдокимова.
Это был не самый короткий путь в 8 насыщенных недель, за которые слушателям пришлось освоить 7 модулей/ 23 урока; пройти 70 тестов; просмотреть 37 видео-роликов; выполнить 12 домашних заданий; принять участие в 6 рабочих обсуждениях.
«Отличный курс, высокая плотность материалов, много дополнительных. Информация представлена с разных сторон, достаточно комплексно. Получилось полное погружение в тему на пару месяцев. Вся работа в организации теперь воспринимается по-новому. Культура оценки у нас точно повысилась», — поделилась своим впечатлением о курсе Антонина Попова (БФ «Волонтеры в помощь детям-сиротам»)
«Курс очень сильный и насыщенный. Практически второе высшее образование в области оценки! Конечно, пройти его не просто: требуется большая аналитическая работа с данными, с опытом других. Еще нужна команда тех, кто заинтересован в такой оценке на уровне учреждения. Как бы то ни было — очень важный курс! Браво преподавателям и организаторам!» — считает Елена Корытова (Областное государственное бюджетное учреждение «Смоленский социально-реабилитационный центр для несовершеннолетних «Феникс»).
На основе сравнения входящего и финального теста, мы видим рост уровня знаний в среднем на 30% и это хороший результат, лучший из всех четырех потоков за период 2020-2021 год. Анализ анкет обратной связи, решения тестов и выполнения домашних заданий также позволяют нам делать вывод о росте компетенций слушателей курса.
«Весь материал, полученный в ходе изучения курса очень полезный, информативный и необходимый в дальнейшей работе, особенно мне, как молодому, начинающему специалисту», — Надежда Уланова (ОГБУСО «Социально-реабилитационный центр для несовершеннолетних Братского района»).
«Очень полезный курс в плане применения полученных знаний в работе, много взяла для реализации своей практики, начиная от разработки логической модели, теории изменений и заканчивая подбором инструментов» (из анонимной анкеты).
Индекс лояльности по итогам анонимной анкеты (приняло участие 28 человек по состоянию на 24 сентября) составил 71,4%, что является хорошим результатом.
«Отличный курс для повышения компетенций по теме оценки и мониторинга, содержащий обширный теоретический материал, предоставляющий возможность освоения практических навыков и инструментов для внедрения в деятельность организации сферы детства практик мониторинга и оценки. Материал достаточно сложный, но структура курса и наличие ссылок на дополнительные материалы способствуют овладению знаниями. Отдельное спасибо преподавателям курса за доступность изложения информации. Курс рекомендую», — Марина Ушакова (Муниципальное бюджетное учреждение города Челябинска «Центр помощи детям, оставшимся без попечения родителей, «Акварель»).
Анализ планов внедрения знаний в практическую деятельность организаций позволяет сделать вывод о том, что большинство слушателей будут далее работать над системой показателей и методами их сбора, что является дополнительным подтверждением приоритетного развития внутренней оценки в организациях.
Основная сложность курса, которая была отмечена слушателями – это его продолжительность, и как следствие необходимость наличия большого временного ресурса, что может позволить себе далеко не каждая организация или специалист.
«Много полезной и практически применимой информации, и в тоже время сложно совмещать с работой».
«Курс очень насыщенный. Сложно встроить такой объем в свой рабочий режим».
«Курс ценный, но трудоемкий, трудно найти столько времени и сил».
Также участники отмечали следующие cложности или особенности курса:
«Не каждый специалист готов рассуждать об исследованиях в социальной сфере, многие просто практики».
«Лучший курс для погружения в тему от профессионалов, НКО важно осмысленное отношение. Не каждый из коллег осилит, поэтому 9.» (из анонимной анкеты. 9 – объяснение, почему не 10 баллов по индексу лояльности).
Некоторые слушатели отдельно отмечали пользу работы в онлайн-сервисе ПИОН.
«Также у меня произошло приятное знакомство с сервисом ПИОН, которое оказалось не таким страшным, как я думала раньше», — Татьяна Мохова (Челябинское региональное благотворительное общественное движение помощи онкобольным детям «Искорка Фонд»).
По итогам обратной связи о работе в онлайн-сервисе ПИОН, мы сделали выводы, что наибольшей ценностью для пользователей является возможность составить и скачать цепочку результатов в некоем приличном виде, а наименьшую ценность – это наличие личных библиотек результатов. Мы постараемся учесть все ваши замечания и предложения. Отдельное спасибо Ольге Заводилкиной за поддержку этого направления.
Отдельная благодарность всем ведущим курса – Татьяне Подушкиной, Екатерине Богомоловой, Ольге Заводилкиной, Наталье Кошелевой и кураторам тематических площадок, которые принимали самое активное участие в рабочих обсуждениях – Татьяне Арчаковой, Ирине Бобылевой, Инне Голеня, Ольге Заводилкиной.
«Мне понравился материал, домашние задания, встречи в маленьких группах и наш куратор там — Татьяна Арчакова» (из анонимной анкеты).
«Супер полезна была деятельность на орг встречах (обсуждение кейсов или домашних заданий), отдельное спасибо Ольге Заводилкиной!» — Татьяна Мохова (Челябинское региональное благотворительное общественное движение помощи онкобольным детям «Искорка Фонд»).
Более подробный разбор сильных и слабых сторон курса, его влияния на рост компетенций и культуры в области оценки программ будет сделан в отчете по итогам фокус-групп, которые провели внешние модераторы. Отчет будет доступен широкой аудитории.
С 7 июля по 20 июля открыт конкурсный набор на онлайн-курс «Оценка программ в сфере детства». Для участия в конкурсном отборе необходимо до 20 июля включительно заполнить анкету по ссылке.
Сроки прохождения курса — со 2 августа и по 25 сентября 2021 года.
Этот уникальный курс основан на передовом международном и российском опыте, дает обширную теоретическую базу знаний по оценке социальных программ, предлагает освоение практических навыков, инструментов для внедрения и развития в организациях сферы детства процессов и практик мониторинга и оценки. Он был разработан ведущими экспертами в области оценки программ и специалистами в сфере детства.
Прохождение курса подразумевает:
(1) Чтение всех материалов курса, прохождение коротких тестов;
(2) Просмотр дополнительных материалов, в том числе вебинаров (по желанию, но очень рекомендуем для более полного освоения тем);
(3) Выполнение домашних практических заданий; в том числе финального;
(4) Участие в вебинарах по итогам прохождения каждого модуля;
(5) Прохождение входного и выходного тестирования;
(6) Предоставление обратной связи по курсу (анонимное анкетирование по итогам похождения каждого модуля) и участие в финальной фокус-группе.
(7) Активное участие в работе тематических групп (вне рамок курса) по обсуждению практических вопросов доказательности практик.
Мы предполагаем, что в неделю в среднем вам надо будет высвободить не менее 4-х -5 ти часов на прохождения модуля. Курс будет вестись на онлайн-платформе Stepic. Всем успешно прошедшим курс будет выдан соответствующий сертификат.
Подробнее о том, что из себя представляет курс, можно на сайте. Прочитать детальные отчеты о результатах прохождения курса слушателями в 2020 году, можно по ссылке.
В этом году мы приглашаем, в основном, руководителей организаций и программ в сфере детства по следующим направлениям:
Поддержка замещающих семей
•Кризисные центры и социальные приюты для матерей с детьми
•Поддержка семей с особыми детьми
•Социализация подростков/выпускников учреждений для детей-сирот
Также приветствуются участники из одной организации, или из организаций, сотрудники которых принимали участие в этом курсе в 2020 году.
Курс рассчитан на руководителей и специалистов организаций сферы детства, имеющих хотя бы начальный уровень знаний в области мониторинга и оценки. Если Вы напрямую ранее никогда не занимались мониторингом и оценкой, но при этом имеете компетенции в области социального проектирования и опыт реализации социальных проектов, то Вы сможете освоить курс. Важно отметить, что если уровень знаний в области МиО совсем низкий, то потребуется больше усилий и времени для освоения материала.
Успешный кандидат должен продемонстрировать высокую мотивацию, быть готовым выделить временные ресурсы; иметь возможность принимать решения о внедрении новых элементов в области мониторинга и оценки в своей организации/программе.
Онлайн-курс проводится в рамках проекта » Оценка в сфере детства: развитие сообществ практиков», который реализуется АНО «Эволюция и Филантропия» при поддержке Фонда президентских грантов и при стратегической поддержке Фонда Тимченко.
