TIPC
Поиск

МОНИТОРИНГ, ОЦЕНКА И ОБУЧЕНИЕ ДЛЯ ПРОЕКТОВ ПРЕОБРАЗОВАТЕЛЬНЫХ ИЗМЕНЕНИЙ: УРОКИ ИЗ СОТРУДНИЧЕСТВА MOTION С SUSMO, SATURN И ACT ON NBS

Блог

В декабре 2021 года завершился проект MOTION, созданный совместно TIPC и EIT Climate-KIC. За два года тесного сотрудничества с партнерами из трех проектов EIT Climate-KIC – ACT на NBS, САТУРН а также SuSMo – MOTION поддерживал мероприятия по наращиванию потенциала и мониторингу, оценке и обучению (MEL) для повышения их преобразующего потенциала. Первый год состоял из разработки «Трансформационная теория изменений” для каждого проекта (рис. 1, 2 и 3). Опираясь на модульную методологию TIPC, партнеры участвовали в нескольких управляемых взаимодействиях, чтобы связать входные данные, основные виды деятельности и результаты каждого проекта с «преобразующие результаты”, которые помогают использовать их желаемое воздействие. Преобразующие теории изменений ясно изложили логику и ожидаемый процесс изменений каждого проекта, облегчая обсуждение с партнерами того, как его улучшить, выявляя узкие места, контекстуальные зависимости и преобразующие потенциалы.

SuSMo ToC

Рисунок 1: Преобразующая теория изменений SuSMo: четыре пути изменений, основанные на взаимодействии с заинтересованными сторонами 

SATURN ToC

Рисунок 2: Трансформационная теория изменений SATURN

ACT on NBS ToC

Рисунок 3: ACT по трансформационной теории изменений NBS

На второй год существования MOTION мы разработали план мониторинга, оценки и обучения (MEL) для каждого из трех проектов на основе их трансформационной теории изменений (ToC). Первый шаг заключался в обсуждении с партнерами их ожиданий в отношении MEL — например, в получении дополнительной информации о конкретном пути изменений в рамках их ToC или в мониторинге данного преобразующего результата — и коллективном определении того, какие индикаторы можно использовать для этой цели. В SuSMo партнеры решили сосредоточиться на трех направлениях: Взаимодействие с заинтересованными сторонами (ЮВ), Данные для оценки воздействия (умереть) и Политика, регулирование и закупки (PRP) и использовать индикаторы, связанные с четырьмя преобразующими результатами, а именно сеть (для мониторинга пути SE), обращение знаний и инструментов, обучение/разучивание а также изменения в ожиданиях (все три для мониторинга DIE и PRP). В SATURN партнеры решили сосредоточиться на двух результатах трансформации, а именно: обращение а также масштабирование. Они были выбраны на основе ранее выявленных (с помощью преобразующей ToC) сильных сторон проекта SATURN, а также областей, в которых партнеры увидели необходимость дальнейших улучшений. В ACT on NBS партнеры выбрали три пары трансформационных результатов (или «путей трансформационных результатов»): (1) сеть а также обучение; (2) обращение а также репликация; и (3) масштабирование а также институционализация

Чтобы облегчить обсуждение и определение потенциальных индикаторов для SuSMo, команда MOTION подготовила схему (рис. 4), которая иллюстрирует, как можно отслеживать сеть взаимодействия с заинтересованными сторонами, а инструменты, разрабатываемые с помощью двух других путей (DIE и PRP), были связаны с Трансформационные результаты.

Рисунок 4: Концептуальная схема для определения индикаторов для выбранных путей SuSMo: взаимодействие с заинтересованными сторонами (сеть) и данные для оценки воздействия и политики, регулирования и закупок (изменение практики)

При определении и выборе аспектов преобразующих изменений для мониторинга важно стремиться к балансу между их значимостью для достижения воздействия и возможностью их мониторинга с помощью индикаторов. Эти характеристики часто противоречат друг другу. Действительно, партнеры SuSMo определили этот компромисс, когда их спросили, какие параметры более актуальны и какие легче отслеживать (рис. 5).

Рисунок 5: Компромисс между релевантностью воздействия и осуществимостью мониторинга параметров изменений, связанных с выбранными путями SuSMo

Учитывая эту трудность, команда MOTION предложила основывать оценку знаний, связанных с выбранными путями и трансформационными результатами, на опросе, на который должны были ответить партнеры SuSMo и SATURN. При правильном планировании опросы способствуют формирующий подход к мониторингу, оценке и обучению, который требуется для проектов или программ трансформационных изменений. В отличие от традиционных опросов, которые часто стремятся охарактеризовать состояние системы в данный момент времени (подумайте, например, о периодических социально-экономических опросах, которые используются для описания района или города и которые часто нацелены на предоставление количественных показателей) , опросы, используемые в контексте формирующего процесса, направлены на то, чтобы вызвать размышления и обучение среди респондентов. Этот тип опроса является двунаправленным: он создает диалог между респондентом/участником и испытуемым. Таким образом, в формирующем процессе MEL опросы являются инструментом для сбора информации или знаний, который формирует основу для размышлений, обучения и адаптации. Напротив, для ACT по NBS был разработан альтернативный подход, состоящий из агрегирования качественных данных/информации, собранных в ходе серии интервью, что позволяет участникам глубже погрузиться в наиболее актуальные концепции и выводы. 

В случае с опросом его дизайн (или «протокол» на техническом жаргоне) состоял из презентации нескольких утверждений о трех путях (SuSMo) и трансформационных результатах (SuSMo и SATURN), которые были ключевыми для достижения желаемого. воздействие. После оценки утверждений по шкале от «полностью не согласен» до «полностью согласен» (примеры на рис. 6–9) респондентам было предложено обосновать свой выбор. Это был ключевой механизм побуждения к размышлению и обучению. Проведение опроса было промежуточным этапом в процессе MEL. Более важным был процесс предоставления синтезированных результатов респондентам. Для SuSMo это было сделано на семинаре, организованном командой MOTION, а в случае с SATURN результаты опроса были объединены в онлайн-видео (рис. 10-11).

 

Рисунок 6-9: Примеры результатов опроса SuSMo MEL, которые были отправлены респондентам на онлайн-семинаре

Рисунок 10-11: : Примеры результатов опроса SATURN, которые были обобщены в онлайн-видео, распространенном среди респондентов.

Наконец, команда MOTION провела заключительный семинар по процессу MEL с SuSMo и SATURN и два раунда заключительных интервью с партнерами ACT по NBS. Эти мероприятия были организованы для того, чтобы предоставить партнерам по проекту возможность для дальнейших размышлений об общем процессе реализации, полученных знаниях и для обсуждения амбиций, выходящих за рамки жизненного цикла проекта. На семинаре SuSMo партнеры обсудили планы распространения разработанных ими инструментов, например, руководящие принципы для совместной оценки мобильности и политики, закупок и оценки. включают в себя дальнейшее тестирование и улучшение инструментов. Одним из препятствий для достижения постоянного воздействия, которое обсуждалось партнерами на семинаре, было то, что область совместной мобильности быстро и постоянно менялась, поэтому рекомендации могли устареть до того, как они были полностью протестированы. Таким образом, один из уроков заключался в том, что непрерывный мониторинг и оценка должны иметь место и стать постоянным элементом процесса, от разработки инструмента до развертывания. Подход к мониторингу и оценке должен был быть гибким в зависимости от того, был ли инструмент более практичным (например, инструмент для оценки устойчивости совместной мобильности) или более теоретическим (как в случае определения принципов PRP совместной мобильности). Второй урок, извлеченный в ходе семинара, заключался в том, что будущие обязательства должны быть сосредоточены не на прошлых достижениях, а на прогнозировании тенденций обновления и улучшения инструментов. С этой целью партнеры обсудили две цели: (а) создание хранилища «коллективной памяти» для данных и материалов, собранных и созданных с помощью SuSMo, которое должно было (б) сформировать основу для совместной обсерватории мобильности. Что касается создания общей сети мобильности, SuSMo смогла объединить различные заинтересованные стороны на уровне города, но задача на будущее будет заключаться в поддержании интереса заинтересованных сторон — например, путем демонстрации историй успеха совместной мобильности на основе SuSMo. инструменты – для поддержания сплоченности сети.

На семинаре SATURN элементы для улучшения обращение тяготела к (а) сбору и синтезу знаний и опыта; (б) доступность внешних знаний и опыта; и c) обмен знаниями и опытом между партнерами и заинтересованными сторонами. В этих аспектах потребность в дополнительных человеческих ресурсах и потенциале в рамках проекта была выделена как ключ к их улучшению. Кроме того, более эффективное использование целевых мероприятий по распространению и коммуникации, таких как использование социальных сетей для привлечения внимания и интереса, было сочтено важным для улучшения выбранных трансформационных результатов в будущем. Элементы для улучшения масштабирование сосредоточены на: (а) привлечении внешних субъектов; (b) оценка результатов проекта внешними заинтересованными сторонами и (c) использование результатов проекта. Важными аспектами для улучшения этих элементов было активное участие владельцев проблем (например, муниципалитетов) с самого начала проекта с целью совместной разработки результатов и результатов. Дополнительные ресурсы и стратегический акцент на мероприятиях по взаимодействию с заинтересованными сторонами, которые помогут развить долгосрочные отношения с SATURN и, таким образом, повысить интерес и спрос на продукты и результаты проекта, были еще одним аспектом улучшения трансформационного результата. масштабирование в будущих проектах.

Во время заключительных интервью ACT на NBS партнеры размышляли о том, в какой степени были достигнуты результаты, предложенные для фазы MEL, выбранные из-за их более высокого преобразующего потенциала на основе трансформационной теории изменений. Результаты показали хороший уровень достижения четырех отслеживаемых результатов, но также выявили проблемы с реализацией в краткосрочной перспективе. Например, с точки зрения «наращивания потенциала и технической помощи для более широкого внедрения решений, основанных на природе» (NBS) (Нетворкинг и путь обучения), ACT on NBS добилась хороших результатов, но столкнулась с двумя основными проблемами: (1) хотя партнеры получили опыт, который был полезен для разработки будущих бизнес-планов, было трудно выделить ресурсы для совместного финансирования мероприятий по наращиванию потенциала в городах; (2) требуются более длительные проекты (чем ACT на NBS) в постоянном взаимодействии с городами для увеличения числа участвующих городов и создания прочного потенциала, особенно с менее опытными городами, что может потребовать передачи знаний и поддержки со стороны более опытных. . То же самое было также выражено в отношении результатов, связанных с «Путь масштабирования и институционализации'. Для достижения институционализации (например, политики, стимулирующей рентабельные проекты природных решений) требуется более интегрированная сеть городов, внедряющих природные решения, с более высокими мощностями и ноу-хау, передаваемыми из более продвинутых в менее продвинутые города. Результаты проекта MOTION также показали, что Трансформативная теория изменений представляла собой очень практичный инструмент на последних этапах ACT на NBS в 2021 году в контексте всего интерактивного процесса, как выразились (анонимно) опрошенные:

«Сотрудничество с MOTION было похоже на спасение […] не только благодаря способности Трансформационной теории изменений проследить нашу работу с муниципалитетами, но и благодаря систематизации передачи знаний о преобразующих изменениях».

«Очень полезно для оттачивания и воплощения наших первоначальных идей о том, что должна делать инновационная экосистема, немного более целенаправленно с целями и задачами, которые вы должны сформулировать в отношении трансформационных результатов».

«Благодаря сотрудничеству с проектом MOTION мы [ACT on NBS Partners] обсуждаем, следует ли и как продолжать сотрудничество в рамках будущего партнерства».

Информация, собранная в ходе всего взаимодействия MOTION, будет использована для совместного производства расширенной трансформационной теории изменений для ACT на NBS, которую можно использовать для обеспечения будущих инициатив с более высокими преобразующими возможностями для расширения масштабов городских природных решений.   

В конце концов, взаимодействие MOTION с SuSMo, SATURN и ACT на NBS привело к успешному партнерству. MOTION опробовала и усовершенствовала методологию TIPC, включив и применив концептуальную основу Transformative Outcomes. И наоборот, партнерство привело к двум ключевым вкладам MOTION в SuSMo, SATURN и ACT в NBS: (а) систематизация конкретного процесса каждого проекта (деятельности, результатов, результатов и воздействия) в трансформационной теории изменений, которая позволила партнерам проекта чтобы увидеть, как они вписываются и вносят свой вклад в систему, которую они стремятся преобразовать, и (б) на основе этого Преобразующего ТОС партнеры смогли сделать выводы и извлечь уроки второго порядка о том, как распространять результаты/результаты проектов и как подходить к будущим (аналогичным) проектам, чтобы повысить их трансформационный потенциал.

Добавить комментарий

Ваш адрес email не будет опубликован.