GIZ CLIP Kapasite Geliştirme Programı Et

GIZ CLIP

Kapasite Geliştirme Programı

Etki Analizi

Proje Ölçeği

15 Sivil Toplum Kuruluşu

15 Kurumsal Anket Çalışması

5 Odak Grup Çalışması

15 Kuruma Özel Değerlendirme Raporu

1 OECD-DAC Temelli Kapsamlı Etki Raporu

Etki Analizi

Projede Sunulan Hizmetler

Hedef Gruplar

GIZ CLIP kapsamında yer alan mentor ve menti sivil toplum kuruluşları

Sektör

Uluslararası Kalkınma ve Sivil Toplum

Çalışma kapsamında, 2019’dan bu yana yürütülen kapasite geliştirme ve mentorluk desteklerinin kuruluşlar ve program düzeyindeki sonuçlarının bütüncül biçimde değerlendirilmesi amaçlandı.

Değerlendirmenin yalnızca gerçekleştirilen faaliyetleri, katılımcı sayılarını veya memnuniyet düzeyini ele alması yeterli değildi. Programın kuruluşların çalışma biçimlerine, kurumsal kapasitelerine, sundukları hizmetlere ve iş birliği ilişkilerine nasıl yansıdığının farklı veri kaynakları üzerinden incelenmesi hedeflendi.

Bu doğrultuda mentor ve menti kuruluşların programdaki farklı rolleri ve deneyimleri ayrı ayrı ele alındı. Her kuruluşun kendi bağlamına özgü değerlendirmesinin korunması, kurum düzeyindeki bulguların programın genel sonuçlarıyla karıştırılmaması ve hassas verilerin yalnızca yetkili paydaşlarla paylaşılması araştırmanın temel ilkeleri olarak belirlendi.

Çalışmayla, kapasite geliştirme modelinin uygunluk, tutarlılık, etkililik, verimlilik, etki ve sürdürülebilirlik boyutlarında değerlendirilmesi ve gelecekteki program tasarımları ile yönetim kararlarını destekleyecek güvenilir bir kanıt zemini oluşturulması hedeflendi.

ReLearn, GIZ CLIP 2019’dan bu yana yürütülen kapasite geliştirme ve mentorluk çalışmalarını değerlendirmek üzere karma yöntemli ve OECD-DAC temelli bir etki analizi tasarladı ve yürüttü.

Çalışma, 15 sivil toplum kuruluşunun deneyimlerini hem kendi kurumsal bağlamları içinde hem de program düzeyinde ele alacak şekilde yapılandırıldı. Kuruma özel veriler ile programın bütününe ilişkin bulgular, farklı erişim ve raporlama düzeylerinde değerlendirildi.

Araştırma beş temel bileşen üzerine kuruldu:

OECD-DAC temelli değerlendirme çerçevesi – Program; uygunluk, tutarlılık, etkililik, verimlilik, etki ve sürdürülebilirlik olmak üzere altı değerlendirme kriteri üzerinden incelendi. Her kriter için kullanılacak araştırma soruları, veri kaynakları ve analiz yaklaşımı tanımlandı.

Role özgü veri toplama araçları – Programdaki farklı sorumluluk ve deneyimleri dikkate alan ayrı anket yapıları geliştirildi. Ölçek ve çoktan seçmeli sorulardan elde edilen nicel veriler, açık uçlu sorularla toplanan katılımcı değerlendirmeleriyle birlikte ele alındı.

Katılımcı odak grup çalışmaları – Farklı paydaş gruplarıyla toplam 5 odak grup çalışması gerçekleştirildi. Yapılandırılmış sorular, deneyimsel yöntemler ve anonim geri bildirim araçları kullanılarak katılımcıların program deneyimlerini güvenli bir araştırma ortamında paylaşmaları desteklendi.

Kuruma özel ve gizli değerlendirmeler – Her kuruluşun deneyimi kendi bağlamı içinde analiz edilerek 15 kuruma özel değerlendirme raporu hazırlandı. Bu raporlardaki bulgular, puanlar ve öneriler yalnızca ilgili kuruluşun ve yetkili program paydaşlarının erişimine açık olacak şekilde raporlandı.

Bütüncül etki analizi – Nicel ve nitel veriler; karşılaştırmalı analiz, tematik analiz ve haritalama yöntemleriyle bir araya getirildi. Kurum düzeyindeki veriler anonimleştirilip toplulaştırılarak programın bütünü için OECD-DAC temelli kapsamlı bir etki analizi raporu oluşturuldu.

Bu yapı sayesinde ReLearn, kurumların kendi değerlendirmelerine erişebildiği; program yönetiminin ortak eğilimleri, uygulama alanlarını ve gelecek dönem kararlarını toplulaştırılmış veriler üzerinden inceleyebildiği çok katmanlı ve gizlilik temelli bir değerlendirme sistemi geliştirdi.

Etki analizi kapsamında ReLearn, kapasite geliştirme ve mentorluk çalışmalarının farklı kuruluşlar ve programın bütünü açısından değerlendirilebilmesi için karma yöntemli ve OECD-DAC temelli bir değerlendirme sistemi oluşturdu.

Araştırma sürecinde:

15 sivil toplum kuruluşuna yönelik kurumsal anket çalışması yürütüldü.
Kuruluşların programdaki farklı rollerini ve deneyimlerini ele alan 5 odak grup çalışması gerçekleştirildi.
Anketlerden ve odak gruplardan elde edilen nicel ve nitel veriler, ortak bir analiz çerçevesinde değerlendirildi.
Her kuruluş için kendi gelişim sürecini, mevcut kapasitesini ve ileriye dönük çalışma alanlarını ele alan 15 kuruma özel değerlendirme raporu hazırlandı.
Kurum düzeyindeki veriler anonimleştirilerek ve toplulaştırılarak OECD-DAC temelli kapsamlı bir etki analizi raporuna dönüştürüldü.

Araştırmada iki ayrı raporlama düzeyi kullanıldı. Kuruluşlara ait değerlendirmeler yalnızca ilgili kurumun erişimine açık raporlarda sunuldu. Program düzeyindeki analizlerde ise kurum isimleri, katılımcı bilgileri ve belirli bir kuruluşun tanınmasına yol açabilecek bulgular çıkarılarak ortak eğilimler üzerinden raporlama yapıldı.

ReLearn, değerlendirme sürecinde:

programın uygunluk, tutarlılık, etkililik, verimlilik, etki ve sürdürülebilirlik boyutlarında incelenmesini sağlayan OECD-DAC temelli bir analiz çerçevesi,
kuruluşların farklı rollerine göre uyarlanmış anket ve odak grup araçları,
nicel ve nitel verilerin birlikte değerlendirilebildiği çok katmanlı bir analiz yapısı,
kurum özelindeki sonuçları program düzeyindeki eğilimlerden ayıran gizlilik temelli bir raporlama modeli,
gelecekteki program tasarımlarına ve izleme çalışmalarına girdi sağlayan stratejik bir öneri çerçevesi geliştirdi.

Böylece kapasite geliştirme çalışmalarının yalnızca gerçekleştirilen faaliyetler üzerinden değil; kurumsal kapasite, uygulama, sürdürülebilirlik ve program tasarımı düzeylerinde değerlendirilebilmesini sağlayan bütüncül bir etki analizi ve karar destek altyapısı oluşturuldu.

Araştırma kapsamında elde edilen kuruluş puanları, grup karşılaştırmaları, güçlü ve gelişime açık alanlar ile stratejik önerilerin ayrıntıları, araştırma etiği ve veri gizliliği ilkeleri doğrultusunda kamuya açık içeriklere dâhil edilmedi.

Etkiyi Değerlendirmeye Dair İçgörüler

Etki, katılım verisinin ötesinde aranmalı.

Katılımcı sayısı, tamamlanma oranı ve memnuniyet puanı programın erişimini ve deneyim kalitesini gösterir. Etkiyi anlamak için ise öğrenmenin davranışlara, çalışma biçimlerine, kurumsal kapasiteye ve uzun vadeli hedeflere nasıl yansıdığı da izlenmelidir.

Ölçüm, farklı paydaş deneyimlerini görebilmeli.

Aynı programda yer alan paydaşların rolleri, beklentileri ve programla kurdukları ilişki farklılaşabilir. Bu nedenle veri toplama araçları paydaşların bağlamına göre uyarlanmalı; farklı kaynaklardan elde edilen veriler ortak bir değerlendirme çerçevesinde birlikte ele alınmalıdır.

Güvenilir bulgular, güvenli bir araştırma alanında oluşur.

Katılımcıların ve kurumların deneyimlerini açık biçimde paylaşabilmesi, verilerin nasıl kullanılacağının ve kimlerle paylaşılacağının baştan netleştirilmesine bağlıdır. Kuruma özel değerlendirmeler ile program düzeyindeki raporlama ayrıldığında hem gizlilik korunur hem de yönetim kararlarını destekleyen daha güvenilir bir kanıt zemini oluşur.