Documente Academic
Documente Profesional
Documente Cultură
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
Aprobat de:
Claudia Gallo, Lider de Echip, Ernst & Young
Data:
29.09.2014
Versiunea:
Versiunea 2
Modificri:
Versiunea
Data
06.08.2014
29.09.2014
Sumarul modificrilor
Va fi aprobat de:
Dna. Mihaela Toader, Director General al Direciei Generale Analiz, Programare
i Evaluare
Funcie
Diana Iacob
Manager de Contract
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
Cuprins
LISTA TABELELOR I A FIGURILOR
LISTA DE ACRONIME
SUMAR EXECUTIV
CAPITOL 1
1.1.
1.2.
1.3.
1.4.
1.5.
CAPITOL 2
INTRODUCERE
CONTEXTUL PROIECTULUI
DEFINIIA CULTURII DE EVALUARE I DIMENSIUNILE SALE
REZULTATELE PRIMEI MSURRI ANUALE
REZULTATELE CELEI DE A DOUA MSURRI ANUALE
CONINUTUL RAPORTULUI
CEA DE-A TREIA MSURARE ANUAL A CULTURII DE EVALUARE
2.1.
METODOLOGIA REVIZUIT
2.2.
REZULTATE LA NIVELUL ICE, DIMENSIUNI I CRITERII
2.2.1.
Rezultate generale la nivelul dimensiunilor
2.2.2.
Rezultate la nivelul criteriilor
2.2.3.
Rezultatele la nivelul sub-criteriilor i indicatorilor
2.3.
REZULTATE LA NIVELUL PROGRAMELOR OPERAIONALE
2.4.
COMPARAREA REZULTATELOR CELOR TREI CICLURI DE MSURARE
CAPITOL 3
3.1.
3.2.
3.3.
3.4.
3.5.
CAPITOL 4
9
11
14
15
16
17
17
19
19
20
21
31
32
42
42
42
43
44
51
ANEXE
52
60
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
43
44
45
45
46
47
48
50
51
52
88
98
12
19
21
42
53
96
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
Lista de Acronime
AM
Autoritatea de Management
AP
Acordul de Parteneriat
CCE
CE
Comisia European
CSNR
DMI
EIR
FESI
FSE
GLE
ICE
ntrebarea de Evaluare
INS
M&E
Monitorizare i Evaluare
MFE
OI
Organisme Intermediare
ONG
Organizaie neguvernamental
PO
Programul Operaional
UCE
UE
Uniunea European
UM
Unitate de Msur
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
Sumar Executiv
Acest raport a fost ntocmit de Ernst & Young i prezint rezultatele celei de a treia msurtori anuale
privind diseminarea culturii de evaluare n cadrul Sistemului Instrumentelor Structurale din Romnia i
evaluarea impactului Domeniului Major de Intervenie 1.2 Evaluare al Programului Operaional Asisten
Tehnic n sprijinirea procesului de diseminare a culturii de evaluare.
Nivelul actual de diseminare a culturii de evaluare este msurat cu ajutorul indicatorilor, criteriilor i subcriteriilor care sunt grupate n 4 dimensiuni (cererea de evaluare, oferta de evaluare, diseminarea
/utilizarea rezultatelor evalurii, instituionalizarea culturii de evaluare).
Cea de-a treia msurare anual a evideniat un nivel corespunztor de diseminare a culturii de evaluare
cu o medie de realizare a Indicelui de Msurare a Culturii de Evaluare obinut pe baza tuturor indicatorilor
de 59% din 100%.
Mai exact, n ceea ce privete cererea de evaluare, analiza arat c, n general, aceast dimensiune
nregistreaz performane bune (57%), dei uor mai reduse dect cele aferente ofertei de evaluare
(63%). Cu privire la criterii:
Structura sistemului de evaluare (criteriul 1) are o rat de realizare peste medie, datorit bunei
coordonri a responsabilitilor de evaluare;
Resursele umane alocate evalurii sunt suficiente, dar se mai mbunti nivelul de resurse financiare
alocate (criteriul 2). Programele Operaionale au alocat, n medie, 0,12% din buget evalurii;
Calitatea sistemului de monitorizare este considerat corespunztoare, acesta furniznd informaii n
timp util (criteriul 3);
Exist planuri de evaluare i proiecte de evaluare gestionate eficient de ctre Comitetele de
Coordonare a Evalurii stabilite la nivel de Program, precum i standarde de evaluare conforme cu
cerinele Uniunii Europene i proceduri operaionale pentru conceperea, implementarea i utilizarea
rezultatelor evalurii (criteriul 4);
Datele socio-economice sunt disponibile n timp util, dei micro-datele de la nivel de beneficiar sunt
disponibile doar parial (criteriul 5);
Companiile naionale i internaionale ce furnizeaz servicii de evaluare i sunt prezente pe piaa din
Romnia dein expertiza tematic i metodologic necesar. Beneficiarii i Comitetele de Coordonare
a Evalurii joac un rol important n optimizarea calitii rapoartelor de evaluare prin utilizarea
grilelor de evaluare a calitii (criteriul 6);
Dei aceste criterii nregistreaz n general performane bune, analiza indic faptul c exist arii care pot fi
mbuntite. Analiznd perioada de programare 2014-2020, sunt formulate urmtoarele Recomandri:
R.1
R.2
R.3
R.4
R.5
R.6
R.7
R.8
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
Rapoartele de evaluare sunt disponibile publicului, fiind organizate dezbateri publice pentru
prezentarea i discutarea rezultatelor evalurii i existnd o tendin pozitiv n organizarea
evenimentelor de diseminare la scar larg pentru prezentarea rezultatelor evalurii (criteriul 7);
Exist proceduri eficace pentru ncurajarea utilizrii rezultatelor evalurii i aciuni de monitorizare
(follow-up) privind implementarea recomandrilor de evaluare (criteriul 8);
Evaluarea este considerat a fi un element important al succesului instituional, dac principiul
independenei este clar neles i respectat (criteriul 9);
Prevederile legale ale Uniunii Europene au fost transpuse n cadrul legal din Romnia (criteriul 10),
care reglementeaz activitile de evaluare i stipuleaz cerine suplimentare privind elaborarea
planurilor multi-anuale de evaluare. Exist totui elemente ale cadrului legal din Romnia care
limiteaz evaluarea (ex. normele privind achiziiile publice, ordonane naionale referitoare la
angajarea personalului i reglementri cu privire la eligibilitatea cheltuielilor);
Calitatea/expertiza resurselor umane implicate n activitile de evaluare (criteriul 11) este peste
media Indexul de msurare a Culturii de Evaluare, cu prezena unor susintori ai procesului de
evaluare att la nivel de PO, ct i la nivelul Cadrul Strategic Naional de Referin;
Numrul evalurilor iniiate ca rspuns la nevoia de cunoatere este mai sczut dect n alte state
membre (criteriul 12). Se pot aduce mbuntiri la nivelul culturii de evaluare n rndul entitilor de
formulare a politicilor din domeniu, chiar dac proiectele de dezvoltare a capacitii finanate n
cadrul Domeniului Major de Intervenie 1.2 vizeaz deja acest obiectiv;
Contribuia organizaiei naionale a evaluatorilor la diseminarea bunelor practici (criteriul 13), ct i
gradul de participare a societii civile la activitile legate de evaluare i numrul evenimentelor
publice organizate anual (criteriul 14) sunt considerate a fi mai degrab reduse;
Indicatorii care compun indicele de guvernare dezvoltat de Banca Mondial poziioneaz Romnia
peste media celor mai muli indicatori n ceea ce privete eficacitatea guvernanei (criteriul 15);
Nivelul de participare a funcionarilor publici (alii dect cei dedicai evalurii) n cadrul activitilor de
evaluare poate fi mbuntit, la fel i disponibilitatea opiunilor de formare existente pe pia (n
special cele oferite de mediul academic) i nivelul de internalizare a evalurii de ctre factorii
instituionali interesai (criteriul 16);
Au fost identificate anumite arii care necesit mbuntiri, n acest scop fiind formulate urmtoarele
recomandri:
R.6
R.7
R.8
R.9
R.10
R.11
R.12
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
Capitol 1
Introducere
Experi Cat II
Echipa de
implementare
Christina Castella
Maria A. Giorgi
Laura Trofin
Valentina Parziale
Michele Scataglini
Sofia Ionescu
Ideea proiectului deriv din exerciiul de evaluare intermediar a POAT, finalizat n septembrie 2010,
conform cruia conceptul de cultur de evaluare din Romnia nu este adaptat specificitilor
Instrumentelor Structurale i, astfel, se impune dezvoltarea unui mecanism de monitorizare prin care s
se poat msura i estima gradul de dezvoltare a culturii de evaluare aferente Instrumentelor Structurale,
att din perspectiv calitativ, ct i cantitativ.
Obiectivul general al proiectului este de a contribui la mbuntirea calitii, eficienei i coerenei DMI
1.2 Evaluare al POAT prin dezvoltarea unui mecanism de monitorizare prin care s se poate aprecia
msura n care a fost atins obiectivul acestui domeniu major de intervenie, i anume, dezvoltarea unei
culturi comune de evaluare n cadrul sistemului de management al Instrumentelor Structurale, att n
termeni cantitativi, ct i calitativi.
Obiectivul specific al acestui contract subsecvent este de a susine Unitatea Central de Evaluare (UCE) i
AM POAT pentru:
Investigarea teoriei care st la baza strategiei DMI 1.2 a POAT i semnalarea oricrei probleme
n design-ul sau implementarea acestui DMI;
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
n cadrul proiectului, Echipa de Evaluare a realizat msurarea gradului de diseminare a Culturii de Evaluare
n cadrul Sistemului Instrumentelor Structurale din Romnia i monitorizarea progresului aferent prin trei
cicluri de msurare anual n perioada 18.04.2012 - 17.10.2014. n graficul de mai jos sunt ilustrate
activitile derulate de ctre Echipa de Evaluare i contribuia acesteia la realizarea obiectivelor
proiectului:
10
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
Mai multe surse identific niveluri de maturitate ale culturii de evaluare i dezbat influena aporturilor
endogene vs. exogene asupra acesteia. n general, se specific faptul c aceast cultur de evaluare este
mai solid n statele n care a fost generat de jos n sus. Totui, aportul extern, n special cel aferent
Politicii de Coeziune a UE, a avut un impact important, mai puternic n statele din Europa de Sud, Central
i de Est.
Aa cum rezult din analiza literaturii de specialitate, este clar indicat faptul c respectiva cultur de
evaluare este construit ca urmare a contribuiei simultane a unor factori interni i/sau externi, iar
aceast construcie este un proces incremental, n cadrul cruia susintorii evalurii sunt adesea
factorul determinant pentru impulsionarea procesului.
Anumite surse sub-sumeaz conceptul de cultur celui de capacitate (CE, US GAO Oficiul de Rspundere
Guvernamental), n timp ce literatura academic le prezint ca nefiind incluse unul n cellalt ci, mai
degrab, susinndu-se reciproc. Totui, dilema oul i gina (de unde trebuie s nceap/ncepe sistemul,
de la cultur sau de la capacitate) este abordat ntr-o manier relativ limitat, De Peuter i Pattyn
fiind o excepie n acest sens.
Nu se poate realiza o delimitare clar ntre cele dou concepte; mai mult dect att, dincolo de utilizarea
alternativ a acestora, exist n literatur numeroase alte concepte fr ca acestea s fie clar definite,
precum sistem, politic, practic, proces, proceduri, capabiliti de evaluare i chiar
inovare, ns acestea sunt utilizate cu sensuri diferite.
Dei s-a acordat o atenie deosebit surselor disponibile dup 2008, nu au fost identificate modificri
majore n definirea i utilizarea celor dou concepte comparativ cu cadrul de referin realizat de Comisia
European acest document fiind n mare msur nc valid.
n concluzie, conform literaturii de specialitate, definiiile termenilor, furnizate de ctre De Peuter i
Pattyn (2008) par a fi cele mai clare i mai uor de utilizat:
Cultura de evaluare este un model de convingeri i valori mprtite att de decideni politici
ct i de evaluatori, care i nzestreaz pe acetia cu un set de reguli de conduit ce i ghideaz
ctre o practic de evaluare1;
Capacitatea de evaluare este asociat unor aspecte mai operaionale i unor componente
care sunt considerate necesare pentru realizarea evalurii. n acest sens, capacitatea de
evaluare este strns legat de practica de evaluare. Ambele fac referire la aspecte legate de
personal, precum i la faciliti tehnice i instrumente care sprijin evaluarea.
Mai nti, au fost extrase din literatura de specialitate elementele corelate cu fiecare dintre
cele dou concepte;
Din definiia culturii formulat de Davies (1984): cultura reprezint modelul de credine i valori mprtite, care acord
membrilor unei instituii un anumit statut, nzestrndu-i pe acetia cu un set de reguli de conduit n cadrul instituiei
11
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
Apoi, au fost eliminate suprapunerile din cadrul definiiei fiecrui concept, eliminnd din
conceptul de capacitate toate elementele prezentate n literatura de specialitate ca fiind
aferente culturii;
n ultimul rnd, elementele au fost organizate n clustere, crora le-au fost atribuite anumite
denumiri (a se vedea Tabelul 1).
Scopul celei de-a treia etape nu a fost de a nlocui activitatea realizat la nivel UE (i anume documentul
cadru de analiz comparativ al CE i EVALSED), ci de:
1. A face diferena (artificial n anumite cazuri) ntre cultur i capacitate;
2. A avea o list complet a elementelor aferente celor dou concepte, pentru a realiza n mod adecvat i
cuprinztor indexul pentru msurarea culturii de evaluare.
Dup cum se poate vedea n tabelul de mai jos, anumite elemente pot fi efectiv grupate n funcie de cele
patru niveluri diferite identificate de EVALSED (cererea de evaluare, oferta de evaluare, structura
sistemului de evaluare, instituionalizarea evalurii) i alte surse (i anume individuale, instituionale,
inter-instituionale i societale) sau atribuite mai multor niveluri, ns difereniate n fiecare caz:
Tabel 1 Cultura de Evaluare i Capacitatea de Evaluare: elemente principale
Cultura de evaluare
Capacitatea de evaluare
12
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
PRACTICA
1. evaluare efectuat n mod curent;
2. periodicitatea evalurilor;
3. pia bine definit (oferta de evaluare).
13
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
14
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
Desigur, n ceea ce privete instituionalizarea culturii de evaluare, au fost analizate contextul legislativ
general i nivelul calitativ general al administraiei publice, ca factori care faciliteaz dezvoltarea unei
culturi comune de evaluare. Din punct de vedere legislativ, prevederile legale naionale care
reglementeaz evaluarea corespund cadrului legal UE i stipuleaz cerina suplimentar a realizrii
planurilor de evaluare. Au existat totui elemente ale cadrului legal din Romnia care limiteaz evaluarea,
n special normele privind achiziiile publice, ordonane referitoare la angajarea personalului i
reglementri cu privire la eligibilitatea cheltuielilor. n ceea ce privete guvernana n general, indicatorii
care fac referire la Romnia, ce compun indicele Bncii Mondiale, o poziionau peste media celor mai muli
indicatori, cu excepia eficacitii guvernanei.
ncepnd cu luna ianuarie 2013, Ministerul Fondurilor Europene a pus la dispoziia factorilor de decizie i a publicului larg o
bibliotec de evaluare centralizat, care conine rapoartele de evaluare efectuate att la nivel de PO ct i CSNR, care poate fi
Consultant on-line pe pagina web www.evaluare-structurale.ro. Acest instrument de gestionare a rezultatelor de evaluare a fost
desfurat n cadrul proiectului mbuntirea utilizrii evalurii n procesul de elaborare a politicilor i de luare a deciziilor n
domeniul instrumentelor structurale n Romnia, finanate prin DMI 1.2 al PO AT.
15
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
privind achiziiile publice, ordonane naionale cu privire la personalul angajat i normele privind
eligibilitatea cheltuielilor.
Capitolul 3: prezint analiza DMI 1.2 al POAT n ceea ce privete impactul n relaie cu
punctajului general al ICE;
16
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
Capitol 2
evaluare
Capacitatea de evaluare sub forma mai multor aspecte operaionale i componente necesare
pentru realizarea evalurii
Versiunea revizuit a ICE este compus din 4 dimensiuni, 16 criterii, 32 sub-criterii i 56 indicatori:
Indicatorii sunt elemente relevante - aferente att capacitii, ct i culturii, pentru a msura
Cultura de Evaluare n rndul actorilor interesai din domeniul Instrumentelor Structurale din
Romnia
Figura 1 Cadrul privind Indicele de Msurare a Culturii de Evaluare
16
CRITERII
4
Dimensiuni
Indexul de
msurare a
culturii de
evaluare (ICE)
Cererea de
evaluare
Structura
evalurii
Resursele
financiare i
umane alocate
Calitatea
sistemului de
monitorizare
Eficiena i
eficacitatea
funciei de
evaluare
21 indicatori
Oferta de evaluare
Diseminarea i
utilizarea
rezultatelor
evalurii
Institutionalizarea
culturii de
evaluare
Cadrul mental
Contextul legal al
evalurii
Disponibilitatea
i fiabilitatea
datelor socioeconomice
Diseminarea
realizrilor
imediate ale
evalurii
Politica evaluativ
privind resursele
umane
Disponibilitatea i
calitatea exertizei
n domeniul
evalurii
Cererea
ncorporat/pornit
de jos n sus (n
SIS)
Utilizarea
rezultatelor
evalurii
Reele
Societatea civil
i mass media
Guvernan
Impactul pe
termen lung i n
afara SIS
11 indicatori
6 indicatori
Capacitatea de Evaluare
18 indicatori
Cultura de Evaluare
17
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
n scopul cuantificrii ICE, pentru fiecare indicator a fost definit o metodologie de punctare, punctajul
minim i maxim disponibil i sursele de informaii primare i secundare corespunztoare dup cum este
prezentat succint n Tabelul 2 - ICE: surse de informaii.
Deoarece indicatorii au uniti de msur diferite, fiecrui indicator i se aplic o metod de normalizare,
valorile de normalizare ntre [01] prin metoda Min-Max. Fiecare subcriteriu este ulterior exprimat ca
medie a indicatorilor afereni, iar criteriile sunt calculate ca medie a sub-criteriilor aferente.
18
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
Sondaj adresat actorilor interesai din comunitatea de evaluare extins ce acoper partea de
cerere (ex. Unitile de Evaluare, AM-urile, OI-urile, factorii care formuleaz politici publice) i
partea de ofert (societile de evaluare, evaluatori independeni, Universiti): 86 de rspunsuri
primite de la un panel de cercetare compus din 292 de poteniali respondeni
Focus Grup cu membrii din mediul universitar din cadrul ADER pentru a evalua partea de ofert
de pe piaa de evaluare din punct de vedere al independenei i competenelor
Focus grup cu GLE viznd validarea rezultatelor preliminare i obinerea unor comentarii i opinii
suplimentare nainte de ntocmirea Raportului privind cea de a Treia Msurare Anual
Chestionar transmis AM-urilor din cadrul statelor membre UE: rspunsurile au acoperit 9 dintre
PO-urile din Ungaria, Lituania i Italia
Surse primare
Analiza
comparativ
internaional
(benchmarking)
Surse secundare
ICE este calculat ca medie a celor 4 dimensiuni luate n considerare. Dezvoltarea culturii de evaluare este
exprimat sub forma de procentaj la nivelul ICE, dimensiunilor, criteriilor, sub-criteriilor, descriind
punctajul obinut ncadrat n intervalul Min Max. Aplicarea metodei de normalizare la rezultatele primului
i ale celui de al doilea ciclu permite o comparare a modului de dezvoltare a culturii de evaluare ntre
ciclurile de msurare.
19
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
70%
60%
50%
40%
30%
57%
65%
63%
59%
49%
20%
10%
0%
Cererea de evaluare Oferta de evaluare
Diseminarea i
Instituionalizarea
utilizarea
culturii de evaluare
rezultatelor evalurii
Index general
Capacitatea de Evaluare
Cultura de Evaluare
Capacitatea de
2.2.2. Rezultate
la Evaluare
nivelul criteriilor
Cultura de Evaluare
Nivelul corespunztor de diseminare a culturii de evaluare rezult dintr-o realizare medie la nivelul celor
16 criterii de 59%. Valoarea minim este nregistrat la nivelul criteriului (10) Contextul Legal al Evalurii,
iar valoarea maxim la nivelul criteriului (8) Utilizarea Rezultatelor Evalurii.
Figura 3 Rezultatele culturii de evaluare la nivelul criteriilor de msurare
(1) Structura evalurii cu
accent specific asupra
(16) Impactul pe termen 100%
(2) Resursele financiare i
lung i n afara SIS
umane alocate evalurii
90%
80%
(3) Calitatea sistemului de
(15) Guvernan
70%
monitorizare
60%
50%
(14) Societatea civil i
(4) Eficiena i eficacitatea
40%
mass media
funciei de evaluare
30%
20%
10%
(5) Disponibilitatea i
(13) Reele
0%
fiabilitatea datelor socio-
(12) Cererea de evaluare
ncorporat/pornit de
(11) Politica evaluativ
privind resursele umane -
(10) Contextul legal al
evalurii
(6) Disponibilitatea i
calitatea expertizei n
(7) Diseminarea
realizrilor imediate ale
(8) Utilizarea rezultatelor
evalurii
Capacitatea de Evaluare
Cultura de Evaluare
ICE 2014
20
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
n ceea ce privete media general, criteriile cele mai performante i cele mai puin performante
comparativ cu valorile maxime posibile sunt urmtoarele:
Tabel 3 Criteriile Cele mai Performante i cele Mai Puin Performante
CELE MAI PERFORMANTE
Corelarea funciei de evaluare cu alte funcii: analiza documentar a indicat faptul c exist
proceduri ce coreleaz funcia de monitorizare cu cea de evaluare (i anume: Dac datele de
21
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
20%
40%
60%
80%
100%
Responsabiliti de Evaluare
Coordonare
Resurse financiare: PO-urile au alocat, n medie, 0,12% din buget pentru evaluare, pondere
considerat insuficient, n conformitate cu rezultatele analizei comparative internaionale
(ex. Ungaria a alocat evalurii pn la 3% din bugetul total al PO Rennoire Social i al PO
Infrastructur Social). (subpunctajul obinut pentru sub-criteriu: 12%)
Resurse umane: numrul i expertiza persoanelor care desfoar activiti de evaluare sunt
considerate adecvate, conform analizei comparative internaionale i a cercetrii documentare
(ex. CV-urile persoanelor din cadrul Unitilor de Evaluare). Pe de alt parte, s-a observat
faptul c numrul de angajai ai unitilor de evaluare difer foarte mult n funcie de PO (de la
un angajat n cadrul POS Transport pn la 6 angajai n cadrul PNDR).
n urma rezultatelor sondajului online, se pare c pn la 30% dintre angajaii Unitilor de
Evaluare ale PO au prsit instituia n ultimele 12 luni, n timp ce nicio persoan din cadrul
Unitii de Evaluare a CSNR nu a prsit instituia. De asemenea, rspunsurile la chestionarul
online au relevat faptul c personalul Unitilor de Evaluare beneficiaz de sesiuni sistematice
de formare profesional. (punctajul obinut pentru sub-criteriu: 75%)
22
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
20%
40%
60%
80%
100%
Resurse financiare
Resurse umane
20%
40%
60%
80%
100%
Sistemul de indicatori
Indicatorii individuali
(3) Calitatea sistemului de
monitorizare
23
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
Implicarea Unitilor de Evaluare n procesul decizional: n baza sondajului electronic, UEurile sunt consultate de ctre AM-uri n cadrul proceselor decizionale, dar nu n mod
formalizat. (punctajul obinut pentru sub-criteriu: 53%)
20%
40%
60%
80%
100%
Planurile de Evaluare
Comitetele de Coordonare a Evalurii
Implicarea Unitilor de Evaluare n
procesul decizional
Termenii de referin
Procesul de nvare
(4) Eficiena i eficacitatea funciei de
evaluare
24
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
Alte date: conform respondenilor la sondajul electronic, alte date necesare (ex. micro-datele
de la nivel de beneficiar) sunt doar parial disponibile (ex. de date disponibile: bilanuri, bugete
periodice, analize periodice de proiect). (punctajul general obinut per sub-criteriu: 39%)
20%
40%
60%
80%
100%
Datele socio-economice
Alte date
Competitivitatea pieei: existena unui portofoliu pentru proiecte de evaluare (precum cel
desfurat de Ministerul Fondurilor Europene) este considerat benefic pentru meninerea
ofertei de evaluare activ pe pia i n cretere n ceea ce privete numrul de participani i
calitate a expertizei.
Per total, piaa evalurii din Romnia este considerat ca fiind parial competitiv deoarece
serviciile de evaluare sunt cel mai adesea atribuite unui numr limitat de actori. n plus, firmele
internaionale sunt mai prezente dect cele locale pe piaa de evaluare din Romnia (13 firme
internaionale, 7 firme naionale) iar implicarea universitilor n activitile de evaluare nu
este semnificativ.
Focus Grup-ul cu ADER a evideniat faptul c universitile nu sunt motivate din punct de
vedere financiar s deruleze activiti operaionale (i anume veniturile extra-bugetare sunt
considerate bani publici, iar universitile nu au voie s foloseasc aceste fonduri). n plus,
25
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
Totui, n cadrul focus grup-ului cu ADER a fost evideniat faptul c pe pia este nevoie de mai
multe opiuni de formare de scurt durat, deoarece domeniul instrumentelor structurale
sufer modificri rapide, iar anumite competene devin necesare n vederea desfurrii
activitilor de evaluare la parametrii optimi (ex. analiza de impact prin intermediul metodei
contrafactuale). (punctajul general obinut per sub-criteriu: 100%)
20%
40%
60%
80%
100%
Competitivitatea pieei
Independena evaluatorilor
(6) Disponibilitatea i calitatea expertizei n
domeniul evalurii
26
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
Dei la nceputul anului 2013, MFE a dezvoltat instrumentul Biblioteca de evaluare, menit s
asigure diseminarea adecvat a rezultatelor evalurilor ctre publicul larg, niciunul dintre
rapoartele realizate la nivel de CSNR n ultimele 12 luni, nu a fost ncrcat pe acest site. La
nivel de PO, dintre cele trei rapoarte finalizate, dou sunt publice integral pe site-urile oficiale
ale Autoritilor de Management.
20%
40%
60%
80%
100%
27
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
Dispoziiile legale care reglementeaz evaluarea transpun legislaia CE n cadrul legal naional
(HG Nr. 457/2008) i o completeaz cu prevederi suplimentare, cum ar fi planurile
multianuale de evaluare.
Ordonana nr. 34/2009 bazat pe acordul cu FMI, Banca Mondial i UE, care
blocheaz procesul de angajare de personal n administraia public;
(11) Politica evaluativ privind resursele umane viznd asigurarea RU adecvate, la toate
nivelele
Acest criteriu are n componen un singur subcriteriu i nregistreaz un nivel de 67% din punctajul maxim
disponibil. O analiz la nivelul indicatorilor evideniaz urmtoarele:
28
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
Cererea de evaluare total este conform cu cea din alte state membre: numrul mediu de
evaluri efectuate per PO a fost de 4.
La nivelul PO, exist un numr redus de evaluri iniiate din nevoia de cunoatere, care este
confirmat de analiza documentar i de sondajele electronice.
La nivelul CSNR, exist un numr mare de evaluri iniiate din nevoia de cunoatere, dar nu
exist nici o convergen ntre analiza documentar i sondajul electronic (i anume indicatorul
a obinut un punctaj sczut n baza sondajului electronic).
(13) Reele
Acest criteriu este compus din dou sub-criterii ce evideniaz faptul c gradul de contribuie al
organizaiei naionale a evaluatorilor la diseminarea bunelor practici este mai degrab redus. (punctajul
general obinut per criteriu: 54%)
20%
40%
60%
80%
100%
(13) Reele
29
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
20%
40%
60%
80%
100%
(15) Guvernan
Criteriul include un singur sub-criteriu i nregistreaz un nivel de 42% din punctajul maxim disponibil.
Indicatorii nsumai acestui sub-criteriu sunt msurai n baza Indicatorilor de Guvernan Globali pentru
perioada 1996 2012, publicai de ctre Banca Mondial pe pagina de Internet: www.worldbank.org.
Indexul prezint poziia Romniei raportat la toate statele lumii pentru urmtoarele aspecte:
30
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
POS CCE
POS DRU
POS M
POS T
PO DCA
POAT
CTE
ICE general 59 %
31
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
Dup cum se poate observa n tabelul de mai sus, n cadrul celui de-al treilea ciclu de msurare, cel mai
performant i respectiv cel mai puin performant program operaional continu s fie POR, respectiv POS
CCE. Nivelul mediu cu privire la cele 8 PO-uri incluse n analiz este de 56%, mai mic dect cel aferent ICE
global, de 59%.
100%
80%
60%
40%
20%
67% 59%
57%
54%
63% 63%
0%
Cererea de
evaluare
Oferta de evaluare
Diseminarea si
utilizarea
rezultatelor
evaluarii
2012
2013
Institutionalizarea
culturii de
evaluare
Index general
2014
Pentru a surprinde evoluia Indexului Culturii de Evaluare pe parcursul celor trei cicluri de msurare,
principalele variaii nregistrate la nivel de criterii sunt prezentate n seciunea de mai jos.
Dup cum este prezentat n capitolul 2.1 Metodologie, pentru a putea compara rezultatele celor trei cicluri de msurare, o metod
de normalizare se aplic pentru fiecare indicator, normalizarea valorilor ntre [0-1], prin metoda Min-Max.
32
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
62.6%
62.5%
69.9%
Structura evalurii
57.8%
49.4%
51.2%
Corelarea funciei
de evaluare cu alte
funcii
41.9%
49.2%
Coordonare
72.6%
88.1%
89.0%
85.9%
Responsabiliti de
Evaluare
0%
20%
40%
2014
60%
2013
80%
100%
2012
Performana general mai sczut nregistrat de criteriul Structura evalurii n 2014 (62,6%), fa de
2012 (69,9%), poate fi atribuit includerii n cadrul metodologiei a unor indicatori suplimentari, care au
vizat mbuntirea preciziei de msurare cu privire la partea de cerere e evalurii.
Cu toate acestea, ar trebui acordat atenie sub-criteriului Coordonare, ntruct respondenii la sondajul
electronic au precizat faptul c n ultimele 12 luni, au fost organizate mai puine ntlniri ale GLE fa de
cel de al doilea ciclu de msurare (ex. respondenii au participat n medie la 0-1 ntlniri ale GLE n cel deal treilea ciclu, comparativ cu 2-3 ntlniri ale GLE n cel de-al doilea ciclu).
Resursele financiare i
umane alocate evalurii
conform CSNR
79.4%
74.8%
66.8%
75.5%
Resurse umane
11.9%
Resurse financiare
33.0%
83.3%
0%
20%
40%
2014
60%
2013
80%
100%
2012
33
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
53.9%
Calitatea sistemului de
monitorizare
62.1%
53.4%
55.7%
Indicatorii individuali
61.3%
49.8%
52.2%
Sistemul de indicatori
63.0%
57.0%
0%
20%
40%
2014
2013
60%
80%
100%
2012
Variaiile dintre cele 3 cicluri de msurare au fost determinate de percepia asupra calitii sistemului de
monitorizare; conform datelor sondajului electronic, punctajul pentru Calitatea indicatorilor individuali a
crescut n perioada 2012-2014 cu aproximativ 12%, n timp ce punctajul pentru Calitatea sistemului de
indicatori a nregistrat o scdere de 8% n 2014 fa de 2012. Rezultatele pot fi justificate de faptul c cel
de-al treilea ciclu anual de msurare s-a suprapus cu nceputul perioadei de programare 2014-2020, n
care logica de intervenie este mult mai complex.
34
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
Eficiena i eficacitatea
funciei de evaluare
75.8%
Procesul de nvare
52.2%
52.3%
76.0%
73.4%
67.0%
Termenii de referin
53.2%
59.7%
Implicarea Unitilor de
Evaluare n procesul
decizional
37.3%
80.6%
81.8%
80.6%
Comitetele de
Coordonare a Evalurii
62.7%
Planurile de Evaluare
45.2%
78.0%
0%
20%
40%
2014
2013
60%
80%
100%
2012
35
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
Disponibilitatea i
fiabilitatea datelor socioeconomice
39.3%
40.3%
Alte date
20.0%
63.3%
62.7%
Datele socio-economice
80.7%
0%
20%
2014
40%
2013
60%
80%
100%
2012
74.9%
74.2%
56.7%
66.2%
68.0%
Independena
evaluatorilor
Dezvoltarea
competenelor de
evaluare
100.0%
100.0%
90.0%
85.9%
Asigurarea calitii
evalurilor
62.6%
60.6%
66.7%
Expertiza tematic i
metodologic
55.9%
56.6%
46.7%
Competitivitatea pieei
0%
20%
40%
2014
2013
60%
80%
100%
2012
36
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
Dup cum se poate vedea n figura de mai sus, n cadrul celui de-al doilea ciclu de msurare, acest criteriu
a suferit mbuntiri metodologice semnificative; n vederea creterii relevanei rezultatelor, a fost
adugat o serie de indicatori suplimentari pentru a msura independena evaluatorilor, dezvoltarea de
abiliti de evaluare i calitatea evalurilor. Prin urmare, variaia nregistrat ntre ciclurile de msurare
(cretere de 32% n 2014 fa de 2012) ar trebui s fie interpretat cu pruden. Mai mult dect att,
principala surs de informaii a fost reprezentat de opinia respondenilor la sondajul electronic.
Diseminarea realizrilor
imediate ale evalurii
50.0%
47.8%
45.8%
Diseminarea
rezultatelor evalurii
50.0%
47.8%
0%
20%
40%
2014
60%
2013
80%
100%
2012
Utilizarea rezultatelor
evalurii
76.8%
77.7%
Impactul evalurilor
asupra proceselor de
programare/implementar
e
79.2%
62.0%
65.2%
88.9%
Proceduri de abordare a
rezultatelor evalurii i
monitorizare (follow-up)
91.7%
90.3%
0%
20%
40%
2014
2013
60%
80%
100%
2012
Acest criteriu a nregistrat una dintre cele mai bune performane n toate cele trei cicluri de msurare.
Variaia de 8% nregistrat ntre valorile pentru 2014 i respectiv pentru 2012 poate fi explicat prin
faptul c, n cel de al treilea ciclu de msurare, cu scopul de a cuantifica utilizrii rezultatelor evalurii
pentru urmtoarea perioad de programare, n cadrul chestionarului electronic a fost adugat o nou
37
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
ntrebare, ceea ce a condus la nregistrarea unui scor mai bun a sub-criteriului Impactul evalurii asupra
procesului de programare / implementare.
Cadrul mental
57.0%
54.9%
58.6%
Valori
57.0%
54.9%
0%
20%
40%
2014
60%
2013
80%
100%
2012
Criteriul 9 a nregistrat o cretere continu n timpul celor trei cicluri de msurare, ceea ce relev faptul c
evaluarea este considerat o parte esenial n atingerea succesului la nivel instituional, att de ctre
personalul de conducere, ct i de cel executiv.
Contextul legal al
evalurii
25.0%
25.0%
25.0%
Prevederi legale
25.0%
25.0%
0%
20%
2014
40%
2013
60%
2012
80%
100%
Punctajul nregistrat de acest criteriu a rmas constant n toate cele trei cicluri de msurare, deoarece
legislaia nu a suferit modificri substaniale, iar elemente care mpiedic procesul de evaluare au fost
identificate att prin cercetare documentar, ct i n cadrul grupurilor de lucru cu reprezentanii GLE.
38
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
66.5%
Politica evaluativ
privind resursele
umane
60.9%
60.9%
66.5%
Politica de resurse
umane
60.9%
60.9%
0%
20%
40%
2014
60%
2013
80%
100%
2012
Avnd n vedere faptul c principala surs de date pentru acest criteriu este sondajul electronic,
mbuntirea punctajului depinde de opinia respondenilor n ceea ce privete participarea funcionarilor
publici la activitile de evaluare precum i referitor la activitatea susintorilor de evaluare (ex. persoane
care susin procesul de evaluare), att la nivel de PO, ct i CSNR. Pe de alt parte, procentul de
funcionari publici instruii n domeniul tiinelor sociale (spre deosebire de pregtire strict juridic), a
nregistrat o tendin de scdere, mai exact cu 12% n 2014 fa de 2012.
57.0%
Cererea de evaluare
ncorporat/pornit
de jos n sus (n SIS)
56.0%
56.3%
57.0%
Cererea de evaluare
ncorporat/pornit
de jos n sus (n SIS)
56.0%
56.3%
0%
20%
40%
2014
2013
60%
80%
100%
2012
39
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
53.8%
Reele
53.5%
54.5%
65.7%
Diminuarea decalajului
dintre mediul
universitar i Guvern
63.1%
65.7%
Existena unei
organizaii naionale a
evaluatorilor
profesioniti
41.9%
43.9%
43.2%
0%
20%
40%
2014
2013
60%
80%
100%
2012
27.6%
33.5%
22.6%
19.0%
32.4%
10.6%
36.1%
Participarea Societii
Civile
34.6%
34.6%
0%
20%
40%
2014
2013
60%
80%
100%
2012
40
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
(15) Guvernan
Figura 29 Punctajul ICE obinut pentru criteriul 15 comparaie ntre ciclurile de msurare la nivel de
sub-criterii
41.7%
Guvernan
42.0%
45.8%
41.7%
Indexul de
Guvernan
42.0%
45.8%
0%
20%
40%
2014
2013
60%
80%
100%
2012
Criteriul 15 are la baz Indicatorii Mondiali de Guvernan pentru perioada 1996-2012, publicai de Banca
Mondial i prezint poziia pe care se situeaz Romnia comparativ cu toate celelalte state din lume,
referitor la urmtoarele aspecte: opinie i responsabilitate, stabilitate politic, eficiena guvernului,
calitatea reglementrilor, statul de drept, controlul corupiei. Scorurile obinute au relevat o scdere
continu, de la 45,8% n 2012, la 41,7% n 2014.
Impactul pe termen
lung i n afara SIS
69.0%
50.2%
63.1%
69.0%
50.2%
0%
20%
40%
2014
2013
60%
80%
100%
2012
41
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
Capitol 3
1.2
100
Metodologia de msurare a impactului DMI 1.2 asupra nivelului de realizare a culturii de evaluare a fost
bazat pe ncercarea de a identifica posibilele corelri ntre activiti / rezultatele generate de proiectele
implementate n cadrul acestei msuri i indicatorii ICE. Fa de ciclul de evaluare anterior, metodologia
nu a fost modificat, respectndu-se astfel comparabilitatea rezultatelor.
Dup cum este evideniat n cel de al doilea Raport de Msurare Anual i specificat cu ocazia focus
grupului de validare cu GLE, atunci cnd corelarea dintre obiectivele DMI 1.2 i aspectele identificate de
ICE este redus, msurarea impactului DMI 1.2 ar trebui interpretat cu precauie.
Tabel 4 Impactul DMI 1.2: surse de informaii
Surse de informaii
Analiza
documentar
Interviuri/ discuii
de validare
Analiza materialelor aferente evalurii (ex. ghiduri, materiale de formare, studii, rapoarte, criterii de
selecie a personalului) i verificarea ncruciat cu livrabilele specificate n proiectele din cadrul DMI 1.2
Validarea corelrilor dintre ghidurile / procedurile existente aferente evalurii i livrabilele proiectelor
(raportul include informaiile colectate n timpul primului ciclu de msurare deoarece nu au survenit
modificri semnificative n timpul celui de-al doilea i de-al treilea ciclu)
Validarea cu reprezentanii GLE care se preconizeaz c vor fi printre cei care au beneficiat cel mai mult
de activitile derulate n cadrul DMI 1.2 cu privire la corelarea proiectelor cu ICE
42
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
24.50%
9.50%
18.52%
16.05%
11.67%
20%
10%
0%
Cererea de evaluare Oferta de evaluare
Diseminarea i
Instituionalizarea
utilizarea
culturii de evaluare
rezultatelor evalurii
Index general
40%
20%
(13) Reele
(5) Disponibilitatea i
fiabilitatea datelor socio-
0%
(6) Disponibilitatea i
calitatea expertizei n
43
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
Responsabiliti de Evaluare: DMI 1.2 are impact asupra structurii Unitilor de Evaluare, dar
nu asupra definirii misiunii, rolurilor i atribuiilor acestora. Raportul de Analiz a Sistemului de
Evaluare, elaborat n cadrul proiectului Dezvoltarea Capacitii de Evaluare pentru Unitile de
Evaluare din cadrul AM-urilor i ACIS4, recomand nfiinarea unor uniti dedicate n cadrul
AM-urilor, separat de alte funcii.
Coordonare: jumtate din reuniunile GLE au fost organizate n cadrul DMI 1.2. Pe de alt
parte, DMI 1.2 nu are impact asupra definirii mecanismului de coordonare a Unitilor de
Evaluare.
Corelarea funciei de evaluare cu alte funcii: n baza analizei documentare, exist dovezi cu
privire la impactul DMI 1.2 asupra corelrii funciei de evaluare cu cea de monitorizare.
Raportul de Analiz a Sistemului de Evaluare sugereaz faptul c datele de monitorizare ar
trebui s duc la realizarea de evaluri i aceast recomandare a fost integrat n toate
procedurile de evaluare, la nivelul PO i CSNR.
Figura 33 Structura evalurii: impactul DMI 1.2
0%
Responsabiliti de Evaluare
Coordonare
20%
40%
60%
80%
100%
20%
11%
23%
18%
n baza analizei documentare a documentelor elaborate n cadrul proiectului Dezvoltarea Capacitii de Evaluare pentru Unitile
de Evaluare din cadrul AM-urilor i ACIS, finanat din PO AT DMI 1.2, am identificat numeroase legturi ntre obiectivele i
activitile de proiect i ariile aferente indexului culturii de evaluare care sunt abordate direct sau indirect. Legturile cele mai
puternice i directe sunt identificate n special cu urmtoarele criterii aferente indexului: (1) Structura Evalurii, (2) Resursele
financiare i umane alocate Evalurii n cadrul CSNR, (4) Funcia de evaluare este eficient i eficace, (7) Diseminarea rezultatelor
evalurii, (8) Utilizarea rezultatelor evalurii, (11) Politica evaluativ a resurselor umane viznd asigurarea resurselor umane
adecvate, la toate nivelele, (12) Cererea de evaluare ncorporat/pornit de jos n sus (n SIS), (14) Societatea civil i mass media.
44
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
Resurse financiare: contribuia financiar a DMI 1.2 la bugetele alocate evalurii la nivel de
PO este redus (i anume DMI 1.2 finaneaz doar evalurile din cadrul PO AT; celelalte 6 POuri i programele de CTE utilizeaz resurse din propriul buget de evaluare, alocat n cadrul
Axei Prioritare de Asisten Tehnic din cadrul programului), n timp ce la nivelul CSNR este de
100%.
Resurse umane: DMI 1.2 nu are impact cu privire la acoperirea salariilor personalului din
cadrul Unitii de Evaluare (i anume legislaia actual nu permite finanarea salariilor din DMI
1.2). Pe de alt parte, DMI 1.2 are impact din perspectiva acoperirii costurilor de formare a
personalului din cadrul Unitii de Evaluare: numeroase cursuri de formare au fost finanate n
cadrul proiectului Dezvoltarea Capacitii de Evaluare pentru Unitile de Evaluare n cadrul
AM-urilor i ACIS. De asemenea, proiectul a avut ca rezultat o Strategie pentru cursuri de
formare continu pe tema sistemului de evaluare a instrumentelor structurale.
Figura 34 Resursele financiare i umane alocate Evalurii: impactul DMI 1.2
0%
Resurse financiare
40%
60%
80%
100%
2%
Resurse umane
20%
25%
14%
20%
Sistemul de indicatori
17%
Indicatorii individuali
22%
20%
40%
60%
80%
100%
45
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
Planuri de Evaluare: n cadrul DMI 1.2 au fost formulate recomandri privind actualizarea
periodic a Planurilor Anuale i Multianuale de Evaluare. n manualul Evaluarea Programelor
Operaionale. Concepte introductive elaborat n cadrul proiectului Dezvoltarea capacitii de
evaluare pentru Unitile de Evaluare din cadrul AM-urilor i ACIS se precizeaz c PME ar
trebui s fie un document dinamic, actualizat periodic, iar PAE-urile ar trebui elaborate la
nceputul fiecrui an de-a lungul ntregii perioade de programare. Cu toate acestea, doar POR
a actualizat att PME, ct i PAE-urile.
n plus, DMI 1.2 are un impact sporit asupra execuiei Planurilor de Evaluare la nivelul CSNR (i
anume toate rapoartele de evaluare au fost finanate n cadrul DMI 1.2) i un impact redus la
nivelul PO (i anume DMI 1.2 finaneaz doar rapoartele de evaluare elaborate n cadrul PO
AT, n timp ce alte evaluri sunt finanate prin Axa Prioritar Asisten Tehnic a fiecrui PO).
Termeni de referin: exist Ghidurile pentru Evaluri Intermediare elaborate n cadrul DMI
1.2, care, conform discuiilor cu membrii GLE, au fost utilizate pentru realizarea TdR att la
nivelul PO, ct i la nivelul CSNR.
20%
40%
60%
80%
100%
13%
24%
41%
38%
23%
46
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
20%
40%
60%
80%
100%
29%
66%
19%
47
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
ncepnd din ianuarie 2013, Ministerul Fondurilor Europene a pus la dispoziia factorilor de
decizie i publicului larg o Bibliotec de Evaluare centralizat, ce include rapoarte realizate
att la nivel de PO, ct i la nivelul CSNR, care poate fi consultat on-line pe pagina de Internet
www.evaluare-structurale.ro. Acest instrument pentru gestionarea rezultatelor evalurii a fost
realizat n cadrul proiectului mbuntirea modului de evaluare a procesului de elaborare a
politicilor publice i a procesului decizional n domeniul instrumentelor structurale din Romnia,
finanat n cadrul DMI 1.2.
Cu toate acestea, dintre cele trei rapoarte de evaluare realizate n ultimele 12 luni la nivelul
PO, nici unul nu a fost finanat prin DMI 1.2 i nici unul nu este disponibil pe pagina de Internet
a Bibliotecii de Evaluare. Proiectele de evaluare finalizate n ultimele 12 luni la nivelul CSNR,
au fost finanate prin intermediul DMI 1.2, ns niciunul nu este public.
La nivelul CSNR, toate evenimentele publice organizate n ultimele 12 luni pentru a discuta
rezultatele evalurilor au fost finanate prin intermediul DMI 1.2. La nivelul PO, dezbaterile
publice sunt finanate din alte surse i, prin urmare, impactul DMI 1.2 este limitat.
20%
40%
60%
80%
100%
22%
11%
48
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
(11) Politica evaluativ privind resursele umane viznd asigurarea resurselor umane
adecvate, la toate nivelele
Acest criteriu are n componen un singur subcriteriu i nregistreaz un impact de 7% al DMI 1.2, din
punctajul obinut de 67%. O analiz a nivelului de indicatori evideniaz c:
n baza sondajului completat de membrii GLE, DMI 1.2 a finanat cursuri de formare pentru
funcionari publici n domeniul tiinelor sociale.
n plus, la nivelul PO, exist participani GLE, expui la proiectele din cadrul DMI 1.2, care dein
o funcie de decizie i care pot susine procesul de evaluare (i anume susintori ai evalurii).
31% dintre evalurile finalizate, inclusiv la nivelul PO i CSNR, au fost finanate n cadrul DMI
1.2.
(13) Reele
n baza analizei documentare, nu a fost identificat niciun proiect n cadrul DMI 1.2 care s sprijine
organizaia naional a evaluatorilor. Impactul general al DMI 1.2 asupra acestui criteriu este de 0% din
punctajul total obinut de 54%.
49
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
Participarea Societii Civile: DMI 1.2 are impact asupra participrii societii civile la
activitile de evaluare (i anume am identificat dovezi cu privire la proiecte ce implic
societatea civil, finanate n cadrul DMI 1.2).
Participarea Mass Media: DMI 1.2 nu are impact asupra implicrii mass media (i anume
niciunul dintre proiectele finanate n cadrul DMI 1.2 nu a demonstrat participarea mass
media).
Figura 39 Societatea civil i mass media: impactul DMI 1.2
0%
4%
0%
5%
(15) Guvernan
Indicatorii care se ncadreaz n acest criteriu sunt msurai n baza Indexului de Guvernan al Bncii
Mondiale. DMI 1.2 nu poate avea impact asupra acestui indicator, aadar echipa de evaluare a convenit cu
beneficiarul ca acesta s nu fie inclus n Metodologia de Msurare.
Proiectele sau componentele proiectelor din cadrul DMI 1.2 se adreseaz instituiilor altele
dect AM i MFE (Organisme Intermediare, Beneficiari, Autoritatea de Audit, Autoritatea de
Certificare i Plat).
Proiectele din cadrul DMI 1.2 nu se adreseaz direct managerilor din administraia public.
50
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
24%
27%
19%
9%
25%
14%
10%
12%
19%
16%
0%
Cererea de evaluare Oferta de evaluare
Diseminarea i
Instituionalizarea
utilizarea
culturii de evaluare
rezultatelor evalurii
DMI 2013, Cultura de Evaluare
DMI 2014, Cultura de Evaluare
Index general
Aa cum este prezentat n figura de mai sus, n 2014 DMI 1.2 a nregistrat un impact uor sczut asupra
ICE, comparativ cu 2013. Avnd n vedere faptul c nu au fost identificate schimbri majore ntre cele
dou cicluri de msurare, aceast diferen poate fi integral atribuit percepiei membrilor GLE, exprimat
prin intermediul unui chestionar distribuit n cadrul grupului de lucru ce a avut loc n data de 11.07.2014.
51
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
Capitol 4
Cea de a treia msurare anual a culturii de evaluare bazat pe ICE a continuat s indice un grad
corespunztor de diseminare a culturii de evaluare n cadrul sistemului de management al Instrumentelor
Structurale, cuantificat ntr-un nivel mediu al ICE de 59% din punctajul maxim obinut de 100% (comparativ
cu 57% n primul ciclu de evaluare).
Gradul de diseminare a culturii de evaluare a fost determinat de un nivel mediu corespunztor aferent
Programelor Operaionale, indicnd rezultate mai satisfctoare pentru POR i POS Mediu i performane
uor mai reduse pentru POS CCE.
La nivelul dimensiunilor, cele mai dezvoltate par a fi oferta de evaluare i diseminarea rezultatelor
evalurii, urmate de cererea de evaluare, n timp ce exist arii de mbuntire cu privire la
instituionalizarea culturii de evaluare.
Comparnd rezultatele ICE obinute pe parcursul celor trei cicluri de msurare, oferta de evaluare a
nregistrat cea mai semnificativ evoluie (de la 45% n primul ciclu de msurare la 63% n ultimul),
determinat n principal de percepia respondenilor la sondajul electronic asupra performanei acestei
dimensiuni. Intervalul de timp de un an cuprins ntre ciclurile de msurare a culturii de evaluare ar putea fi
prea scurt pentru a reflecta mbuntiri substaniale pentru toate cele patru dimensiuni.
Pentru a formula recomandri solide cu privire la modificrile strategice aferente conceptului DMI 1.2 sau
viitoarelor activiti care pot fi ntreprinse n cadrul DMI pentru a spori nivelul de diseminare a culturii de
evaluare, au fost intercorelate la nivelul criteriilor ICE toate dovezile din cadrul celui de-al treilea ciclu de
msurare.
PERFORMANA
PUNCTE FORTE
PUNCTE SLABE
RECOMANDRI
DE
OPTIMIZARE
CULTURII DE EVALUARE
OPERAIONALE
STRATEGICE
Ca urmare a acestei abordri, pentru fiecare criteriu au fost sintetizate principalele puncte forte i puncte
slabe aferente culturii de evaluare care rezult din analiza surselor primare i secundare, au fost descrise
activitile relevante derulate aferente proiectelor contractate n cadrul DMI 1.2 i recomandrile au fost
difereniate n recomandri operaionale (i anume aciuni pe termen scurt care pot fi implementate n
cadrul structurii actuale a DMI 1.2) i recomandri strategice (i anume recomandri care necesit
schimbri ale logicii de intervenie a DMI 1.2 i care aadar pot necesita modificri ale documentelor de
programare i implementare existente) ce le reflect pe cele aferente ciclului anterior de msurare anual.
52
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
Criteriile ICE
PERFORMANA
PUNCTE FORTE
PUNCTE SLABE
OPERAIONALE
STRATEGICE
(1) Structura
evalurii
Structura sistemului de
evaluare exist n cadrul
Unitilor de Evaluare
dedicate constituite i
care funcioneaz la
nivelul Programului,
coordonate n mod
eficace de ctre Unitatea
Central de Evaluare
nfiinat n cadrul MFE.
Misiunea, rolurile i
atribuiile UE-urilor sunt
definite i atribuite clar n
baza RdF, procedurilor i
fielor de post.
Principalul inconvenient
cu privire la structur
face referire la faptul c
Unitile de Evaluare sunt
organizate n cadrul unor
compartimente ce
ndeplinesc i alte funcii
(ex: programare,
comunicare) i c exist o
lips de proceduri formale
care s coreleze funcia
de evaluare cu cea de
programare.
Procedura aplicat cu
privire la rolul de
coordonare al GLE se afl
n stadiul de versiune
preliminar.
Responsabil: Ministerul
Fondurilor Europene
(MFE)
Perioada: permanent
Sprijin pentru realizarea
unui studiu de analiz
comparativ
internaional cu privire
la aspectele
organizaionale ale
culturii de evaluare.
Responsabil: Ministerul
Fondurilor Europene
(MFE)
Perioada
Data nceperii: Trim. 4
din 2014
Data terminrii: Trim. 2
din 2015
(2) Resursele
financiare i
umane alocate
evalurii
Resursele financiare se
afl sub valoarea aferent
analizei comparative
internaionale (0,12% din
bugetul total aferent
programului operaional
este dedicat evalurii).
Aceast diferen a fost
influenat de faptul c n
analiza comparativ
internaional au fost
incluse date agregate
53
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
salariilor.
Perioada: permanent
(3) Calitatea
sistemului de
monitorizare
Calitatea sistemului de
indicatori este
considerat a fi adecvat
i capabil de a furniza
informaii prompte.
Nu au fost identificate
dovezi cu privire la
proiectele finanate n
cadrul DMI 1.2 care ar
putea avea impact asupra
calitii sistemului de
monitorizare.
Identificarea
indicatorilor utilizai n
perioada 2007-2013 i
care vor fi utilizai i n
perioada 2014-2020;
evaluarea fiabilitii i
consistenei acestora n
cadrul PO-urilor i
identificarea posibilelor
soluii de optimizare.
Responsabil: MFE
Perioada:
Data nceperii: Trim. 4
din 2014
Data terminrii: Trim. 2
din 2015
(4) Eficiena i
eficacitatea
funciei de
evaluare
Planurile multianuale i
anuale nu sunt
actualizate periodic, iar
gradul de realizare a
acestora nu este
ntotdeauna satisfctor.
Planurile multianuale de
evaluare au nregistrat o
ntrziere medie de 6 luni
ntre data planificat i
data finalizrii.
Procedurile nu sunt
actualizate periodic
pentru a reflecta ultimele
modificri
organizaionale.
n urma proiectelor
finanate prin DMI 1.2 au
rezultat recomandri cu
privire la actualizarea
periodic a planurilor
multianuale de evaluare.
Nu au fost identificate
dovezi cu privire la
impactul DMI 1.2 asupra
structurilor CCE.
Exist ghiduri elaborate n
cadrul DMI 1.2 cu privire
la ntocmirea TdR
n urma DMI 1.2 au
rezultat recomandri cu
privire la actualizarea
periodic a procedurilor
Sprijin pentru
structurarea i
activarea sub-grupurilor
GLE concentrate asupra
temelor specifice i
asupra actualizrii
periodice a funciei de
evaluare.
Planificarea noilor
cicluri de msurare cu
intervale adecvate
pentru a reflecta
impactul aciunilor
POAT.
Responsabil: MFE
54
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
Perioada:
Data nceperii: Trim. 4
din 2014
Data terminrii: Trim. 3
din 2016
ACIUNI DMI 1.2
(5)
Disponibilitatea i
fiabilitatea
datelor socioeconomice
Datele socio-economice
sunt disponibile n timp
util.
Nu au fost ntreprinse
aciuni specifice.
Contractele-cadru
multianuale cu valori mari
au atras numeroi actori
internaionali pe piaa
naional de evaluare.
DMI 1.2 nu finaneaz n
prezent cursuri de
formare pentru oferta de
Responsabil: MFE
Asigurarea
complementaritii cu
POCU pentru finanarea
opiunilor de formare i
instruire n domeniul
evalurii pentru oferta
de evaluare.
55
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
internaionale.
Sunt utilizate liste de
verificare specifice pentru
evaluarea calitii i, n
baza contribuiei
respondenilor la sondajul
electronic, rapoartele de
evaluare sunt de calitate
medie spre ridicat.
Evaluatorii sunt
considerai a fi
independeni.
evaluare.
Perioada: n paralel cu
procesul de programare
(7) Diseminarea
rezultatelor
evalurii
Numeroase Rapoarte de
Evaluare sunt disponibile
public pe pagina de
Internet a Grupului de
Lucru pentru Evaluare
(www.evaluarestructurale.ro) i n acest
sens au fost organizate
dezbateri publice pentru a
prezenta i discuta
constatrile evalurii.
Nu toate rapoartele de
evaluare sunt disponibile
integral publicului; unele
dintre acestea sunt
publicate doar sub forma
de Sumar Executiv.
Numrul mediu de
dezbateri publice
organizate per PO n
ultimele 12 luni pare s
fie redus.
Dezvoltarea paginii de
Internet a GLE (i a
Bibliotecii de Evaluare)
Publicarea pe pagina de
Internet a GLE a
rapoartelor de evaluare
Organizarea planificat a
unor evenimente de
diseminare la scar larg
n cadrul LOTULUI 2 al
Acordului-cadru privind
Instrumentele
Structurale.
Sprijinirea elaborrii
unui studiu ce vizeaz
identificarea celor mai
adecvate forme de
comunicare cu factorii
interesai de IS.
Continuarea includerii
n proiectele de
evaluare a
evenimentelor de
comunicare la scar
larg i publicarea
rezultatelor pe
platforma care susine
Biblioteca de Evaluare
Responsabil: MFE
Perioada: permanent
ACIUNI DMI 1.2
(8) Utilizarea
rezultatelor
evalurii
PESTE MEDIA
ICE
Exist proceduri de
abordare a rezultatelor
evalurii i de urmrire a
acestora (follow-up).
Utilizarea rezultatelor
evalurii este considerat
a avea un grad mai ridicat
la nivelul PO dect la
nivelul CSNR.
Nu au fost identificate
puncte slabe.
Discutarea periodic cu
GLE a procesului de
monitorizare (follow-up)
privind recomandrile
evalurii.
Nu au fost ntreprinse
aciuni specifice.
Responsabil: MFE
Perioada: ncepnd cu Trim.
Contract Subsecvent nr. 1
56
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
4 din 2014
(10) Contextul
legal al evalurii
Evaluarea este
considerat un factor
important pentru
asigurarea succesului la
nivel instituional att de
ctre echipa de
management/executiv,
ct i factorii care
formuleaz politici
publice.
Prevederile legale
naionale ce
reglementeaz evaluarea
reprezint transpunerea
cadrului legal UE i
stipuleaz cerine
suplimentare cu privire la
ntocmirea planurilor
multianuale i anuale de
evaluare.
Responsabil: MFE
Perioada:
Data nceperii: Trim. 4
din 2014
Data terminrii: Trim. 2
din 2015
Nu au fost ntreprinse
aciuni specifice.
57
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
(11) Politica
evaluativ
privind resursele
umane viznd
asigurarea
resurselor umane
adecvate, la toate
nivelurile
Exist susintori ai
evalurii att la nivelul
PO, ct i la nivelul CSNR.
Exist opiuni de formare
pe pia.
Responsabil: MFE
Perioada: n paralel cu
procesul de programare
(12) Cererea de
evaluare
ncorporat/
pornit de jos n
sus (n SIS)
(13) Reele
Exist o cerere de
evaluare.
La nivelul CSNR,
evalurile sunt iniiate ca
rspuns la o nevoie de
cunoatere, i nu ca
rspuns la o cerin de
conformitate impus de
ctre UE.
Cererea general de
evaluare, precum i
numrul de evaluri
iniiate ca rspuns la o
nevoie de cunoatere pot
fi mbuntite la nivelul
PO.
Exist o organizaie
naional a evaluatorilor.
Exist un mecanism de
cooperare ntre Guvern i
mediul universitar.
Contribuia organizaiei
naionale a evaluatorilor
la diseminarea bunelor
practici este redus.
Implicarea mediului
universitar a fost extrem
de limitat pn n
prezent.
Evalurile finanate n
cadrul DMI 1.2 au fost
iniiate ca rspuns la
nevoia de cunoatere.
Nu au fost ntreprinse
aciuni specifice.
58
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
Continuarea derulrii
(14)
Societatea civil
i mass media
Nu au fost identificate
puncte forte.
Gradul de participare a
societii civile la
activitile de evaluare
este redus, la fel i
numrul de evenimente
publice organizate anual.
activitilor de
comunicare viznd n mod
special entitile care
formuleaz politici
publice i societatea civil
Responsabil: MFE
Perioada: permanent
(15) Guvernan
(16) Impactul pe
termen lung i n
afara SIS
Opinie i responsabilitate,
calitatea reglementrilor,
statul de drept i
controlul corupiei sunt
peste media global, dup
cum a fost aceasta
msurat prin intermediul
Indexului de Guvernan
al Bncii Mondiale.
Stabilitatea politic i
Eficacitatea Guvernului
sunt sub media global,
dup cum a fost aceasta
msurat conform
Indexului de Guvernan
al Bncii Mondiale.
Receptivitatea
identificat fa de
evaluare n numele
instituiilor implicate n
cadrul Sistemului de
Instrumente Structurale
este corespunztoare. Un
aspect important este
reprezentat de prima
aciune de contractare a
misiunilor de evaluare
prin intermediul
Secretariatelor Tehnice
Comune n cadrul
Programelor CTE.
Instituiile implicate n
domeniul Instrumentelor
Structurale au
internalizat evaluarea
numai parial.
Responsabil: MFE
Perioada:
Data nceperii: Trim. 4
din 2014
Data terminrii: Trim. 2
din 2016
59
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
Anexe
60
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
61
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
62
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
63
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
Cooperare Transfrontalier
64
Raport privind msurarea culturii de evaluare din Romnia n contextul Politicii de Coeziune UE
Cel de-al treilea ciclu de msurare
Ministerul Dezvoltrii Regionale i Administraiei Publice CV-uri ale personalului care deruleaz activiti
de evaluare
Ministerul Dezvoltrii Regionale i Administraiei Publice Programul Operaional pentru Cooperare
Transfrontalier European Romnia-Bulgaria, octombrie 2007
Ministerul Dezvoltrii Regionale i Administraiei Publice Programul Operaional pentru Cooperare
Transfrontalier European Romnia-Serbia, iulie 2012
Ministerul Dezvoltrii Regionale i Administraiei Publice Planul Multianual de Evaluare pentru Programul
CTE Romnia-Bulgaria, nedatat
Ministerul Dezvoltrii Regionale i Administraiei Publice Planul Multianual de Evaluare pentru Programul
CTE Romnia-Serbia, nedatat
Ministerul Dezvoltrii Regionale i Administraiei Publice Planul anual de evaluare pentru 2012, CTE
Romnia-Bulgaria, nedatat
Ministerul Dezvoltrii Regionale i Administraiei Publice Planul anual de evaluare pentru 2009, CTE
Romnia-Serbia, nedatat
Ministerul Dezvoltrii Regionale i Administraiei Publice Tabele de monitorizare (follow-up)
Ministerul Dezvoltrii Regionale i Administraiei Publice Planul privind Achiziiile Publice pentru 2014
Ministerul Dezvoltrii Regionale i Administraiei Publice Liste de verificare pentru evaluare
Alte documente:
KPMG Raport de Analiz a Sistemului de Indicatori
Banca Mondial Indicatorii Globali de Guvernan pentru perioada 1996 2012, disponibili pe pagina de
Internet: www.worldbank.org
Rapoarte de Evaluare, disponibile pe pagina de Internet: www.evaluare-structurale.ro
Documentele Grupului de Lucru pentru Evaluare, disponibile pe pagina de Internet: www.evaluarestructurale.ro
Documentele elaborate n cadrul proiectului Sprijin pentru dezvoltarea capacitii de evaluare a
personalului din cadrul Unitii Centrale de Evaluare prin participarea la cursuri de formare, conferine i
seminarii n domeniul evalurii, disponibile pe pagina de Internet: www.evaluare-structurale.ro
65
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
Stadiul conform
informaiilor
extrase din
Biblioteca de
Evaluare
2006
Finalizat n ianuarie
2007
2009
Finalizat n octombrie
2009
2010
Finalizat n 2010
2010
Finalizat n noiembrie
2011
2011
Finalizat n aprilie
2014
2012
Titlul raportului
Raportul
integral
publicat
Sumarul
Executiv
publicat
Nepublicat
66
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
Data limit
conform Planului
Multianual de
Evaluare
Stadiul conform
informaiilor extrase
din Biblioteca de
Evaluare
2006
Finalizat n ianuarie
2007
2009
Finalizat n 2010
2010
Finalizat n 2013
2010
Finalizat n August
2011
2011
2011
2011
2012
2013
Titlul raportului
Raportul
integral
publicat
Sumarul
Executiv
publicat
Nepublicat
67
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
Stadiul conform
informaiilor
extrase din
Biblioteca de
Evaluare
2006
Finalizat n ianuarie
2007
Semestrul II 2009
Finalizat n iunie
2011
Semestrul II 2014
Nespecificat n PME
Prima Evaluare Intermediar a POS DRU Evaluarea ad-hoc a AP5, DMI 5.2
Promovarea sustenabilitii pe termen lung a zonelor rurale n ceea ce privete
dezvoltarea resurselor umane i ocuparea forei de munc
Nespecificat n PME
Titlul raportului
Raportul
integral
publicat
Sumarul
Executiv
publicat
Nepublicat
68
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
Stadiul conform
informaiilor
extrase din
Biblioteca de
Evaluare
2006
Finalizat n ianuarie
2007
Semestrul II 2009
Semestrul I 2010
Semestrul I 2011
Semestrul I 2013
Titlul raportului
Raportul
integral
publicat
Sumarul
Executiv
publicat
Nepublicat
69
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
Stadiul conform
informaiilor
extrase din
Biblioteca de
Evaluare
2006
Finalizat n februarie
2007
2009
2012
2013
Titlul raportului
Raportul
integral
publicat
Sumarul
Executiv
publicat
Nepublicat
70
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
Stadiul conform
informaiilor
extrase din
Biblioteca de
Evaluare
2006
Finalizat n ianuarie
2007
Semestrul II 2009
Finalizat n
septembrie 2010
Semestrul I - Semestrul
II 2012
Finalizat n martie
2013
Semestrul II 2013
Titlul raportului
Raportul
integral
publicat
Sumarul
Executiv
publicat
Nepublicat
71
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
Stadiul conform
informaiilor
extrase din
Biblioteca de
Evaluare
2006
Finalizat n ianuarie
2007
Semestrul I 2009
Finalizat n
septembrie 2010
Semestrul I 2010
Semestrul I 2010
Semestrul II 2010
Evaluarea Intermediar a PO AT
Semestrul I 2012
Februarie 2014
August 2013
August 2013
Titlul raportului
Raportul
integral
publicat
Sumarul
Executiv
publicat
Nepublicat
72
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
Cooperare Transfrontalier
Disponibilitatea n cadrul Bibliotecii de
Evaluare
Stadiul conform
informaiilor
extrase din
Biblioteca de
Evaluare
Nu se menioneaz data
Finalizat
2007
Nu se menioneaz data
Nu se menioneaz data
Finalizat n 2011
Semestrul I 2013
Nu se menioneaz data
Nu se menioneaz data
Semestrul I 2011
Semestrul II 2012
Titlul raportului
aprilie
Raportul
integral
publicat
Sumarul
Executiv
publicat
Nepublicat
73
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
Stadiul conform
informaiilor
extrase din
Biblioteca de
Evaluare
Semestrul II 2010
Semestrul II 2010
Finalizat n martie
2011
Semestrul II 2011
Finalizat n 2012
Semestrul I 2012
Finalizat n februarie
2011
Semestrul I 2012
Semestrul I 2012
Semestrul I 2012
Semestrul I 2012
Titlul raportului
Raportul
integral
publicat
Sumarul
Executiv
publicat
Nepublicat
74
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
Stadiul conform
informaiilor
extrase din
Biblioteca de
Evaluare
Nu se specific n PME
Finalizat n martie
2011
Semestrul II 2012
Finalizat n august
2011
Nu se specific n PME
Finalizat n ianuarie
2013
Finalizat n martie
2013
2013
Finalizat n decembrie
2013
2013
2013
Titlul raportului
Raportul
integral
publicat
Sumarul
Executiv
publicat
Nepublicat
75
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
Ministerul Fondurilor Europene i Ernst & Young deruleaz proiectul Examinarea culturii de evaluare" n Romnia - cofinanat de
Fondul European de Dezvoltare Regional prin PO Asisten Tehnic 2007-2013.
Pentru a evalua i monitoriza cultura de evaluare n cadrul sistemului de management al Instrumentelor Structurale din Romnia,
n termeni calitativi i cantitativi, prezentm acest chestionar electronic actorilor interesai (att de partea de ofert, ct i de
partea de cerere) implicai n Sistemul de Evaluare a Instrumentelor Structurale din Romnia.
Rezultatele chestionarului vor fi elaborate att la nivelul CSNR, ct i la nivel de Program.
DATE PERSONALE
1.a
Prenume
1.b
Nume
1.c
Instituia
1.d
Unitate/
Departament
1.e
Aria de
competen (ex.
evaluare,
programare,
monitorizare)
Legtura
dintre
Funcia de
Evaluare i
alte funcii
Marcai cu "X"
0-1
2-3
4-5
6-7
2
>8
b. Specificai ct de des deciziile luate de GLE sunt ulterior
adoptate la nivel de PO.
Niciodat
Marcai cu "X"
Rareori
Deseori
ntotdeauna
3.1
Marcai cu "X"
76
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
Da, dar sunt n format preliminar, neaprobate
Da, exist proceduri formale
3.1
3.1
Acordai note de la
1 la 5 (5 fiind nota
maxim, 1 fiind cea
minim)
Marcai cu "X"
51-75%
31-50%
Pn la 30%
3.2
0%
a. Exist proceduri care coreleaz evaluarea cu Unitatea de
Programare? (la nivel de CSNR)
Nu
Marcai cu "X"
3.2
3.2
Acordai note de la
1 la 5 (5 fiind nota
maxim, 1 fiind cea
minim)
Marcai cu "X"
51-75%
31-50%
Pn la 30%
0%
4.1
Marcai cu "X"
Nu
Sunt n format preliminar, neaprobate
4.1
Da
b. Care este frecvena ntlnirilor (formale i informale) legate
de activitile de evaluare ntre Unitile de Monitorizare i cele
de Evaluare (n ultimele 12 luni)? (la nivel de PO)
Nu au loc astfel de ntlniri
Marcai cu "X"
Anual
Trimestrial
Lunar
4.1
Marcai cu "X"
51-75%
31-50%
Pn la 30%
0%
77
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
4.1
Marcai cu "X"
Rareori
Deseori
ntotdeauna
4.1
Marcai cu "X"
Nu
Parial
4.1
4.2
Da
f. Dac rspunsul este DA / Parial, v rugm s indicai
principalele decalaje i/sau arii care necesit mbuntiri cu
privire la datele furnizate de Unitatea de Monitorizare. (la nivel
de PO)
a. Care este frecvena ntlnirilor (formale i informale) legate
de activitile de evaluare ntre Unitile de Monitorizare i cele
de Evaluare (n ultimele 12 luni) la nivel de CSNR?
Nu au loc astfel de ntlniri
Marcai cu "X"
Anual
Trimestrial
Lunar
4.2
Marcai cu "X"
51-75%
31-50%
Pn la 30%
4.2
0%
c. Unitatea de Monitorizare furnizeaz date de monitorizare
care sprijin evaluarea? (la nivel de CSNR)
Niciodat
Marcai cu "X"
Rareori
Deseori
ntotdeauna
4.2
Marcai cu "X"
Nu
Parial
4.2
Da
e. Dac rspunsul este DA / Parial, v rugm s indicai
principalele decalaje i/sau arii care necesit mbuntiri cu
privire la datele furnizate de Unitatea de Monitorizare. (la nivel
de CSNR)
Alocarea resurselor
umane pentru activitile
de evaluare
5.1
Marcai cu "X"
51-75%
31-50%
Pn la 30%
0%
Contract Subsecvent nr. 1
Examinarea Culturii de Evaluare, SMIS 43465
Proiect co-finanat din Fondul European de Dezvoltare Regional prin POAT 2007-201
78
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
5.2
Marcai cu "X"
51-75%
31-50%
Pn la 30%
0%
a. Sunt luate n considerare cunotinele din domeniul evalurii
n cadrul procesului de recrutare a personalului Unitii de
Evaluare? (ex. exist criterii cu privire la experiena
profesional, este evaluat nivelul de cunotine din domeniul
evalurii)
Nu
Marcai cu "X"
Da
b. Dac rspunsul este Da, n opinia dvs., aceste criterii duc la
angajarea personalului cel mai adecvat?
Niciodat
Marcai cu "X"
Uneori
7
ntotdeauna
Personalul din cadrul Unitii de Evaluare beneficiaz de aciuni
de dezvoltare profesional?
Nu
Da, personalul beneficiaz de sesiuni sporadice de formare
organizate pentru ntreg personalul (de ex. formare realizat ntro sal de curs)
Da, personalul beneficiaz de sesiuni sistematice de formare
organizate pentru ntreg personalul (de ex. sesiuni de instruire
planificate anual)
Da, exist un plan individual/personalizat de dezvoltare
profesional pentru fiecare persoan (de ex. formare la locul de
munc, ndrumare, stagii de pregtire)
Marcai cu X
8.1
8.1
Acordai note de la
1 la 5 (5 fiind nota
maxim, 1 fiind cea
minim)
Marcai cu X
Mediu, 1 lun
Puin, 15 zile
Foarte puin, 1 sptmn
79
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
8.2
8.2
Acordai note de la
1 la 5 (5 fiind nota
maxim, 1 fiind cea
minim)
Marcai cu X
Mediu, 1 lun
Puin, 15 zile
Foarte puin, 1 sptmn
9.1
Acordai note de la
1 la 5 (5 fiind nota
maxim, 1 cea
minim)
Acordai note de la
1 la 5 (5 fiind nota
maxim, 1 cea
minim)
1. Conform politicii
(strns corelat i eventual influenat de aciunile programului
pentru a crui evaluare este utilizat)
2. Normativitate
(avnd o interpretare clar i acceptat)
3. Robustee
(n conformitate cu standardele i metodologiile recunoscute la
nivel internaional)
4. Fezabilitate
(msurarea nu reprezint un proces mpovrtor)
Eficacitatea Planului de
Evaluare
Eficiena i eficacitatea funciei de Evaluare (cu privire la planificare, management, controlul calitii i nvare)
10.1
Marcai cu X
2-3
4-5
10.2
>5
Cte evaluri (care nu au fost incluse n planul de evaluare) au
fost realizate n perioada actual de programare 2007 - 2013
pentru a rspunde nevoilor specifice la nivel de CSNR?
Marcai cu X
80
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
<2
2-3
4-5
11.1
>5
Enumerai cele mai importante trei motive ale ntrzierilor
nregistrate ntre data la care au fost realizate i data la care au
fost programate evalurile (conform Planului Anual) la nivel de
PO.
11.2
12.1
12.2
13.1
13.1
Acordai note de la
1 la 5 (5 fiind nota
maxim, 1 fiind cea
minim)
Marcai cu X
Da
Nu, dar aceast abordare a fost luat n considerare i va fi
implementat n viitor
Nu
13.2
13.2
Nu tiu
a. Cum apreciai eficacitatea activitii Comitetului de
Coordonare a Evalurii? (din punct de vedere al asigurrii
calitii procesului de evaluare i al rezultatelor la nivel de
CSNR)
b. Sunt invitai i ali experi tematici s fac parte din
Comitetul de Coordonare a Evalurii n funcie de subiectul
evalurii? (la nivel de CSNR)
Da
Nu, dar aceast abordare a fost luat n considerare i va fi
implementat n viitor
Nu
Acordai note de la
1 la 5 (5 fiind nota
maxim, 1 fiind cea
minim)
Marcai cu X
Nu tiu
14.1
Marcai cu X
14.2
Da
Exist un proces formalizat pentru implicarea Unitii Centrale
de Evaluare n procesul decizional la nivel de CSNR? (ex.
Consultat de ctre Ministerul Fondurilor Europene cu privire la
principalele decizii pentru toate Programele Operaionale)
Nu
Marcai cu X
81
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
Consultrile au loc, dar nu n cadrul unui proces formalizat
Calitatea
Termenilor de
Referin
Da
15
Acordai note de la
1 la 5 (5 fiind nota
maxim, 1 cea
minim)
Claritii
Standardizrii (elaborai pe baza unui standard/model)
16.1
Existena unui Proces de nvare
16.2
Marcai cu X
Marcai cu X
Calitatea datelor
socioeconomice
17
Marcai cu X
Da
17
18
Acordai note de la
1 la 5 (5 fiind nota
maxim, 1 fiind cea
minim)
Marcai cu X
Da
b. Dac da, enumerai tipul de micro-date disponibile la nivel de
beneficiar.
82
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
Disponibilitatea expertizei
tematice i metodologice
Gradul de
competitivitate a
Pieei de Evaluare
20
Marcai cu X
Marcai cu X
21
Gradul de
independen al
evaluatorilor
Da
b. Enumerai principalele tipuri de expertiz care lipsesc (pn
la 3).
Marcai cu X
Da
21
Acordai note de la
1 la 5 (5 fiind nota
maxim, 1 fiind cea
minim)
1. Relevana
2. Precizia i claritatea
21
22
3. Utilitatea
c. Indicai principalele puncte slabe ale rapoartelor de evaluare
(pn la 3)
Acordai note de la
1 la 5 (5 fiind nota
maxim, 1 fiind cea
minim)
Diseminarea rezultatelor
imediate ale evalurii
23.1
Marcai cu X
1
2
23.2
mai mult de 2
Cte evenimente publice/dezbateri au fost organizate pentru
discutarea rezultatelor Evalurii (n ultimele 12 luni) la nivel de
CSNR?
0
Marcai cu X
83
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
1
2
mai mult de 2
24
25
Acordai note de la
1 la 5 (5 fiind nota
maxim, 1 fiind cea
minim)
Marcai cu X
Nu
Da
25
26.1
Marcai cu X
Pn la 30%
31 - 50%
51 - 75%
26.2
76 - 100%
Care este gradul de implementare a recomandrilor de evaluare,
la nivel de CSNR, pentru perioada actual de programare 2007 2013?
0%
Marcai cu X
Pn la 30%
31 - 50%
51 - 75%
76 - 100%
28
Acordai note de la
1 la 5 (5 fiind nota
maxim, 1 fiind cea
minim)
Valori
27
84
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
Politic evaluativ privind resursele umane care vizeaz asigurarea resurselor umane adecvate la toate nivelele pentru
realizarea evalurilor
29
Marcai cu X
25 - 50%
51 - 75 %
30
30
31.1
> 75%
a. Specificai nivelul de participare a funcionarilor publici, din
cadrul structurii organizaionale care include i biroul pentru
care lucrai dumneavoastr n mod direct, la activitile de
evaluare.
b. Specificai nivelul de participare a funcionarilor publici, din
cadrul structurii organizaionale care include i biroul pentru
care lucrai dumneavoastr n mod direct, la evenimentele
publice legate de evaluare (ex. prezentarea rezultatelor
evalurii, evenimente organizate de societile de evaluare).
Exist o persoan din cadrul structurii organizaionale care
include i biroul pentru care lucrai dumneavoastr n mod
direct, cu funcie de conducere, care susine procesul de
evaluare? (la nivel de PO)
Acordai note de la
1 la 5 (5 fiind nota
maxim, 1 fiind cea
minim)
Acordai note de la
1 la 5 (5 fiind nota
maxim, 1 fiind cea
minim)
Marcai cu X
Nu
31.2
Da
Exist o persoan din cadrul structurii organizaionale care
include i biroul pentru care lucrai dumneavoastr n mod
direct, cu funcie de conducere, care susine procesul de
evaluare? (la nivel de CSNR)
Nu
32
Marcai cu X
Da
Marcai cu X
Nu
32
Marcai cu X
Da
Nu tiu
32
Cerere de evaluare
ncorporat (n SIS)
33.1
Marcai cu X
Pn la 30%
31-50%
51 -75%
76 - 100%
Contract Subsecvent nr. 1
Examinarea Culturii de Evaluare, SMIS 43465
Proiect co-finanat din Fondul European de Dezvoltare Regional prin POAT 2007-201
85
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
33.2
Marcai cu X
Pn la 30%
31-50%
51 -75%
76 - 100%
Reele
34
Acordai note de la
1 la 5 (5 fiind nota
maxim, 1 fiind cea
minim)
34
Acordai note de la
1 la 5 (5 fiind nota
maxim, 1 fiind cea
minim)
34
Acordai note de la
1 la 5 (5 fiind nota
maxim, 1 fiind cea
minim)
35
Marcai cu X
Nu
Nu tiu
35
Acordai note de la
1 la 5 (5 fiind nota
maxim, 1 fiind cea
minim)
Participarea mass-media
Participarea societii
civile
36
36
37
Acordai note de la
1 la 5 (5 fiind nota
maxim, 1 fiind cea
minim)
Proiect co-finanat din Fondul European de Dezvoltare Regional prin POAT 2007-201
86
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
38
Acordai note de la
1 la 5 (5 fiind nota
maxim, 1 fiind cea
minim)
Autoritatea de Audit
Autoritatea de Certificare i Pli
Beneficiari
39
39
39
40
40
Acordai note de la
1 la 5 (5 fiind nota
maxim, 1 fiind cea
minim)
Acordai note de la
1 la 5 (5 fiind nota
maxim, 1 fiind cea
minim)
87
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
5
5
7
19
16
27
Cererea de evaluare la nivelul strategiei naionale (UCE)
Cererea de evaluare la nivel de program unic utilizatorul rezultatelor evalurii (AM)
Cererea de evaluare la nivel de program unic implicat n procesul de evaluare (UE)
Oferta de evaluare factorii interesai implicai n procesul de evaluare la nivel naional i/sau la nivel de
program unic (EI, Universitate)
Cererea de evaluare factorii interesai implicai n procesul de evaluare la nivel naional i/sau la nivel
de program unic (SC, RRL AA, Beneficiari)
Cererea de evaluare la nivel de program unic - utilizatorul rezultatelor evalurii (OI)
Cererea de evaluare la nivelul de program unic - utilizatorul rezultatelor evalurii (MP)
Cererea de evaluare factorii interesai implicai n procesul de evaluare la nivel naional i/sau la nivel
de program unic (INS)
88
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
Instituia
Denumirea instituiei
ara
Prenume
Telefon
Adresa de e-mail
ntrebri
Cte evaluri au fost realizate anual de ctre instituia dvs.?
Cte evaluri au fost efectuate, pn la data actual, pentru Programul Operaional al dvs.?
Cte astfel de evaluri au fost realizate ca rspuns la o necesitate privind cunotinele empirice (din totalul
acestora) i nu ca urmare a unei obligaii?
Cum este organizat la momentul actual funcia de evaluare? Sunt prevzute schimbri pentru perioada
2014 2020?
Ce cuantum din resursele umane este dedicat Funciei de Evaluare n cadrul Programului Operaional al dvs.?
Avei reuniuni/ntlniri periodice cu reprezentanii mediului academic/centrelor de cercetare pentru o mai
bun programare i implementare a Programului Operaional al dvs.?
Aceste reuniuni/ntlniri au ca rezultat un proces optimizat de formulare a politicilor publice?
V rugm s facei o evaluare acordnd nota de la 1 (nota minim) la 5 (nota maxim) contribuiei venite din
mediul academic/centrele de cercetare la procesul de formulare a politicilor publice.
Exist n ara dvs. o organizaie profesional a Evaluatorilor?
Cte reuniuni publice organizeaz anual aceast organizaie profesional?
89
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
Numele
Instituia
1.
Niculescu Nicoleta
ADER
2.
Ciot Gabriela
ADER
3.
Chiffa Monica
ADER
4.
Adrian Miroiu
SNSPA
5.
Aioanei Mihaela
SNSPA
6.
ADER
7.
Micu Florentina
ADER
8.
ADER
9.
Alexandra Simbie
ADER
10.
Carausan Mihaela
ADER / SNSPA
90
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
Numele
Instituia
1.
Claudia Mgdlina
2.
Diana Iacob
Loredana Suditu
Adriana andru
Cristina Hodina
Mariana Nanu
Ileana Geambau
Elena Cmran
9.
Anca Simion
10.
Simona Vasile
11.
Mioara Mot
12.
Georgeta Enache
3.
4.
5.
6.
7.
8.
91
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
Nr.
Numele
Instituia
13.
Cristina Preda
14.
Daniela Lorentz
15.
Rzvan Ionescu
16.
Miruna Potaru
17.
18.
Alexandru Tacu
Laureniu Tecan
92
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
Numele
Instituia
1.
Guran George
2.
Oana Mihalache
3.
Maxim Dumitru
4.
Diana Gradea
5.
Ioana Predulea
6.
Adrian Purcaru
7.
Smadu Georgeta
8.
Alina Iacob
9.
Mihaela Kanovitis
10.
Ciofu Daniela
11.
Daniela Ghiculescu
12.
Daniela Breazu
13.
Claudiu N. Cesier
14.
Mihaela Melente
15.
Carlan Mircea
16.
Mariana Nanu
17.
Camelia Popescu
18.
Daniel Calin
19.
Alexandra Ionita
20.
Alexandra Manea
93
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
Nr.
Numele
Instituia
21.
Gabriel Ciubuc
22.
Lungulescu Irina
Ministerul Sntii
23.
Olteanu Mihaela
24.
Jalia Steluta
25.
Diana Iacob
26.
Michele Giove
EY
27.
Michele Scataglini
EY
94
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
95
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
Principalele etape analitice care trebuie urmate atunci cnd se efectueaz o EIR sunt sumarizate n
Tabelul 6. O descriere detaliat a acestor etape este prezentat n Liniile directoare ale CE.
Pentru a aplica aceste etape n mod eficient i eficace este important corelarea EIR cu:
O agend de reglementare
Identificarea problemei
Descrierea naturii i anvergurii problemei.
Identificarea principalilor actori /categoriilor afectate.
Stabilirea factorilor determinani i a cauzelor aferente.
n ara respectiv problema necesit luarea unor msuri? Intervenia de reglementare este necesar?
Dezvoltarea unui scenariu de baz clar, inclusiv, acolo unde este necesar, analiza senzitivitii i evaluarea riscului.
Definirea obiectivelor
Stabilirea unor obiective care s corespund problemei i cauzelor principale ale acesteia.
Stabilirea unor obiective pe mai multe nivele, care pornesc de la general la specific/operaional.
Asigurarea faptului c obiectivele corespund politicilor i strategiilor UE existente
Elaborarea principalelor opiuni privind politicile publice
Identificarea opiunilor privind politicile publice, acolo unde este cazul, realizarea unei distincii ntre opiunile pentru
coninut i cele pentru mecanismele de livrare (abordri privind reglementrile/altele dect cele privind reglementrile).
Verificarea principiului proporionalitii.
Restrngerea categoriei prin selecie pentru constrngerile tehnice i de alt natur, i msurarea raportat la criteriile de
eficacitate, eficien i coeren.
ntocmirea unei liste scurte cu opiunile care ar putea fi valabile pentru analiz ulterioar.
Analiza impactului opiunilor
Identificarea (direct i indirect) a impactului economic, social i de mediu i modul de apariie a acestuia (cauzalitate).
Identificarea entitilor afectate (inclusiv a celor din afara UE) i a modului n care sunt acestea afectate.
Evaluarea impactului raportat la valoarea de baz din perspectiv calitativ, cantitativ i financiar. Dac nu este posibil
cuantificarea, explicai de ce.
Identificarea i evaluarea poverii administrative /avantajelor rezultate n urma simplificrii (sau formularea unei justificri
n cazul n care nu se realizeaz acest lucru).
Luarea n considerare a riscurilor i neregulilor privind opiunile legate de politicile publice, inclusiv obstacolele referitoare
la transpunere/conformitate.
Compararea opiunilor
Analizarea impactului pozitiv i negativ pentru fiecare opiune n baza criteriilor corelate direct cu obiectivele.
Acolo unde este fezabil, prezentarea rezultatelor globale i specifice.
Prezentarea comparaiei dintre opiuni per categorii de impact i factori interesai afectai.
Identificarea, acolo unde este posibil i adecvat, a unei opiuni preferate.
Evidenierea procesului de monitorizare i evaluare a politicilor publice
Identificarea principalilor indicatori de progres pentru principalele obiective aferente interveniilor posibile.
Furnizarea unei prezentri complexe a posibilelor aciuni de monitorizare i evaluare.
96
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
colecta informaiile necesare pentru a stabili dac guvernul nelege problema i dac a
ales soluia potrivit
Guvernele care utilizeaz EIR au definit patru obiective principale care ar putea fi realizate prin
integrarea acestui instrument n cadrul procesului decizional:
Optimizarea procesului de formulare a politicilor publice este un proces ce abordeaz ntregul ciclu de
via al reglementrilor, stipulnd normele generale pentru determinarea, evaluarea, aplicarea,
implementarea, precum i evaluarea ex post a normelor legale. Prin urmare, guvernele pot opta
pentru o gam larg de msuri, inclusiv simplificarea procedurilor administrative, consolidarea actelor
juridice, reducerea poverii administrative, utilizarea unor alternative favorabile pieei, evaluarea
bazat pe risc, fonduri alocate pentru elaborarea normelor, standarde pentru consultarea grupurilor
de interese, evaluarea sustenabilitii celor existente, precum i a noilor reglementri, i evaluarea ex
post a efectelor acestora. EIR reprezint doar unul dintre elementele necesare pentru un pachet de
reglementri optimizat.
n figura de mai jos este ilustrat modul n care instrumentele de reglementare (Agenda de
reglementare, consultarea cu factorii interesai, EIR, evaluri in itinere/ex post, elaborarea
reglementrilor) pot mbunti procesul de formulare a politicilor publice.
97
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
Identificarea
problemei
Agenda de
reglementare
Identificarea
prioritilor
Consultarea
factorilor
interesai
Evaluarea
Impactului de
Reglementare
Consultarea
factorilor
interesai
mbuntirea
procesului de
formulare a
politicilor publice
Consultarea
factorilor
interesai
Ciclul politicii de
reglementare
Definirea
politicilor
Revizuirea
Politicilor
Elaborarea
reglementrilor
Evaluarea
ex post
Consultarea
factorilor
interesai
Procesul
decizional
Implementare,
monitorizare i
meninere
Monitorizare,
Evaluare in
itinere
Instrumente de reglementare
optimizate
98
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
SUB CRITERIU
INDICATOR
INTREBARE
METODOLOGIE DE PUNCTARE
SURSA
DE LA 1 LA 3
1 = Nu exist o Unitate dedicat la nivel de PO
2 = Exist o Unitate dedicat, n majoritatea cazurilor, la nivel de
PO
3 = Exist ntotdeauna o Unitate dedicat la nivel de PO
Cercetare de birou
(Organigram, ROF)
NA
1. Alocarea
Responsabilitilo
r de Evaluare
DE LA 1 LA 2
1 = Nu exist o Unitate dedicat la nivel de CSNR
2 = Exist o Unitate dedicat la nivel de CSNR
1. Existena unei
Uniti de Evaluare
dedicate
a. Unitile de Evaluare se
subordoneaz exclusiv
efului AM?
DE LA 1 LA 2
1 = Nu
2 = Da
b. Unitile de Evaluare
realizeaz exclusiv activiti
de evaluare?
DE LA 1 LA 2
1 = Nu, Unitile de Evaluare sunt atribuite unor Uniti care
realizeaz i alte funcii
2 = Da, Unitile de Evaluare sunt organizate ntr-o unitate
dedicat, care realizeaz exclusiv activiti legate de evaluare
Cercetare de birou
(Organigram, ROF)
99
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUB CRITERIU
2. Coordonarea
ntre Funciile de
Evaluare a
diferitelor
Programe
INDICATOR
INTREBARE
2. Definirea clar a
misiunii, rolurilor i
sarcinilor Unitii
de Evaluare
Exist proceduri/prevederi
oficiale care stabilesc
misiunea, rolurile i sarcinile
Unitii de Evaluare?
DE LA 1 LA 3
1 = Nu exist proceduri / prevederi
2 = Da, dar procedurile / prevederile sunt n format preliminar,
neaprobate
3 = Da, exist proceduri / prevederi
Cercetare de birou
(ROF, Procedura de
Evaluare)
3. Atribuirea clar
a rolurilor i
sarcinilor
persoanelor din
cadrul funciilor de
evaluare
DE LA 1 LA 3
1 = Rolurile i sarcinile aferente Unitii de Evaluare nu sunt
atribuite persoanelor
2 = Rolurile i sarcinile aferente Unitii de Evaluare nu sunt
atribuite n mod clar persoanelor sau sunt atribuite parial
3 = Toate rolurile i sarcinile aferente Unitii de Evaluare sunt
atribuite persoanelor n mod clar
Cercetare de birou
(Fia postului)
4. Eficacitatea
coordonrii ntre
Unitile de
Evaluare ale
diferitelor
programe
METODOLOGIE DE PUNCTARE
DE LA 1 LA 3
1 = Nu
2 = Sunt n versiune preliminar, neaprobate
3 = Da
DE LA 1 LA 5
1 = 0-1
2 = 2-3
3 = 4-5
4 = 6-7
5 = >8
SURSA
Cercetare de birou
(mandatul
Comitetului de
Coordonare a
Evalurii)
eSurvey
100
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUB CRITERIU
3 Legtura dintre
Funcia de
Evaluare i alte
funcii
INDICATOR
5. Eficacitatea
cooperrii dintre
Unitile de
Evaluare i cele de
Programare (la
nivel de PO)
5. Eficacitatea
cooperrii dintre
Unitile de
Evaluare i cele de
Programare (la
nivel de CSNR)
INTREBARE
METODOLOGIE DE PUNCTARE
SURSA
c. Specificai ct de des
deciziile luate de GLE sunt
ulterior adoptate la nivel de
PO?
DE LA 1 LA 4
1 = Niciodat
2 = Rareori
3 = Deseori
4 = ntotdeauna
DE LA 1 LA 4
1 = Nu
2 = Da, exist proceduri informale
3 = Da, dar sunt n format preliminar, neaprobate
4 = Da, exist proceduri formale
Cercetare de birou
(ROF, Procedura de
Evaluare) +
eSurvey
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
eSurvey
DE LA 1 LA 5
1 = 76-100%
2 = 51-75%
3 = 31-50%
4 = pn la 30%
5 = 0%
DE LA 1 LA 4
1 = Nu
2 = Da, exist proceduri informale
3 = Da, dar sunt n format preliminar, neaprobate
4 = Da, exist proceduri formale
eSurvey
Focus Grup cu GLE
Cercetare de birou
(ROF, Procedura de
Evaluare) +
eSurvey
101
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUB CRITERIU
INDICATOR
6. Eficacitatea
cooperrii dintre
Unitile de
Evaluare i cele de
Monitorizare (la
nivel de PO)
INTREBARE
METODOLOGIE DE PUNCTARE
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
DE LA 1 LA 5
1 = 76-100%
2 = 51-75%
3 = 31-50%
4 = pn la 30%
5 = 0%
DE LA 1 LA 3
1 = Nu
2 = Da, sunt n format preliminar, neaprobate
3 = Da
DE LA 1 LA 5
1.= Nu au loc astfel de ntlniri
2 = ntlniri anuale
3 = ntlniri trimestriale
4 = ntlniri lunare
5 = Mai mult de o ntlnire pe lun
SURSA
eSurvey
eSurvey
Focus Grup cu GLE
Cercetare de birou
(ROF, Procedura de
Evaluare) +
eSurvey
eSurvey
Focus Grup cu GLE
102
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUB CRITERIU
INDICATOR
INTREBARE
METODOLOGIE DE PUNCTARE
DE LA 1 LA 5
1 = 76-100%
2 = 51-75%
3 = 31-50%
4 = pn la 30%
5 = 0%
d. Unitile de Monitorizare
furnizeaz date de
monitorizare care sprijin
evaluarea? (la nivel de PO)
DE LA 1 LA 4
1 = Niciodat
2 = Rareori
3 = Deseori
4 = ntotdeauna
DE LA 1 LA 3
1 = Nu
2 = Parial
3 = Da
SURSA
103
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUB CRITERIU
INDICATOR
6. Eficacitatea
cooperrii dintre
Unitile de
Evaluare i cele de
Monitorizare (la
nivel de CSNR)
INTREBARE
METODOLOGIE DE PUNCTARE
DE LA 1 LA 3
1 = Nu
2 = Da, sunt n format preliminar, neaprobate
3 = Da
DE LA 1 LA 5
1.= Nu au loc astfel de ntlniri
2 = ntlniri anuale
3 = ntlniri trimestriale
4 = ntlniri lunare
5 = Mai mult de o ntlnire pe lun
d. Unitatea de Monitorizare
furnizeaz date de
monitorizare care sprijin
evaluarea? (la nivel de
CSNR)
DE LA 1 LA 4
1 = Niciodat
2 = Rareori
3 = Deseori
4 = ntotdeauna
SURSA
Cercetare de birou
(procedurile
unitilor de
evaluare)
eSurvey
Focus Grup cu GLE
104
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUB CRITERIU
INDICATOR
INTREBARE
e. Putei identifica o arie de
mbuntire a cooperrii
dintre funciile de Evaluare i
Monitorizare? (la nivel de
CSNR)
METODOLOGIE DE PUNCTARE
SURSA
DE LA 1 LA 3
1 = Nu
2 = Parial
3 = Da
4. Alocarea
resurselor
financiare pentru
activitile de
evaluare
5. Alocarea
resurselor umane
pentru activitile
de evaluare
7. Cuantumul
aferent bugetului
pentru evaluare (%)
(la nivel de PO)
7. Cuantumul
aferent bugetului
pentru evaluare (%)
(la nivel de CSNR)
8. Caracterul
adecvat al
resurselor umane
din cadrul
Unitilor de
Evaluare (la nivel
de PO)
NA
DE LA 1 LA 4
1 = Total insuficient (ex. mai puin de 2% din bugetul total)
2 = Insuficient
3 = Suficient
4 = Mai mult dect suficient
Cercetare de birou
(PME, PAE, Planuri
de Achiziii)
Focus Grup cu GLE
NA
DE LA 1 LA 4
1 = Total insuficient (ex. mai puin de 2% din bugetul total)
2 = Insuficient
3 = Suficient
4 = Mai mult dect suficient
Cercetare de birou
(PME, PAE, Planuri
de Achiziii)
Focus Grup cu GLE
DE LA 1 LA 4
1 = Total insuficient (ex. mai puin de 2% din bugetul total)
2 = Insuficient
3 = Suficient
4 = Mai mult dect suficient
Cercetare de birou
(Situaia actualizat
a poziiilor ocupate
n cadrul AM)
+ Analiz
comparativ
internaional
105
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUB CRITERIU
INDICATOR
8. Caracterul
adecvat al
resurselor umane
din cadrul
Unitilor de
Evaluare (la nivel
de CSNR)
INTREBARE
METODOLOGIE DE PUNCTARE
SURSA
DE LA 1 LA 5
1 = 76-100%
2 = 51-75%
3 = 31-50%
4 = pn la 30%
5 = 0%
eSurvey
c. n opinia dumneavoastr,
competenele i expertiza
personalului de evaluare (la
nivel de PO) sunt adecvate
rolurilor i responsabilitilor
atribuite?
DE LA 1 LA 4
1 = Nu, sunt total inadecvate
2 = Nu, ar trebui mbuntite
3 = Da, sunt adecvate
4 = Da, sunt mai mult dect adecvate
Cercetare de birou
(CV-urile
personalului Unitii
de Evaluare)
DE LA 1 LA 4
1 = Total insuficient (ex. mai puin de 2% din bugetul total)
2 = Insuficient
3 = Suficient
4 = Mai mult dect suficient
Cercetare de birou
(Situaia
actualizat a
poziiilor ocupate n
cadrul MA)
+ Analiz
comparativ
internaional
DE LA 1 LA 5
1 = 76-100%
2 = 51-75%
3 = 31-50%
4 = pn la 30%
5 = 0%
eSurvey
c. n opinia dumneavoastr,
competenele i expertiza
personalului de evaluare (la
nivel de CSNR) sunt adecvate
rolurilor i responsabilitilor
atribuite?
DE LA 1 LA 4
1 = Nu, sunt total inadecvate
2 = Nu, ar trebui mbuntite
3 = Da, sunt adecvate
4 = Da, sunt mai mult dect adecvate
Cercetare de birou
(CV-urile
personalului Unitii
de Evaluare)
106
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUB CRITERIU
INDICATOR
6. Calitatea
sistemului de
indicatori
METODOLOGIE DE PUNCTARE
SURSA
DE LA 1 LA 2
1 = nu
2 = da
eSurvey
DE LA 1 LA 3
1 = Niciodat
2 = Uneori
3 = ntotdeauna
eSurvey
Focus Grup cu GLE
DE LA 1 LA 4
1 = Nu
2 = Da, personalul beneficiaz de sesiuni sporadice de formare
organizate pentru ntreg personalul (de ex. formare n cadrul unui
curs)
3 = Da, personalul beneficiaz de sesiuni sistematice de formare
organizate pentru ntreg personalul (de ex. sesiuni de instruire
planificate anual)
4 = Da, exist un plan individual/personalizat de dezvoltare
profesional pentru fiecare persoan (de ex. formare la locul de
munc, ndrumare, stagii de pregtire)
eSurvey
11. Calitatea
sistemului de
indicatori la nivel
9. Existena unor
criterii pentru
procesul de
angajare a
personalului
INTREBARE
107
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUB CRITERIU
INDICATOR
INTREBARE
METODOLOGIE DE PUNCTARE
SURSA
de PO
1. Acoperirea
(msura n care sistemul de
indicatori ofer informaii
cuantificate despre situaia
socioeconomic i de mediu
i poate specifica nevoile
cantitative identificate.
Sistemul ofer informaii
care pot avea impact asupra
PO-urilor sau asupra crora
PO-urile pot avea impact)
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
Cercetare de birou
(KPMG Report)
2. Echilibrul
(msura n care sistemul de
indicatori include un mix de
indicatori distribuii n mod
corespunztor - context,
input, realizare imediat,
rezultat, impact - i solicitri
de informaii de la diverse
categorii/nivele de actori
implicai)
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
3. Gestionabilitatea
(msura n care sistemul de
indicatori permite
colectarea, msurarea,
procesarea, monitorizarea i
comunicarea
corespunztoare a
indicatorilor)
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
b. Ct dureaz n medie, la
nivel de PO, obinerea de
informaii din sistemul de
monitorizare, referitoare la
indicatori, raportat la o
anumit dat limit?
DE LA 1 LA 4
1 = Mult, peste 2 luni
2 = Mediu, o lun
3 = Puin, 15 zile
4 = Foarte puin, o sptmn
eSurvey
eSurvey
108
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUB CRITERIU
INDICATOR
INTREBARE
METODOLOGIE DE PUNCTARE
SURSA
11. Calitatea
sistemului de
indicatori la nivel
de CSNR
7. Calitatea
indicatorilor
individuali
12. Calitatea
indicatorilor
individuali la nivel
de CSNR
1. Acoperirea
(msura n care sistemul de
indicatori ofer informaii
cuantificate despre situaia
socioeconomic i de mediu
i poate specifica nevoile
cantitative identificate.
Sistemul ofer informaii
care pot avea impact asupra
PO-urilor sau asupra crora
PO-urile pot avea impact)
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
2. Gestionabilitatea
(msura n care sistemul de
indicatori permite
colectarea, msurarea,
procesarea, monitorizarea i
comunicarea
corespunztoare a
indicatorilor)
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
b. Ct dureaz n medie, la
nivel de CSNR, obinerea de
informaii din sistemul de
monitorizare, referitoare la
indicatori, raportat la o
anumit dat limit?
DE LA 1 LA 4
1 = Mult, peste 2 luni
2 = Mediu, o lun
3 = Puin, 15 zile
4 = Foarte puin, o sptmn
Cercetare de birou
(KPMG Report)
eSurvey
eSurvey
109
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUB CRITERIU
INDICATOR
12. Calitatea
indicatorilor
individuali la nivel
de CSNR
INTREBARE
METODOLOGIE DE PUNCTARE
1. Conform cu politica
(strns corelat i eventual
influenat de aciunile
programului pentru a crui
evaluare este utilizat)
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
2. Normativ
(avnd o interpretare clar i
acceptat)
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
SURSA
Cercetare de birou
(KPMG Report)
eSurvey
3. Robust
(n conformitate cu
standardele i metodologiile
recunoscute la nivel
internaional)
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
4. Fezabil
(msurarea nu reprezint o
povar)
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
1. Conform cu politica
(strns corelat i eventual
influenat de aciunile
programului pentru a crui
evaluare este utilizat)
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
Cercetare de birou
(KPMG Report)
eSurvey
2. Normativ
(avnd o interpretare clar i
acceptat)
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
110
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUB CRITERIU
(4) Eficiena i
eficacitatea funciei de
Evaluare (cu privire la
planificare,
management, controlul
calitii i nvare)
INDICATOR
INTREBARE
METODOLOGIE DE PUNCTARE
SURSA
3. Robust
(n conformitate cu
standardele i metodologiile
recunoscute la nivel
internaional)
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
4. Fezabil
(msurarea nu reprezint o
povar)
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
NA
DE LA 1 LA 5
1 = Nu exist planuri anuale i multianuale
2 = Nu exist planuri anuale i multianuale la nivel naional, dar
uneori exist la nivel de Program
3 = Exist planuri anuale i multianuale la nivel naional i uneori
la nivel de Program
4 = Planurile anuale i multianuale exist, n majoritatea cazurilor,
la ambele nivele
5 = Planurile anuale i multianuale exist ntotdeauna la ambele
nivele
Cercetare de birou
(Planuri Multianuale
de Evaluare, Planuri
Anuale de Evaluare)
14. Gradul de
realizare a
Planurilor
Multianuale de
Evaluare (la nivel
de PO)
DE LA 1 LA 4
1 < 25%
2 = 25 - 50%
3 = 51 - 75%
4 = 76% - 100%
Cercetare de birou
(Rapoarte publicate
pe site-ul Biblioteca
de Evaluare)
8. Eficacitatea
Planului de
Evaluare
111
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUB CRITERIU
INDICATOR
14. Gradul de
realizare a
Planurilor
Multianuale de
Evaluare (la nivel
de CSNR)
INTREBARE
METODOLOGIE DE PUNCTARE
SURSA
DE LA 1 LA 4
1<2
2=2-3
3 = 4- 5
4>5
DE LA 1 LA 4
1<2
2=2-3
3 = 4- 5
4>5
Cercetare de birou
(Rapoarte publicate
pe site-ul Biblioteca
de Evaluare)
DE LA 1 LA 4
1<2
2=2-3
3 = 4- 5
4>5
Cercetare de birou
(Rapoarte publicate
pe site-ul Biblioteca
de Evaluare)
Cercetare de birou
(Planuri de
evaluare, Biblioteca
de Evaluare)
DE LA 1 LA 4
1<2
2=2-3
3 = 4- 5
4>5
112
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUB CRITERIU
INDICATOR
15. ntrzierea
medie a evalurilor
n raport cu Planul
Anual (la nivel de
PO)
INTREBARE
METODOLOGIE DE PUNCTARE
DE LA 1 LA 4
1<2
2=2-3
3 = 4- 5
4>5
Cercetare de birou
(Rapoarte publicate
pe site-ul Biblioteca
de Evaluare)
DE LA 1 LA 4
1<2
2=2-3
3 = 4- 5
4>5
Cercetare de birou
(Rapoarte publicate
pe site-ul Biblioteca
de Evaluare)
DE LA 1 LA 5
5= Nu au fost nregistrate ntrzieri
4= 3 luni
3= 6 luni
2= 9 luni
1= Peste 12 luni
Cercetare de birou
(Planuri de
evaluare, Biblioteca
de Evaluare)
SURSA
eSurvey
DE LA 1 LA 5
5= Nu au fost nregistrate ntrzieri
4= 3 luni
3= 6 luni
2= 9 luni
1= Peste 12 luni
Cercetare de birou
(Planuri de
evaluare, Biblioteca
de Evaluare)
113
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUB CRITERIU
INDICATOR
INTREBARE
METODOLOGIE DE PUNCTARE
a. Planurile Anuale i
Multianuale de Evaluare sunt
revizuite pe parcursul ciclului
de implementare a
programului, dac este
necesar?
SURSA
eSurvey
Cercetare de birou
DE LA 1 LA 2
1 = Nu
2 = Da
eSurvey
b. Dac rspunsul este da /
parial, ce elemente sunt
luate n considerare n
procesul de revizuire?
16. Gradul de
revizuire a
planurilor pe
parcursul ciclului
de implementare a
Programului (la
nivel de CSNR)
a. Planurile Anuale i
Multianuale de Evaluare sunt
revizuite pe parcursul ciclului
de implementare a
programului, dac este
necesar?
Cercetare de birou
DE LA 1 LA 2
1 = Nu
2 = Da
eSurvey
114
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUB CRITERIU
INDICATOR
INTREBARE
METODOLOGIE DE PUNCTARE
SURSA
17. Comitetele de
Coordonare a
Evalurii sunt
create i le sunt
atribuite roluri i
responsabiliti
clare la (nivel de
PO)
Exist Comitete de
Coordonare a Evalurii cu
roluri i responsabiliti
clare?
DE LA 1 LA 3
1 = Nu, nu exist
2 = Nu, exist dar rolurile i responsabilitile nu au fost atribuite
n mod clar
3 = Da, exist iar rolurile i responsabilitile au fost atribuite n
mod clar
Cercetare de birou
(ROF, Proceduri de
evaluare)
17. Comitetele de
Coordonare a
Evalurii sunt
create i le sunt
atribuite roluri i
responsabiliti
clare la (nivel de
CSNR)
Exist Comitete de
Coordonare a Evalurii cu
roluri i responsabiliti
clare?
DE LA 1 LA 3
1 = Nu, nu exist
2 = Nu, exist dar rolurile i responsabilitile nu au fost atribuite
n mod clar
3 = Da, exist iar rolurile i responsabilitile au fost atribuite n
mod clar
Cercetare de birou
(ROF, Proceduri de
evaluare)
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
eSurvey
DE LA 1 LA 3
1= Nu
2= Nu, dar aceast abordare a fost luat n considerare i va fi
implementat n viitor
3 = Da
9. Eficacitatea
Comitetelor de
Coordonare a
Evalurii
18. Eficacitatea
Comitetelor de
Coordonare a
Evalurii (la nivel
de PO)
18. Eficacitatea
Comitetelor de
Coordonare a
Evalurii (la nivel
de CSNR)
eSurvey
eSurvey
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
115
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUB CRITERIU
INDICATOR
INTREBARE
b. Sunt invitai i ali experi
tematici s fac parte din
Comitetul de Coordonare a
Evalurii n funcie de
subiectul evalurii? (la nivel
de CSNR)
10.Implicarea
Unitilor de
Evaluare n
procesul
decizional
11. Calitatea
Termenilor de
Referin
20. Calitatea
Termenilor de
Referin
METODOLOGIE DE PUNCTARE
SURSA
eSurvey
DE LA 1 LA 3
1= Nu
2= Nu, dar aceast abordare a fost luat n considerare i va fi
implementat n viitor
3 = Da
eSurvey
DE LA 1 LA 3
1 = Nu
2 = Consultrile au loc, dar nu n cadrul unui proces formalizat
3 = Da
eSurvey
DE LA 1 LA 3
1 = Nu
2 = Consultrile au loc, dar nu n cadrul unui proces formalizat
3 = Da
1. Claritii
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
eSurvey
116
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUB CRITERIU
12. Existena
unui proces de
nvare
INDICATOR
INTREBARE
METODOLOGIE DE PUNCTARE
SURSA
2. Standardizrii (elaborai
pe baza unui
standard/model)
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
21. Actualizarea
periodic a
procedurilor
interne referitoare
la evaluare
(concepere /
implementare /
utilizare) ca
rezultat al
experienei
acumulate (la nivel
de PO)
DE LA 1 LA 3
1 = Nu, procedurile nu au fost actualizate
2 = Da, procedurile au fost actualizate, dar fr mbuntiri
semnificative
3 = Da, procedurile sunt actualizate periodic, n urma experienei
dobndite, ceea ce duce la mbuntiri substaniale
eSurvey +
Cercetare de birou
21. Actualizarea
periodic a
procedurilor
interne referitoare
la evaluare
(concepere /
implementare /
utilizare) ca
rezultat al
experienei
acumulate (la nivel
de CSNR)
DE LA 1 LA 3
1 = Nu, procedurile nu au fost actualizate
2 = Da, procedurile au fost actualizate, dar fr mbuntiri
semnificative
3 = Da, procedurile sunt actualizate periodic, n urma experienei
dobndite, ceea ce duce la mbuntiri substaniale
eSurvey +
Cercetare de birou
22.
Disponibilitatea
indicatorilor cheie
socioeconomici
(PIB, rata
omajului,
ocuparea forei de
DE LA 1 LA 3
1 = Nu
2 = Da, dar parial
3 = Da
Cercetare de birou
(Eurostat, INSSE,
Raport ECO)
+ Analiz
comparativ
internaional
(5) Disponibilitatea i
calitatea datelor
socioeconomice
13. Calitatea
datelor
socioeconomice
117
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUB CRITERIU
INDICATOR
munc, investiii n
cercetare i
dezvoltare) la nivel
naional i regional
(NUTS II)
14.
Disponibilitatea
altor date
23.
Disponibilitatea
altor date pentru
evaluare
INTREBARE
METODOLOGIE DE PUNCTARE
SURSA
b. Specificai principalele
lipsuri / decalaje. (pn la 3)
c. Exist alte surse pentru
principalele date privind
indicatorii socioeconomici la
nivel naional i regional
(NUTS II), n afara
statisticilor oficiale pe care le
luai n considerare (e.x.
rapoarte ntocmite de
Camerele de Comer,
asociaii patronale)?
DE LA 1 LA 2
1 = Nu
2 = Da
eSurvey
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
eSurvey
DE LA 1 LA 3
1 = Nu
2 = Da, dar parial
3 = Da
eSurvey
+
Cercetare de birou
(Analiza seciunii cu
limitri din cadrul
rapoartelor de
evaluare publicate
pe site-ul Biblioteca
de Evaluare)
Micro-datele de la nivel de
beneficiar sunt disponibile n
timp util? (e.x. date
economico-financiare pentru
ntreprinderi private, statut
profesional / dezavantaj
profesional pentru
persoanele fizice).
118
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUB CRITERIU
(6) Disponibilitatea i
calitatea expertizei de
evaluare
INDICATOR
24. Numrul
firmelor
internaionale
active pe pia
24. Numrul
firmelor locale
active pe pia
15. Gradul de
competitivitate a
Pieei de Evaluare
26. Numrul
universitilor
implicate n
procesul de
evaluare
27.
Competitivitatea
pieei de evaluare
INTREBARE
METODOLOGIE DE PUNCTARE
SURSA
DE LA 1 LA 5
1=0
2 = 1-3
3 = 4-6
4 = 7-10
5 = peste 10
Cercetare de birou
(SEAP - Atribuirea
licitaiei)
DE LA 1 LA 5
1=0
2 = 1-3
3 = 4-6
4 = 7-10
5 = peste 10
Cercetare de birou
(SEAP - Atribuirea
licitaiei)
DE LA 1 LA 5
1=0
2 = 1-3
3 = 4-6
4 = 7-10
5 = peste 10
Cercetare de birou
(SEAP - Atribuirea
licitaiei)
DE LA 1 LA 3
1= Nu, serviciile de evaluare sunt atribuite de cele mai multe ori
unui numr restrns de actori (sub 5)
2 = Parial, serviciile de evaluare sunt deseori atribuite unui
numr limitat de actori (5 - 10)
3 = Da, serviciile de evaluare sunt atribuite unui numr relevant de
actori diferii (peste 10)
eSurvey / Focus
Grup cu ADER
119
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUB CRITERIU
16.Disponibilitate
a unor expertize
tematice i
metodologice
INDICATOR
28. Calitatea
expertizei
INTREBARE
METODOLOGIE DE PUNCTARE
SURSA
DE LA 1 LA 4
1 = Nu
2 = Parial, dar ntr-o msur nesatisfctoare
3 = Parial, dar ntr-o msur satisfctoare
4 = Da
eSurvey / Focus
Grup cu ADER
DE LA 1 LA 2
1 = nu
2 = da
eSurvey +
Cercetare de birou
(grile de evaluare a
calitii utilizate la
nivel de PO)
b. Enumerai principalele
tipuri de expertiz care
lipsesc (pn la 3).
a. Utilizai liste de verificare
pentru a evalua calitatea
rapoartelor de evaluare?
b. Cum apreciai calitatea
rapoartelor de evaluare, n
ceea ce privete:
29. Calitatea
rapoartelor de
evaluare
17. Asigurarea
calitii
evalurilor
1. Relevana
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
2. Precizia i claritatea
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
3. Utilitatea
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
eSurvey
NA (Existena unor
standarde de calitate
aprobate)
DE LA 1 LA 2
1 = nu
2 = da
Cercetare de birou
(Standarde de
evaluare i
documente
elaborate de GLE)
120
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUB CRITERIU
INDICATOR
INTREBARE
METODOLOGIE DE PUNCTARE
SURSA
NA (Coerena standardelor
de calitate cu standardele
Comisiei Europene)
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
Cercetare de birou
(Standarde de
evaluare i
documente
elaborate de GLE)
18. Dezvoltarea
competenelor de
evaluare
NA
DE LA 1 LA 3
1 = Nu
2 = Exist programe de formare, dar acestea nu conduc spre o
calificare acreditat / recunoscut
3 = Exist programe de formare, iar acestea conduc spre o
calificare acreditat / recunoscut
Cercetare de birou /
Focus Grup cu
ADER
19. Independena
evaluatorilor
32. Gradul de
independen a
evaluatorilor
(oferta)
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
eSurvey / Focus
Grup cu ADER
DE LA 1 LA 4
1 < 30 din analiza comparativ internaional
2 = ntre 31% i 60% din analiza comparativ internaional
3 = ntre 61% i 100% din analiza comparativ internaional
4 > 100% din analiza comparativ internaional
Cercetare de birou
(site-ul
www.evaluarestructurale.ro i
Biblioteca de
Evaluare)
+ Analiz
comparativ
internaional
(7) Diseminarea
rezultatelor imediate
ale evalurii
20. Diseminarea
rezultatelor
imediate ale
evalurii
33. Numrul
rapoartelor de
evaluare
disponibile integral
publicului larg (din
totalul disponibil) la nivel de PO
121
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUB CRITERIU
INDICATOR
INTREBARE
METODOLOGIE DE PUNCTARE
SURSA
DE LA 1 LA 4
1 < 25%
2 = 25 - 50%
3 = 51 - 75%
4 = 76% - 100%
Cercetare de birou
(Rapoarte publicate
pe site-ul Biblioteca
de Evaluare)
DE LA 1 LA 4
1 < 30 din analiza comparativ internaional
2 = ntre 31% i 60% din analiza comparativ internaional
3 = ntre 61% i 100% din analiza comparativ internaional
4 > 100% din analiza comparativ internaional
Cercetare de birou
(Rapoarte publicate
pe site-ul Biblioteca
de Evaluare) +
Analiz
comparativ
internaional
DE LA 1 LA 4
1 < 25%
2 = 25 - 50%
3 = 51 - 75%
4 = 76% - 100%
Cercetare de birou
(Rapoarte publicate
pe site-ul Biblioteca
de Evaluare)
34. Numrul
evenimentelor
publice /
dezbaterilor
organizate pentru
discutarea
rezultatelor
Evalurii la nivel de
PO
Cte evenimente
publice/dezbateri au fost
organizate pentru discutarea
rezultatelor Evalurii (n
ultimele 12 luni) la nivel de
PO?
DE LA 1 LA 4
1=0
2=1
3=2
4 = peste 2
eSurvey +
Cercetare de birou
34. Numrul
evenimentelor
publice /
dezbaterilor
organizate pentru
discutarea
rezultatelor
Evalurii la nivel de
CSNR
Cte evenimente
publice/dezbateri au fost
organizate pentru discutarea
rezultatelor Evalurii (n
ultimele 12 luni) la nivel de
CSNR?
DE LA 1 LA 4
1=0
2=1
3=2
4 = peste 2
eSurvey +
Cercetare de birou
33. Numrul
rapoartelor de
evaluare
disponibile integral
publicului larg (din
totalul disponibil) la nivel de CSNR
122
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
(8) Utilizarea
rezultatelor imediate
ale Evalurii
SUB CRITERIU
21. Existena
unor proceduri
pentru utilizarea
rezultatelor
evalurii i
monitorizarea
ulterioar
INDICATOR
INTREBARE
METODOLOGIE DE PUNCTARE
SURSA
DE LA 1 LA 2
1 = Nu
2 = Da
Cercetare de birou
(Procedura de
evaluare)
Focus Grup cu GLE
DE LA 1 LA 2
1 = Nu
2 = Da
Cercetare de birou
(Procedura de
evaluare)
Focus Grup cu GLE
a. Responsabilitile de
monitorizare a rezultatelor
evalurii realizate sunt
atribuite unui Comitet de
Coordonare / Monitorizare /
Autoritate de Management la
nivel de PO?
DE LA 1 LA 2
1 = Nu
2 = Da
Cercetare de birou
(Procedura de
evaluare)
Focus Grup cu GLE
123
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUB CRITERIU
INDICATOR
INTREBARE
METODOLOGIE DE PUNCTARE
SURSA
de PO)
22. Impactul
evalurilor asupra
proceselor de
programare/
implementare
37. Impactul
evalurilor asupra
proceselor de
programare (la
nivel de PO)
DE LA 1 LA 2
1 = Nu
2 = Da
eSurvey
Focus Grup cu GLE
Responsabilitile de
monitorizare a rezultatelor
evalurii realizate sunt
atribuite unui Comitet de
Coordonare / Monitorizare /
Autoritate de Management la
nivel de CSNR?
DE LA 1 LA 2
1 = Nu
2 = Da
Cercetare de birou
(Procedura de
evaluare)
Focus Grup cu GLE
DE LA 1 LA 5
1 = 0%
2 = pn la 30%
3 = 31 - 50%
4 = 51 - 75%
5 = 76 - 100%
Cercetare de birou
(Tabel de
monitorizare a
recomandrilor)
Focus Grup cu GLE
b. n cadrul procesului de
pregtire a Programelor
Operaionale 2014 2020,
au fost luate n calcul
recomandrile evalurilor?
DE LA 1 LA 2
1 = Nu
2 = Da
eSurvey
Focus Grup cu GLE
124
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUB CRITERIU
INDICATOR
INTREBARE
METODOLOGIE DE PUNCTARE
SURSA
37. Impactul
evalurilor asupra
proceselor de
programare (la
nivel de CSNR)
DE LA 1 LA 5
1 = 0%
2 = pn la 30%
3 = 31 - 50%
4 = 51 - 75%
5 = 76 - 100%
Cercetare de birou
(Tabel de
monitorizare a
recomandrilor)
Focus Grup cu GLE
38. Impactul
evalurilor asupra
proceselor de
implementare (la
nivel de PO)
DE LA 1 LA 5
1 = 0%
2 = pn la 30%
3 = 31 - 50%
4 = 51 - 75%
5 = 76 - 100%
eSurvey
38. Impactul
evalurilor asupra
proceselor de
implementare (la
nivel de CSNR)
DE LA 1 LA 5
1 = 0%
2 = pn la 30%
3 = 31 - 50%
4 = 51 - 75%
5 = 76 - 100%
eSurvey
CULTURA DE EVALUARE: INSTITUIONALIZAREA EVALURII/CULTURII DE EVALUARE - N CE MSUR ESTE EVALUAREA INTEGRAT N GUVERNANA SIS I ARE IMPACT
ULTERIOR?
Contextul aferent
125
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUB CRITERIU
23. Valori
INDICATOR
INTREBARE
METODOLOGIE DE PUNCTARE
SURSA
Specificai n ce msur
factorii care formuleaz
politici publice consider
evaluarea ca parte esenial
n definirea politicilor i
asigurarea implementrii cu
succes a acestora.
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
eSurvey
Specificai n ce msur
personalul de conducere a
instituiei consider
evaluarea ca parte esenial
n definirea politicilor i
asigurarea implementrii cu
succes a acestora.
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
eSurvey
126
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUB CRITERIU
INDICATOR
INTREBARE
METODOLOGIE DE PUNCTARE
SURSA
NA
DE LA 1 LA 3
1 = Doar legislaie CE privind Instrumentele Structurale
2 = Legislaie CE i un cadru legal naional privind Instrumentele
Structurale
3 = Att legislaie CE (privind IS), ct i legislaie naional (alta
dect cea privind IS)
Cercetare de birou
(H.G. Nr.
457/2008,
Regulamentele UE)
NA
Focus Grup cu
GLECercetare de
birou
43. Procentajul de
funcionari publici,
la toate nivelele,
cu pregtire n
domeniul tiinelor
sociale (fa de
pregtirea strict
juridic)
a. Indicai procentajul de
funcionari publici, din cadrul
structurii organizaionale
care include i biroul pentru
care lucrai dumneavoastr
n mod direct (cu excepia
celor care lucreaz n cadrul
Unitii de Evaluare), cu
pregtire n domeniul
tiinelor sociale (de ex.
economie, sociologie, tiine
politice).
DE LA 1 LA 4
1 < 25%
2 = 25 - 50%
3 = 51 - 75 %
4 > 75%
eSurvey
44.Procentajul
funcionarilor
publici, la toate
nivelurile, care
particip n mod
activ la activitile
de evaluare
a. Specificai nivelul de
participare a funcionarilor
publici, din cadrul structurii
organizaionale care include
i biroul pentru care lucrai
dumneavoastr n mod
direct, la activitile de
evaluare.
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
eSurvey
41. Existena
prevederilor legale
ce reglementeaz
evaluarea
24. Prevederi
legale
(11) Politic
evaluativ privind
resursele umane care
vizeaz asigurarea
resurselor umane
adecvate la toate
nivelele pentru
realizarea evalurilor
25. Politica de
resurse umane
127
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUB CRITERIU
INDICATOR
INTREBARE
METODOLOGIE DE PUNCTARE
SURSA
b. Specificai nivelul de
participare a funcionarilor
publici, din cadrul structurii
organizaionale care include
i biroul pentru care lucrai
dumneavoastr n mod
direct, la evenimentele
publice legate de evaluare
(e.x. prezentarea
rezultatelor evalurii,
evenimente organizate de
societile de evaluare).
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
eSurvey
45. Campionul(ii)
este / sunt
prezeni la nivel de
PO
DE LA 1 LA 2
1 = Nu
2 = Da
eSurvey
45. Campionul(ii)
este / sunt
prezeni la nivel de
CSNR
DE LA 1 LA 2
1 = Nu
2 = Da
eSurvey
46. Existena pe
pia a opiunilor
de instruire /
formare n
domeniul evalurii
DE LA 1 LA 4
1 = Nu
2 = Da, exist opiuni, dar nu sunt viabile
3 = Da, exist opiuni viabile, dar nu acoper toate nevoile de
dezvoltare
4 = Da
eSurvey +
Cercetare de birou
128
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUB CRITERIU
INDICATOR
INTREBARE
b. Exist nevoi specifice de
instruire care nu sunt
acoperite de pia?
METODOLOGIE DE PUNCTARE
SURSA
DE LA 1 LA 2
1 = Nu
2 = Da
eSurvey
Cercetare de birou
(SEAP) + Analiz
comparativ
internaional
26. Cerere de
evaluare
ncorporat n SIS
DE LA 1 LA 4
1 < 30 din analiza comparativ internaional
2 = ntre 31% i 60% din analiza comparativ internaional
3 = ntre 61% i 100% din analiza comparativ internaional
4 > 100% din analiza comparativ internaional
48. Procentajul
evalurilor
realizate ca
rspuns la nevoia
de cunoatere - i
nu ca obligaie (la
nivel de PO)
DE LA 1 LA 5
1 = 0%
2 = pn 30%
3= 31-50%
4= 51 -75%
5= 76 - 100%
48. Procentajul
evalurilor
realizate ca
rspuns la nevoia
de cunoatere - i
nu ca obligaie (la
nivel de CSNR)
DE LA 1 LA 5
1 = 0%
2 = pn 30%
3= 31-50%
4= 51 -75%
5= 76 - 100%
eSurvey
Cercetare de birou
eSurvey
Cercetare de birou
129
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUB CRITERIU
INDICATOR
(13) Reele
28. Diminuarea
decalajului dintre
mediul academic
i cel
guvernamental
INTREBARE
METODOLOGIE DE PUNCTARE
SURSA
a. n ce msur actorii
relevani pentru piaa de
evaluare sunt reprezentai
n cadrul organizaiei
naionale a evaluatorilor
profesioniti (sunt
reprezentai toi actorii
relevani pentru piaa de
evaluare)?
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
eSurvey
DE LA 1 LA 4
1 = 0-1
2 = 2-5
3 = 6-10
4 = peste 10
Cercetare de birou
(site-ul ADER) +
Analiz
comparativ
internaional
c. n ce msur organizaia
naional a evaluatorilor
profesioniti a contribuit la
crearea unei reele de
experi?
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
eSurvey
d. n ce msur organizaia
naional a evaluatorilor
profesioniti a contribuit la
diseminarea i schimbul de
bune practici?
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
eSurvey
a. Exist mecanisme de
cooperare ntre mediul
academic i cel
guvernamental care s duc
la o mai bun formulare a
politicilor publice?
DE LA 1 LA 2
1 = Nu
2 = Da
eSurvey +
Cercetare de birou
(site-ul ADER) +
Focus Grup ADER
130
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUB CRITERIU
INDICATOR
mai bun
formulare a
politicilor publice
(15) Guvernan
INTREBARE
SURSA
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
eSurvey
a. Specificai nivelul de
participare al societii civile
la activitile de evaluare.
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
eSurvey
eSurvey
DE LA 1 LA 5
1 = 0-25
2 = 25-50
3 = 51-75
4 = 76-90
5 = 91-100
Cercetare de birou
29. Participarea
societii civile
51. Societatea
civil particip n
mod activ la
activitile legate
de evaluare
30. Participarea
mass-media
52. Gradul de
participare a massmedia la
evenimentele
publice aferente
evalurii i
diseminrii
53. Indexul de
guvernan
NA
31. Indexul de
guvernan
(compus din 6
dimensiuni Indicele 59
Guvernan)
METODOLOGIE DE PUNCTARE
131
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUB CRITERIU
INDICATOR
INTREBARE
NA
Clasarea procentual privind
stabilitatea politic la nivel
de stat
(0-100)
NA
Clasarea procentual pentru
eficacitatea guvernului la
nivel de stat
(0-100)
NA
Clasarea procentual privind
calitatea reglementrilor la
nivel de stat
(0-100)
NA
Clasarea procentual privind
statul de drept la nivel de
stat
(0-100)
METODOLOGIE DE PUNCTARE
SURSA
DE LA 1 LA 5
1 = 0-25
2 = 26-50
3 = 51-75
4 = 76-90
5 = 91-100
Cercetare de birou
DE LA 1 LA 5
1 = 0-25
2 = 26-50
3 = 51-75
4 = 76-90
5 = 91-100
Cercetare de birou
DE LA 1 LA 5
1 = 0-25
2 = 26-50
3 = 51-75
4 = 76-90
5 = 91-100
Cercetare de birou
DE LA 1 LA 5
1 = 0-25
2 = 26-50
3 = 51-75
4 = 76-90
5 = 91-100
Cercetare de birou
132
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUB CRITERIU
INDICATOR
INTREBARE
METODOLOGIE DE PUNCTARE
SURSA
DE LA 1 LA 5
1 = 0-25
2 = 26-50
3 = 51-75
4 = 76-90
5 = 91-100
Cercetare de birou
- Organisme Intermediare
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
eSurvey
- Autoritatea de Audit
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
eSurvey
- Autoritatea de Certificare i
Pli
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
eSurvey
NA
Clasarea procentual privind
combaterea corupiei (0100)
32. Efecte n
afara SIS
54. Internalizarea
evalurii de ctre
instituiile
implicate n SIS,
altele dect AM i
MFE (OI-uri,
Beneficiari,
Autoritatea de
Audit, Autoritatea
de Certificare i
Plat)
133
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUB CRITERIU
INDICATOR
55. Integrarea, n
toate ariile politice,
a evalurii n
strategiile i
practicile de
management
56. Integrarea, la
toatele nivelele
administrative i
guvernamentale, a
evalurii n
strategii i practici
de management
INTREBARE
METODOLOGIE DE PUNCTARE
SURSA
- Beneficiari
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
eSurvey
a. n ce msur evaluarea
are un impact asupra
procesului de elaborare a
politicilor publice pe termen
lung?
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
eSurvey
eSurvey
eSurvey
a. n ce msur evaluarea
are impact asupra procesului
administrativ i operaional
pe termen lung?
DE LA 1 LA 5
de la 1 (cea mai mic valoare) pn la 5 (cea mai mare valoare)
eSurvey
134
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
SUBCRITERIU
INDICATOR
NTREBAREA
SURSA
METODOLOGIA DE
PUNCTARE
1. Alocarea Responsabilitilor de
Evaluare
% de Programare care
nfiineaz o unitate de
evaluare pe baza ghidurilor
elaborate prin DMI 1.2.
De la 0% la 100%
0% sau 100%
De la 0% la 100%
135
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUBCRITERIU
INDICATOR
NTREBAREA
SURSA
METODOLOGIA DE
PUNCTARE
De la 0% la 100%
De la 0% la 100%
4. Eficacitatea coordonrii
ntre Unitile de Evaluare
ale diferitelor programe
0% sau 100%
136
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUBCRITERIU
INDICATOR
5. Eficacitatea cooperrii
dintre Unitile de Evaluare
i cele de Programare (la
nivel de PO)
NTREBAREA
SURSA
METODOLOGIA DE
PUNCTARE
Cercetare de birou
% de abordri discutate de
ctre GLE, ca rezultat la
proiectelor finanate prin DMI
1.2, adoptate la nivel de PO.
De la 0% la 100%
De la 0% la 100%
De la 0% la 100%
Interviu cu UCE
137
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUBCRITERIU
INDICATOR
NTREBAREA
SURSA
METODOLOGIA DE
PUNCTARE
% de evaluri stabilite de
unitile de programare,
finanate prin DMI 1.2 a PO
AT.
De la 0% la 100%
0% sau 100%
% de evaluri iniiate de
unitile de programare,
finanate prin DMI 1.2 al PO
AT.
De la 0% la 100%
5. Eficacitatea cooperrii
dintre Unitile de Evaluare
i cele de Programare (la
nivel de CSNR)
138
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUBCRITERIU
INDICATOR
6. Eficacitatea cooperrii
dintre Unitile de Evaluare
i cele de Monitorizare (la
nivel de PO)
NTREBAREA
SURSA
METODOLOGIA DE
PUNCTARE
0% sau 100%
% de evaluri iniiate de
unitile de evaluare, finanate
prin DMI 1.2 al PO AT.
0% sau 100%
% de recomandri de evaluare
(furnizate prin DMI 1.2) legate
de identificarea datelor de
monitorizare necesare pentru
evalurile implementate.
De la 0% la 100%
139
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUBCRITERIU
INDICATOR
6. Eficacitatea cooperrii
dintre Unitile de Evaluare
i cele de Monitorizare (la
nivel de CSNR)
NTREBAREA
SURSA
METODOLOGIA DE
PUNCTARE
n/a
n/a
n/a
n/a
n/a
n/a
0% sau 100%
0% sau 100%
140
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUBCRITERIU
INDICATOR
NTREBAREA
SURSA
METODOLOGIA DE
PUNCTARE
% de evaluri iniiate de
unitatea de monitorizare care
sunt finanate prin DMI 1.2 al
PO AT.
De la 0% la 100%
% de recomandri de evaluare
implementate care au fost
furnizate prin DMI 1.2 n
legtur cu calitatea datelor
de monitorizare pentru
sprijinirea evalurii
De la 0% la 100%
n/a
n/a
n/a
n/a
n/a
n/a
141
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUBCRITERIU
INDICATOR
NTREBAREA
SURSA
METODOLOGIA DE
PUNCTARE
7. Cuantumul aferent
bugetului pentru evaluare
(%) (la nivel de PO)
Cercetare de birou
De la 0% la 100%
7. Cuantumul aferent
bugetului pentru evaluare
(%) (la nivel de CSNR)
Cercetare de birou
De la 0% la 100%
% de angajai ai Unitii de
Evaluare, pltii prin DMI 1.2
(momentan, salariile nu pot fi
pltite prin DMI 1.2)
Cercetare de birou
De la 0% la 100%
% de angajai ai Unitii de
Evaluare, angajai prin DMI
1.2, care prsesc instituia n
fiecare an.
Cercetare de birou
De la 0% la 100%
De la 0% la 100%
8. Caracterul adecvat al
resurselor umane din cadrul
Unitilor de Evaluare (la
nivel de PO)
142
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUBCRITERIU
INDICATOR
8. Caracterul adecvat al
resurselor umane din cadrul
Unitilor de Evaluare (la
nivel de CSNR)
NTREBAREA
SURSA
METODOLOGIA DE
PUNCTARE
% de angajai ai Unitii de
Evaluare, pltii prin DMI 1.2
(momentan, salariile nu pot fi
pltite prin DMI 1.2)
Cercetare de birou
De la 0% la 100%
% de angajai ai Unitii de
Evaluare, angajai prin DMI
1.2, care prsesc instituia n
fiecare an.
Cercetare de birou
De la 0% la 100%
0% sau 100%
0% sau 100%
0% sau 100%
143
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUBCRITERIU
INDICATOR
NTREBAREA
SURSA
METODOLOGIA DE
PUNCTARE
0% sau 100%
De la 0% la 100%
6. Calitatea sistemului de
indicatori
% de Programe care au
proiectat / revizuit sistemul de
indicatori n conformitate cu
recomandrile elaborate prin
DMI 1.2.
144
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUBCRITERIU
INDICATOR
NTREBAREA
SURSA
METODOLOGIA DE
PUNCTARE
% de Programe care
furnizeaz informaii din
sistemul de monitorizare, n
perioada de timp recomandat
de ghidurile elaborate prin DMI
1.2.
De la 0% la 100%
n/a
n/a
n/a
145
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUBCRITERIU
INDICATOR
NTREBAREA
SURSA
METODOLOGIA DE
PUNCTARE
0% sau 100%
0% sau 100%
n/a
n/a
n/a
146
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUBCRITERIU
INDICATOR
NTREBAREA
SURSA
METODOLOGIA DE
PUNCTARE
% de Programe care au
modificat indicatorii individuali
n conformitate cu
recomandrile elaborate prin
DMI 1.2.
De la 0% la 100%
n/a
n/a
n/a
0% sau 100%
147
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUBCRITERIU
INDICATOR
METODOLOGIA DE
PUNCTARE
NTREBAREA
SURSA
% de Planuri Multianuale de
Evaluare, structurate pe baza
ghidurilor elaborate prin DMI
1.2.
De la 0% la 100%
Cercetare de birou
De la 0% la 100%
8. Eficacitatea Planului de
Evaluare
14. Gradul de realizare a
Planurilor Multianuale de
Evaluare (la nivel de PO)
148
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUBCRITERIU
INDICATOR
NTREBAREA
SURSA
METODOLOGIA DE
PUNCTARE
Cercetare de birou
De la 0% la 100%
De la 0% la 100%
De la 0% la 100%
Cercetare de birou
De la 0% la 100%
% de evaluri neplanificate la
nivel de CSNR, finanate prin
DMI 1.2, care au fost realizate
Cercetare de birou
De la 0% la 100%
De la 0% la 100%
149
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUBCRITERIU
INDICATOR
NTREBAREA
SURSA
METODOLOGIA DE
PUNCTARE
De la 0% la 100%
Cercetare de birou
De la 0% la 100%
n/a
n/a
n/a
Cercetare de birou
De la 0% la 100%
n/a
n/a
n/a
150
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUBCRITERIU
INDICATOR
16. Gradul de revizuire a
planurilor pe parcursul
ciclului de implementare a
Programului (la nivel de PO)
9. Eficacitatea Comitetelor de
Coordonare a Evalurii
17. Comitetele de
Coordonare a Evalurii sunt
create i le sunt atribuite
roluri i responsabiliti clare
la (nivel de PO)
NTREBAREA
SURSA
METODOLOGIA DE
PUNCTARE
Cercetare de birou
Focus Grup cu GLE
De la 0% la 100%
n/a
n/a
n/a
Cercetare de birou
Focus Grup cu GLE
0% sau 100%
n/a
n/a
n/a
De la 0% la 100%
151
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUBCRITERIU
INDICATOR
17. Comitetele de
Coordonare a Evalurii sunt
create i le sunt atribuite
roluri i responsabiliti clare
la (nivel de CSNR)
NTREBAREA
SURSA
METODOLOGIA DE
PUNCTARE
0% sau 100%
De la 0% la 100%
De la 0% la 100%
De la 0% la 100%
De la 0% la 100%
152
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUBCRITERIU
SURSA
METODOLOGIA DE
PUNCTARE
INDICATOR
NTREBAREA
% de Programe care au
procese formalizate pentru
implicarea Unitii de Evaluare
n procesul decizional,
conform ghidurilor elaborate
prin DMI 1.2.
De la 0% la 100%
0% sau 100%
n/a
n/a
n/a
% de Programe care au
realizat Termenii de Referin
conform ghidurilor elaborate
prin DMI 1.2.
De la 0% la 100%
10.Implicarea Unitilor de
Evaluare n procesul decizional
153
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUBCRITERIU
INDICATOR
NTREBAREA
SURSA
METODOLOGIA DE
PUNCTARE
% de Programe care au
revizuit proceduri interne
legate de evaluare, n
conformitate cu
recomandrile elaborate prin
DMI 1.2.
De la 0% la 100%
0% sau 100%
Cercetare de birou
0% sau 100%
n/a
n/a
n/a
22. Disponibilitatea
indicatorilor cheie
socioeconomici (PIB, rata
omajului, ocuparea forei
de munc, investiii n
cercetare i dezvoltare) la
nivel naional i regional
(NUTS II)
154
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUBCRITERIU
INDICATOR
NTREBAREA
SURSA
METODOLOGIA DE
PUNCTARE
Cercetare de birou
0% sau 100%
n/a
n/a
n/a
Cercetare de birou
0% sau 100%
n/a
n/a
n/a
De la 0% la 100%
155
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUBCRITERIU
INDICATOR
NTREBAREA
SURSA
METODOLOGIA DE
PUNCTARE
De la 0% la 100%
% de universiti care au
participat la procesul de
achiziie public, finanat prin
DMI 1.2.
De la 0% la 100%
Numrul companiilor de
evaluare contractate prin DMI
1.2.
De la 0% la 100%
Cercetare de birou
0% sau 100%
156
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUBCRITERIU
INDICATOR
NTREBAREA
SURSA
METODOLOGIA DE
PUNCTARE
n/a
n/a
n/a
0% sau 100%
n/a
n/a
n/a
n ce msur listele de
verificare elaborate prin DMI
sunt luate n considerare de
ctre evaluatori i contribuie
la relevana, claritatea i
utilitatea rapoartelor?
De la 0% la 100%
n/a
n/a
n/a
0% sau 100%
157
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUBCRITERIU
INDICATOR
NTREBAREA
SURSA
METODOLOGIA DE
PUNCTARE
% de cursuri de instruire
finanate prin DMI 1.2.
De la 0% la 100%
0% sau 100%
% de rapoarte aprobate,
finanate prin DMI 1.2.
www.evaluare-structurale.ro/
De la 0% la 100%
% de rapoarte de evaluare
finanate prin DMI 1.2, care
sunt disponibile publicului larg
De la 0% la 100%
158
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUBCRITERIU
INDICATOR
NTREBAREA
METODOLOGIA DE
PUNCTARE
% de rapoarte aprobate
finanate prin DMI 1.2.
www.evaluare-structurale.ro/
De la 0% la 100%
% de rapoarte de evaluare
finanate prin DMI 1.2, care
sunt disponibile publicului larg
De la 0% la 100%
% de evenimente publice
organizate prin DMI 1.2.
% de evenimente publice /
dezbateri organizate prin DMI
1.2. o
SURSA
De la 0% la 100%
De la 0% la 100%
De la 0% la 100%
159
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUBCRITERIU
NTREBAREA
0% sau 100%
0% sau 100%
De la 0% la 100%
SURSA
METODOLOGIA DE
PUNCTARE
INDICATOR
160
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUBCRITERIU
INDICATOR
36. Existena unui Comitet
de Coordonare /
Monitorizare / Autoritate de
Management responsabil cu
monitorizarea rezultatelor
evalurii (la nivel de CSNR)
NTREBAREA
SURSA
METODOLOGIA DE
PUNCTARE
0% sau 100%
% recomandri de evaluare
furnizate prin proiectele
finanate prin DMI 1.2, care
abordeaz programarea la
nivel de PO, care au fost
implementate
De la 0% la 100%
% recomandri de evaluare
furnizate prin proiectele
finanate prin DMI 1.2, care
abordeaz programarea
pentru perioada 2014-2020,
care au fost implementate
De la 0% la 100%
n/a
n/a
n/a
161
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUBCRITERIU
INDICATOR
37. Impactul evalurilor
asupra proceselor de
programare (la nivel de
CSNR)
NTREBAREA
SURSA
METODOLOGIA DE
PUNCTARE
% recomandri de evaluare
furnizate prin proiectele
finanate prin DMI 1.2, care
abordeaz programarea la
nivel de CSNR, care au fost
implementate
De la 0% la 100%
% recomandri de evaluare
furnizate prin proiectele
finanate prin DMI 1.2, care
abordeaz implementarea la
nivel de PO, care au fost
implementate
De la 0% la 100%
% recomandri de evaluare
furnizate prin proiectele
finanate prin DMI 1.2, care
abordeaz implementarea la
nivel de CSNR, care au fost
implementate
De la 0% la 100%
162
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUBCRITERIU
INDICATOR
23. Valori
NTREBAREA
SURSA
METODOLOGIA DE
PUNCTARE
n/a
n/a
n/a
n/a
n/a
n/a
0% sau 100%
163
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUBCRITERIU
INDICATOR
NTREBAREA
43. Procentajul de
funcionari publici, la toate
nivelele, cu pregtire n
domeniul tiinelor sociale
(fa de pregtirea strict
juridic)
% de funcionari publici
instruii prin aciuni finanate
prin DMI 1.2.
SURSA
eSurvey
METODOLOGIA DE
PUNCTARE
0% sau 100%
De la 0% la 100%
n/a
n/a
n/a
164
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUBCRITERIU
INDICATOR
NTREBAREA
SURSA
METODOLOGIA DE
PUNCTARE
n/a
n/a
n/a
De la 0% la 100%
De la 0% la 100%
% de opiuni de instruire
pentru funcionarii publici
existente pe pia, sprijinite
prin DMI 1.2.
De la 0% la 100%
165
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUBCRITERIU
INDICATOR
NTREBAREA
SURSA
METODOLOGIA DE
PUNCTARE
% de opiuni de instruire
pentru funcionarii publici
existente pe pia, sprijinite
prin DMI 1.2.
De la 0% la 100%
n/a
n/a
n/a
Cercetare de birou
De la 0% la 100%
% de evaluri realizate ca
rspuns la ghidurile /
indicaiile furnizate prin
proiectele DMI 1.2.
De la 0% la 100%
De la 0% la 100%
166
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUBCRITERIU
INDICATOR
NTREBAREA
(13) Reele
SURSA
METODOLOGIA DE
PUNCTARE
0% sau 100%
0% sau 100%
0% sau 100%
0% sau 100%
0% sau 100%
167
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUBCRITERIU
INDICATOR
NTREBAREA
politicilor publice
METODOLOGIA DE
PUNCTARE
0% sau 100%
De la 0% la 100%
n/a
n/a
n/a
% de evenimente publice
organizate prin DMI 1.2 la
care este invitat mass-media.
De la 0% la 100%
n/a
n/a
n/a
(15) Guvernan
SURSA
168
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUBCRITERIU
INDICATOR
NTREBAREA
SURSA
METODOLOGIA DE
PUNCTARE
n/a
n/a
n/a
n/a
n/a
n/a
n/a
n/a
n/a
n/a
n/a
n/a
169
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUBCRITERIU
INDICATOR
NTREBAREA
SURSA
METODOLOGIA DE
PUNCTARE
n/a
n/a
n/a
n/a
n/a
n/a
Existena proiectelor /
componentelor de proiect DMI
1.2 care abordeaz instituii,
altele dect AM i MFE.
Cercetare de birou
Focus Grup cu GLE
0% sau 100%
Existena proiectelor /
componentelor de proiect DMI
1.2 care abordeaz instituii,
altele dect AM i MFE.
Cercetare de birou
Focus Grup cu GLE
0% sau 100%
Existena proiectelor /
componentelor de proiect DMI
1.2 care abordeaz instituii,
altele dect AM i MFE.
Cercetare de birou
Focus Grup cu GLE
0% sau 100%
170
Raport privind msurarea culturii de evaluare n contextul Politicii de Coeziune UE din Romnia
Cel de-al treilea ciclu de msurare
CRITERIU
SUBCRITERIU
INDICATOR
NTREBAREA
SURSA
METODOLOGIA DE
PUNCTARE
Existena proiectelor /
componentelor de proiect DMI
1.2 care abordeaz instituii,
altele dect AM i MFE.
Cercetare de birou
Focus Grup cu GLE
0% sau 100%
Cercetare de birou
Focus Grup cu GLE
0% sau 100%
n/a
n/a
n/a
n/a
n/a
n/a
Cercetare de birou
Focus Grup cu GLE
0% sau 100%
n/a
n/a
n/a
171