Evaluarea programelor si

serviciilor sociale

Gabriel Matauan 2013/2014

 Structura cursului

1. Introducere in managementul proiectelor

2. Ciclul de viata al proiectului
3. Instrumente de management al proiectelor
4. Evluarea programelor si proiectelor sociale

Gabriel Matauan 2013/2014 2

4. Evaluarea programelor si proiectelor sociale

a. Definitii
b. Scurt istoric
c. Evolutia profesiei
d. Misiune, scopuri, obiective, obiecte, criterii
e. Tipuri de evaluare
f. Metode de evaluare
g. Ciclul evaluarii
h. Obstacole in evaluare
i. Tendinte actuale in evaluare

Gabriel Matauan 2013/2014 3

 a. Definitii
• Evaluarea este procesul de determinare a valorii sau
succesului in atingerea unor obiective predeterminate; ea
include urmatorii pasi:
o formularea obiectivelor
o stabilirea criteriilor de masurare a succesului
o determinarea si explicarea gradului de succes
o recomandari pentru activitatea viitoare
(Asociatia Americana de Sanatate Publica)

• Rolul evaluatorului este de a redefini mijloacele care sa fie

utilizate pentru atingerea obiectivelor si chiar de a redefini
anumite obiective,
obiective in conformitate cu rezultatele cercetarii
(Bigman)

Gabriel Matauan 2013/2014 4

 a.Definitii
• Evaluarea reprezinta examinarea si judecarea valorii,
calitatii, cantitatii, semnificatiei, nivelului sau conditiei a
ceva (Soumelis)
• Evaluarea este procesul prin care sunt determinate
eficacitatea si eficienta programului. Ea se refera la
indeplinirea obiectivelor programului
(Epstein&Tripodi)
• Evaluarea programelor sociale este o tehnica manageriala
care furnizeaza feed-back informational administratorilor
programului. Ea reprezinta acumularea sistematica de date
care sa furnizeze informatii despre indeplinirea obiectivelor
(Epstein,Tripodi&Fellin)

Gabriel Matauan 2013/2014 5

 a.Definitii
• Evaluarea programelor reprezinta utilizarea unor metode
stiintifice pentru a masura gradul de implementare si
rezultatele programelor. Ea poate fi privita ca un
instrument managerial, folosit pentru cresterea
performantelor programului, pentru ajustarea bugetului
sau chiar pentru oprirea programului
(Rutman & Mowbray)

Gabriel Matauan 2013/2014 6

 a.Definitii

• Evaluarea programelor este o noua si foarte

interesanta stiinta sociala aplicata.
aplicata Misiunea sa este
de a sprijini imbunatatirea calitatii serviciilor umane.
Ea este o colectie de metode, abilitati, capacitati si
sensibilitati necesare pentru a determina daca un
anumit serviciu social este necesar si daca este
posibil ca el sa fie utilizat, daca se depun suficienta
eforturi pentru a satisface nevoile sociale identificate,
dar nesatisfacute inca, si daca serviciile oferite
satisfac nevoile la un nivel rezonabil al costurilor in
raport cu efectele lor
(Posavac & Carey)

Gabriel Matauan 2013/2014 7

 a.Definitii
• Practica evaluarii este mai mult o arta decat o stiinta,
stiinta deoarece
gama posibilitatilor si constrangerilor este atat de vasta, incat
pentru a face alegerea potrivita evaluatorul are nevoie nu
numai de o judecata foarte clara, ci si de virtuozitate in alegerea
alternativelor posibile. fiecare evaluare se desfasoara in conditii
specifice si de aceea probabilitatea ca o anumita combinatie sa
fie repetabila este foarte redusa. Ca atare, teoriile nu trebuie sa
prezinte un set rigid de reguli pentru o buna practica, ci mai
degraba sa sistematizeze optiunile posibile.
(Cronbach)

Gabriel Matauan 2013/2014 8

 a.Definitii
• “Daca exista concepte mai greu de definit decat evaluare si
politica,
politica eu unul nu le-am intalnit. Nu este posibil sa le
definesti intr-un fel care sa nu reflecte o preferinta
metodologica sau epistemologica specifica.” D.J. Palumbo

Gabriel Matauan 2013/2014 9

 a.Definitii
• “ Evaluarea, mai mult decat orice alta stiinta, este ceea ce
oamenii spun ca este. Si, de obicei, oamenii spun ca ea
este o sumedenie de lucruri diferite.”
(Glass&Ellet)
• Proces rational si sistematic de masurare, descriere/
comparare/ judecare/ valorizare a relevantei/ procesului/
performantei/ impactului unei interventii si de armonizare
a valorilor/ percepriilor/ intereselor stekeholderilor, menit
sa ghideze decizia si actiunea.

Gabriel Matauan 2013/2014 10

 a.Definitii
Criterii In sens restrans In sens larg
In orice etapa
Momentul La sfarsit program
a programului
Performanta si In plus, relevanta
Obiectul si impactul
procesul
Instrumente de masurare In plus, capacitatea de
Metoda precise si utilizate
cu buna credinta
intelegere si adaptare
a evaluatorului la situatie

Masurare, comparare In plus, judecare,

Continutul identificare,descriere valorizare, invatare

Evaluatorul Extern Extern sau intern

Gabriel Matauan 2013/2014 11

 b. Scurt istoric
• demers de data relativ recenta
o sistemele de protectie sociala - sfarsit sec. 19
o politicile sociale - dupa RM II
o programele sociale - inceput deceniu 7
• 1923 - Asociatia Americana a Lucratorilor Sociali
infiinteaza un Subcomitet de Evaluare
• 1939-1951 - unul din primele experimente controlate
menit sa evalueze eficacitatea interventiilor terapeutice
(Cambridge-Sommerville Youth Study)

Gabriel Matauan 2013/2014 12

 b. Scurt istoric
• Pionierii evaluarii :
• Tyler (1935) in educatie
• Lewin (1948) in psihologia sociala
• Lazarsfeld (1955) in sociologie
• La inceputul anilor ‘60, in SUA este adoptata o lege
federala care promoveaza evaluarea si asigura fondurile
necesare :
• 1962 - evaluarea programului federal de combatere a
delicventei juvenile
• 1962-1964 - evaluarea programelor pentru forta de
munca si antisaracie
• 1965- evaluarea programului de educatie compensatorie

Gabriel Matauan 2013/2014 13

 b. Scurt istoric
• Premisele aparitiei evaluarii

o nevoia de evaluare, in relatie cu programele tot mai ample

o suportul institutional

Gabriel Matauan 2013/2014 14

 b. Nevoia de evaluare
• motive financiare - finantatorii doreau sa stie cum sunt cheltuite
fondurile
• motive politice - autoritatile centrale si locale isi disputau
anumite programe
• motive manageriale - experienta insuficienta in conducerea
programelor
• motive intelectuale - criticii doreau mai multa informatie
• motive tehnice - definirea si masurarea rezultatelor
programelor sociale este dificila
• motive legale - reglementarile serviciilor sociale nu permit
pietei se regleze acest domeniu
• motive epistemologice - dezvoltarea bazei de cunostinte

Gabriel Matauan 2013/2014 15

 b.Premisele aparitiei

Suportul institutional Evaluarea = profesie

• initiative legislative si • sarcini clare-feed-back
administrative despre programele sociale
• sector definit-programe
• finantare masiva
sociale publice
• cerinte explicite la nivel • baza certa de finantare
federal • legitimare sociala -nevoia
de evaluare a autoritatilor

Gabriel Matauan 2013/2014 16

 b. Scurt istoric
• 1980/SUA:
• 228 organizatii implicate in evaluare la nivel federal
• 1400 evaluatori profesionisti
• 180 mil. $ - cifra de afaceri
• fonduri disponibile pentru evaluare - 3 mild. $
• profesionalizarea evaluarii :
• inceputul anilor ‘70 - in universitati apar primele centre
si primele programe cu diploma
• jumatatea anilor ‘70 - primele asociatii,anuare, reviste si
standarde (American Evaluation Association - 3000
membri in 1985)
• diversificarea practicii profesionale (furnizori,clienti
domenii, activitati, metode, tehnici)

Gabriel Matauan 2013/2014 17

 b. Scurt istoric
• In Europa, preocupari sistematice apar la inceputul anilor
‘80, in relatie cu programele sociale majore ale UE
• Printre primele programe evaluate:
o Poverty 1 - 1980
o Poverty 2 - 1990
o Poverty 3 - 1993
o SPEC (Support Programme for Employment Creation)-1992
o ERGO - 1996 (program pentru somerii de lunga durata)

Gabriel Matauan 2013/2014 18

 b. Scurt istoric
• La nivel national, primele incercari apar in anii ‘60, in
Anglia, Belgia, Tarile Scandinave
• Din anii ‘90, atentia se indreapta catre Programele Phare si
TACIS
• Se contureaza cateva caracteristici:
o acceptarea diversitatii
o cultivarea autoevaluarii
o contractarea externa, fara a se insusi punctul de vedere al
evaluatorului (Phare) - birocratica

Gabriel Matauan 2013/2014 19

 b. Scurt istoric
• In Romania, primele programe evaluate:

o PAEM

o Phare VET

Gabriel Matauan 2013/2014 20

 c. Evolutia profesiei

Guba&Lincoln (1986) - reconstituie istoria profesiei; disting 4

etape si, corespunzator, 4 generatii de evaluatori:
• tehnica
• descriptiva
• judecare
• negociere

Gabriel Matauan 2013/2014 21

 c. Evolutia profesiei

Evaluatorul tehnician
• perioada debuteaza pe la inceputul sec. XX
• ia amploare la sfarsitul anilor ‘20, in SUA, in legatura cu
schimbarile curiculare si performantele elevilor
• caracteristica principala: masurarea (determinarea
nivelului individual sau de grup prin referinta la standarde)
• Ralph Tyler - pionierul evaluarii (1933)

Gabriel Matauan 2013/2014 22

 c. Evolutia profesiei
Evaluatorul narator (descriptor)
• initiatorul - tot Tyler (1942), in volumul in care descrie
“Eight Year Study”
• caracteristica principala: descrierea punctelor tari si a
slabiciunilor sesizate in legatura cu obiectivele, cu procesul
etc

Gabriel Matauan 2013/2014 23

 c. Evolutia profesiei
Evaluatorul judecator
• inceputul - in anii ‘60
• initiatorul - Michael Scriven (1967)
• principala caracteristica: judecarea
o obiectivele programelor incep sa fie chestionate
o la fel si performantele, ceea ce impune
o existenta unor standarde
o evaluatorii evita sa preia acest rol, datorita influentelor
politice, dar sfarsesc prin a-l accepta

Gabriel Matauan 2013/2014 24

 c. Evolutia profesiei
Evaluatorul negociator
• debuteaza la inceputul anilor ‘80
• evaluarea receptiva (“responsive”), naturalista, iluminativa
etc
• caracteristica principala: negocierea
o principalul punct de referinta: cerintele, preocuparile si
problemele stakeholderilor
o acceptarea pluralismului de valori
o negocierea si medierea valorilor stakeholderilor

Gabriel Matauan 2013/2014 25

 c. Evolutia profesiei
Rolul evaluatorului de “generatia a patra”

1. tehnician - cunoscator al metodelor si standardelor de

evaluare, dar devine si instrument al evaluarii
2. descriptor - descrie obiectivele, procesul, performanta, dar
si constructele stakeholderilor; descriere “iluminativ -
istorica”
3. judecator - nu isi mai asuma rolul de judecator, ci pe acela
de mediator al procesului de judecata
4. colaborator - conduce evaluarea dintr-o postura
colaborativa, nu de control

Gabriel Matauan 2013/2014 26

 c. Evolutia profesiei
5.invatat si invatator - invata despre problemele fiecarui
stakeholder si le prezinta si explica celorlalti stakeholderi
6. creator de realitate - invatandu-I pe fiecare sa inteleaga
valorile celorlalti, modifica constructele initile si creaza unul
nou, bazat pe o multitudine de valori
7. mediator si agent al schimbarii - prezentand un raport care
include toate valorile celorlalti, creste sansa de utilizare a
rezultatelor evaluarii

Gabriel Matauan 2013/2014 27

 d. Misiune…criterii
• Misiunea - care este ratiunea de existenta a evaluarii, ca
demers uman, in general ?
• Scopul - obiectivul general pentru care a fost initiata o
anumita evaluare; de ce a fost ceruta aceasta evaluare
• Obiectivele - mai intim legate de modul concret de
utilizare a evaluarii; carei nevoi imediate foloseste aceasta
evaluare ?
• Impactul - rezultatele mediate si efectele neintentionate
ale evaluarii

Gabriel Matauan 2013/2014 28

 d. Misiunea
• Furnizarea feedback-ului in sistemele sociale, pentru
sprijinirea imbunatatirii modului in care societatea
abordeaza problemele sociale, in scopul de a face
mai buna soarta umanitatii.
• evidentiaza si ierarhizeaza legaturile cauzale dintre
misiunea evaluarii si obiectivele societale de maxima
generalitate
• delimiteaza evaluarea de alte demersuri (decizie,
actiune)

Gabriel Matauan 2013/2014 29

 d. Scopuri
• Strategic - generarea de informatii pentru luarea deciziilor
privind politica domeniului.
• Praxiologic - rezultatele evaluarii sunt indreptate spre
imbunatatirea practicilor in interiorul programului.
• Demonstrativ - constatarile evaluarii nu servesc nemijlocit
pentru luarea unor decizii, ci sunt utilizate pentru a
demonstra anumite aspecte legate de program sau pentru
a genera perceptii dezirabile asupra programului.
• Formal-birocratic - evaluarea serveste doar pentru
perpetuarea/consolidarea unor structuri birocratice.

Gabriel Matauan 2013/2014 30

 d. Scopuri - Strategic
OBIECTIVE:
• decizii generale legate de programul evaluat (continuare,
modificare, oprire) -evaluare sumativa
• identificarea unor noi programe
• alegerea intre mai multe alternative de interventie sau
intre mai multe variante de program

Gabriel Matauan 2013/2014 31

 d. Scopuri - Praxiologic/formativ
OBIECTIVE:
• imbunatatirea managementului programului
• perfectionarea modului de lucru al echipei programului
• ameliorarea modului de livrare a serviciilor programului catre
beneficiarii acestuia

Gabriel Matauan 2013/2014 32

 d. Scopuri - Demonstrativ
OBIECTIVE:
• generarea unor perceptii si atitudini dezirabile din punctul
de vedere al celor care au initiat evaluarea
• dovedirea rationalitatii unor decizii deja luate
• confirmarea unor roluri si pozitii de putere
• demonstrarea responsabilitatilor fata de program

Gabriel Matauan 2013/2014 33

 d. Scopuri - Formal-birocratic
OBIECTIVE:
• justificarea existentei unui compartiment de evaluare
• necesitati de raportare
• “bifarea” unor sarcini

Gabriel Matauan 2013/2014 34

 d. Impactul evaluarii
LA NIVEL SOCIETAL:
• dezvoltarea bazei de cunostinte a disciplinei
• diseminarea bunelor practici
• imbunatatirea procesului de luare a deciziilor de politica a
domeniului
• intarirea raspunderii publice
LA NIVELUL PROGRAMULUI:
• imbunatatirea comunicarii si realizarea intelegerii intre
stakeholderi
• imbunatatirea performantelor personalului programului

Gabriel Matauan 2013/2014 35

 e. Obiecte
• relevanta - articularea programului cu politica domeniului,
cu nevoile/problemele sociale care l-au generat
• procesul - modul de organizare si functionare a
programului
• performanta - masura in care programul si-a atins
obiectivele
• impactul - contributia globala a programului la realizarea
politicii domeniului (a obiectivului sau general);
consecintele neintentionate ale programului.

Gabriel Matauan 2013/2014 36

 impact

relevanta
proces
performanta

impact

Gabriel Matauan 2013/2014 37

 d. Relevanta - criterii
• Criteriile - masura in care obiectivele, structura si/sau
modul de operare a programului sunt adecvate cu:
o problema sociala pe care o adreseaza programul
o nevoile specifice ale grupului-tinta
o prioritatile politicii domeniului
o alte interventii facute pentru rezolvarea celor de mai sus
(integrarea programului in ansamblul interventiilor sociale)

Gabriel Matauan 2013/2014 38

 d. Procesul - criterii
• Criterii:
o managementul programului
o structura si organizarea programului
o activitatile desfasurate
o procedurile formale si informale
o relatiile interne si externe ale programului
o structura costurilor programului
o coerenta tuturor celor de mai sus si adecvarea lor la
obiectivele programului
o reactiile programului la schimbarile din mediul extern

Gabriel Matauan 2013/2014 39

 3.4. Performanta - criterii
• Criterii:
o eficacitatea (obiectiv realizat/obiectiv planificat)
o eficienta (outputuri/inputuri)
o economia (costuri reale/costuri planificate)
o disponibilitatea (cantitatea si calitatea serviciilor oferite)
o accesibilitatea (apropierea de clienti a serviciilor oferite)
o targeting (numar de clienti eligibili/ numar de clienti serviti)
o acceptabilitatea ( numar de clienti satisfacuti/ numar de
clienti serviti)

Gabriel Matauan 2013/2014 40

 d. Impactul
• Criterii:
o masura in care programul a contribuit la atingerea
obiectivului sau general
o masura in care programul a influentat formularea politicilor
ulterioare
o participarea (numar de clienti serviti/numar de clienti
potentiali)
o constientizarea ( gradul de cunoastere a programului in
randul grupului-tinta si/sau al intregii populatii)
o efecte de multiplicare (output total/output program)
o efecte de antrenare (input total/input program)
o efecte de dislocare - activitatea programului face sa nu se
mai desfasoare activitati similare in alte parti
• produs/factori de productie/oferta/piata muncii
• efecte de substitutie
o efecte secundare - calitatea rezultatelor, echitate,
parteneriate, negative

Gabriel Matauan 2013/2014 41

 e. Tipuri de evaluare
• tipuri, strategii, modele abordari
• 57 identificate, fara pretentia de a fi inventariat totul
• criterii posibile:
o scopuri si obiective
o metode si tehnici
o etapele ciclului de viata a programului
o relatia evaluatorului cu programul
• criteriul ales: notorietatea

Gabriel Matauan 2013/2014 42

 e. Tipuri de evaluare
• formativa / sumativa
o “parintele” - Michael Scriven (1967)
o formativa - indreptata spre imbunatatirea programului
evaluat
o sumativa - judeca performanta programului; poate conduce
la continuarea, modificarea sau oprirea programului; are
rezultate generalizabile; ofera informatii pentru decizia de a
alege intre mai multe alternative de interventie

Gabriel Matauan 2013/2014 43

 e. Tipuri de evaluare
• bazata pe obiective (goal-based, preordinate, goal-fixed)
o evaluarea clasica
o presupune determinarea clara a obiectivelor si stabilirea
masurii in care acestea au fost atinse
• fara obiective (goal-free) (Scriven, 1972)
o evaluatorul nu trebuie sa cunoasca obiectivele programului,
pentru a nu fi influentat
o el trebuie sa se concentreze pe ceea ce se intampla in
realitate, in program si ca rezultat al programului

Gabriel Matauan 2013/2014 44

 e. Tipuri de evaluare
• receptiva (responsive)
o Robert Stake (1975)
o evaluatorul identifica nevoile de informatie percepute de
stakeholderi
• naturalista
o Guba&Lincoln (1981)
o evaluatorul nu doreste sa-si restranga viziunea,
concentrandu-se pe obiective, ci isi propune sa ramana
sensibil la toate aspectele descoperite
o angajeaza metode calitative

Gabriel Matauan 2013/2014 45

 e. Tipuri de evaluare
• centrata pe utilizare (utilization focused)
o initiator - Michael Quinn Patton (1982)
o evaluator “activ-reactiv-adaptiv”
o utilizatorii sunt implicati inca din faza de conceptie a
evaluarii, pentru a clarifica problemele la care asteapta
raspuns
• adaptata (taylored)
o initiator - Rossi
o aspectele evaluate si metodele angajate depind de tipul
programului (interventie inovativa/ modificare/ extensie a
unui program sau program stabil/ matur/ in plina
desfasurare)

Gabriel Matauan 2013/2014 46

 e. Tipuri de evaluare
• estimarea evaluabilitatii (evaluability assessment)
o promotorul cel mai constant - Joseph Wholey
o inseamna:
• estimarea masurii in care programul este pregatit se
realizeze rezultatele stabilite
• identificarea schimbarilor necesare pentru a-l aduce in
aceasta stare
• estimarea masurii in care evaluarea ar contribui la
imbunatatirea performantelor programului
• examinarea logicii prezumtiilor programului, descrie
caracteristicile implementarii programului, determina
fezabilitatea si utilitatea unei viitoare evaluari (E. R. S.)
• utilizate pentru a stimula acordul asupra unor obiective
realiste si masurabile ale programului

Gabriel Matauan 2013/2014 47

 e. Tipuri de evaluare
• metaevaluarea
o evaluare a unei alte evaluari, pentru a controla
subiectivismul sau a rafina evaluarea primara
o sinteza a tuturor evaluarilor intreprinse asupra unui
program, pentru a desprinde invataminte pentru viitor
o cercetarea mai multor studii de evaluare, privitoare la mai
multe programe, pentru a desprinde eventuale legitati, in
scopul de a dezvolta fondul de cunostinte al disciplinei

Gabriel Matauan 2013/2014 48

 f. Metode de evaluare
• 3 mari categorii:
o 1. Cantitative
• neexperimentale
• cvasiexperimentale
• experimentale
o 2. Calitative
• examinarea “urmelor” programului
• observarea directa
• interviul in profunzime
• focus grup
• forum comunitar
o 3. Economice
• analiza minimizarii costurilor
• analiza cost-eficacitate
• analiza cost-beneficiu
• analiza cost-utilitate

Gabriel Matauan 2013/2014 49

 f. Metode cantitative
• Neexperimentale
o utilizate mai ales in evaluarea rezultatelor programului
o a. un grup - un set de observari (X0)
• cat de bine “functioneaza” participantii la sfarsitul
programului
• daca rezultatele sunt la nivelul stabilit
o b. un grup - doua seturi de observari (0X0)
• in plus, cat de mult s-au schimbat participantii pe durata
programului

Gabriel Matauan 2013/2014 50

 f. Metode cantitative
• Cvasiexperimentale
o serii de timp intrerupte (00...00X00...00)
• validitate interna discutabila
• nu produc rezultate generalizabile
• unitate de analiza putin adecvata evaluarii programelor
o grup de control neechivalent (0X0/0- -0)
o regresia discontinua - folosita atunci cand eligibilitatea
pentru un anumit serviciu este bazata pe o variabila
continua; masurarile posttest sunt folosite ca variabila
dependenta de masurarile pretest si participarea la program

Gabriel Matauan 2013/2014 51

 f. Metode cantitative
• Experimentale
o selectia prin metode aleatorii a grupului participant si a
grupului de control
o variante:
• grup de control cu posttestare (X0/-0)
• doi-ori-doi factorial (-0/X0/Y0/XY0)
• cele patru grupuri ale lui Solomon(--0/-X0/0-0/0X0)
• serii de timp cu grupuri selectate aleatoriu (X0-
0-000/-0X0-000/-0-0X000)

Gabriel Matauan 2013/2014 52

 f. Metode calitative
• Calitative
• examinarea “urmelor” programului
• observarea directa
• interviul in profunzime
• focus grup
• forum comunitar

Gabriel Matauan 2013/2014 53

 f. Metode calitative
• Utilizare
o evaluarea procesului
o frecvente cazuri extreme
o evaluarea implementarii
o diferente intre proiecte
o evaluare formativa
o evaluarea calitatii
o imposibilitatea folosirii metodelor cantitative
o adaugarea de informatii la metodele cantitative

Gabriel Matauan 2013/2014 54

 f. Metode economice
• Principala utilizare: compararea alternativelor
• analiza minimizarii costurilor - rezultatele asteptate ale
diferitelor variante de program sunt similare, ramanand de
vazut care dintre ele implica costuri mai reduse
• analiza cost-eficacitate - mai multe variante de program produc
acelasi efect, dar care difera ca voulm
• analiza cost-beneficiu - folosita atunci cand rezultatele unor
interventii diferite sunt diferite ca natura, si nu pot fi comparate
decat in unitati monetare
• analiza cost-utilitate - ia in considerare valoare pe care fie
preferintele individuale, fie cele sociale, o ataseaza unui anumit
rezultat al programului

Gabriel Matauan 2013/2014 55

 g. Ciclul evaluarii
• Pregatirea - din momentul in care evaluatorul este
contactat de initiatorul evaluarii, pana in momentul
inceperii culegerii intensive a datelor necesare evaluarii
propriu-zise
• Realizarea - incepe cu culegerea datelor si se incheie cu
prezentarea raportului final
• Utilizarea - nu are o durata definita
o directa (decizii, demonstratii)
o pe termen lung (metaevaluari, cercetari, informatii)

Tema comuna: COMUNICAREA !

Gabriel Matauan 2013/2014 56

 g. Ciclul evaluarii
• Pregatirea:
o identificarea stakeholderilor
o intalniri preliminare cu stakeholderii
• cine doreste evaluarea
• ce tip de evaluare se doreste
• de ce se doreste evaluarea
• cand se doreste evaluareacare sunt resursele disponibile
o estimarea evaluabilitatii programului
• identificarea obiectivelor programului
• stabilirea granitelor “sistemului”
• identificarea oboectivelor evaluarii
• alegerea aspectelor-cheie care vor fi evaluate
o examinarea altor surse de informatii referitoare la evaluari
similare
o elaborarea metodologiei de investigatie
o prezentarea unei propuneri scrise

Gabriel Matauan 2013/2014 57

 g. Ciclul evaluarii
• Realizarea:
o implementarea activitatilor stabilite in etapa de
pregatire
o comunicarea permanenta cu stakeholderii
o elaborarea raportului final de evaluare

Gabriel Matauan 2013/2014 58

 g. Ciclul evaluarii
• Utilizarea:
o dezvoltarea unei atitudini suportive a personalului
programului si a altor decidenti
o abordarea constructive a constatarilor negative
o abordarea rezultatelor contradictorii
o depasirea obstacolelor in calea utilizarii
o imbunatatirea evaluarii prin utilizarea datelor deja existente

Gabriel Matauan 2013/2014 59

 h. Obstacole in evaluare
1. sisteme de valori diferite
2. scopuri ascunse
3. atitudini
4. raportul de forte expert-decident

Gabriel Matauan 2013/2014 60

 h. Obstacole in evaluare

1. Sisteme de valori diferite

• “este pur si simplu imposibil sa fii un tehnician neutru;
aplicarea unei tehnologii implica in mod necesar pozitii
ideologice, cu consecinte politice; evaluatorii aleg
intotdeauna o “parte”, chiar inainte de producerea unor
rezultate empirice.”
(Rossi)

61
 h. Obstacole in evaluare
2. Scopuri ascunse
• impunerea unor presiuni administrative asupra programului
• probarea incompetentei unor persoane
• colectarea numai a acelor informatii care ar putea submina
progarmul
• acoperirea unor deficiente ale programului
• considerente politice legate de alocarea viitoare a resurselor
(Conant : politicul - conflict intre diferite grupuri de putere
pentru alocarea resurselor)

62
 h. Obstacole in evaluare
3. Atitudini
• presiuni din partea unor stakeholderi
• perceptia prea optimista a echipei de proiect asupra propriei
activitati
• teama ca evaluarea va inhiba inovarea
• teama ca programul va fi oprit
• teama ca se va abuza de informatiile obtinute
• teama ca nimeni nu incearca sa inteleaga si aspectele calitative
ale programului
• impresia ca evaluarea risipeste resursele
• teama de a pierde controlul asupra programului
• teama ca evaluarea va avea un impact prea redus

63
 h. Obstacole in evaluare
4. Raportul de forte expert-decident
• “In orice sistem politic, evaluarea are rolul unei marturii a
expertului, indicand un anumit grad de eficacitate a programului.
Un juriu de decidenti sau alti stakeholderi poate da acestei marturii
o greutate mai mare decat unei opinii neinformate sau unor
presupuneri, dar in final ei sunt aceia care iau decizia, si nu martorul
(expertul).”
(Rossi)

Gabriel Matauan 2013/2014 64

 i. Evaluarea - de unde si incotro?
• constatare utilizare
• adevar pluralismul de valori
• opiniile academice nevoile stakeholderilor
• stiinta pura inglobarea politicii
• unitate metodologica diversitate metodologica
• evaluatorul tehnician evaluatorul facilitator
• profesionisti clienti

Gabriel Matauan 2013/2014 65