Sunteți pe pagina 1din 72

Evaluarea programelor sociale si de sanatate

Master Managementul Serviciilor Sociale si de Sanatate Gabriel Matauan, 2009

Evaluarea programelor sociale si de sanatate


Modulul3 Evaluarea programelor

Modulul 3 Evaluarea programelor si proiectelor


3.1. Definitii 3.2. Istoric 3.3. Evolutia profesiei 3.4. Misiune, scopuri, obiective, obiecte, criterii 3.5. Tipuri de evaluare 3.6. Metode de evaluare 3.7. Ciclul evaluarii 3.8. Raportul de evaluare 3.9. Obstacole in evaluare

Gabriel Matauan 2009

3.1.Definitii

Evaluarea este procesul de determinare a valorii sau succesului in atingerea unor obiective predeterminate; ea include urmatorii pasi:

formularea obiectivelor stabilirea criteriilor de masurare a succesului determinarea si explicarea gradului de succes recomandari pentru activitatea viitoare
(Asociatia Americana de Sanatate Publica)

Gabriel Matauan 2009

3.1.Definitii

Rolul evaluatorului este de a redefini mijloacele care sa fie utilizate pentru atingerea obiectivelor si chiar de a redefini anumite obiective, in conformitate cu rezultatele cercetarii (Bigman) Evaluarea reprezinta examinarea si judecarea valorii, calitatii, cantitatii, semnificatiei, nivelului sau conditiei a ceva (Soumelis)

Gabriel Matauan 2009

3.1.Definitii

Evaluarea este procesul prin care sunt determinate eficacitatea si eficienta programului. Ea se refera la indeplinirea obiectivelor programului
(Epstein&Tripodi)

Evaluarea programelor sociale este o tehnica manageriala care furnizeaza feed-back informational administratorilor programului. Ea reprezinta acumularea sistematica de date care sa furnizeze informatii despre indeplinirea obiectivelor
(Epstein,Tripodi&Fellin)

Gabriel Matauan 2009

3.1.Definitii

Evaluarea programelor reprezinta utilizarea unor metode stiintifice pentru a masura gradul de implementare si rezultatele programelor. Ea poate fi privita ca un instrument managerial, folosit pentru cresterea performantelor programului, pentru ajustarea bugetului sau chiar pentru oprirea programului (Rutman & Mowbray)

Gabriel Matauan 2009

3.1.Definitii

Evaluarea programelor este o noua si foarte interesanta stiinta sociala aplicata. Misiunea sa este de a sprijini imbunatatirea calitatii serviciilor umane. Ea este o colectie de metode, abilitati, capacitati si sensibilitati necesare pentru a determina daca un anumit serviciu social este necesar si daca este posibil ca el sa fie utilizat, daca se depun suficienta eforturi pentru a satisface nevoile sociale identificate, dar nesatisfacute inca, si daca serviciile oferite satisfac nevoile la un nivel rezonabil al costurilor in raport cu efectele lor
(Posavac & Carey)

Gabriel Matauan 2009

3.1.Definitii

Practica evaluarii este mai mult o arta decat o stiinta, deoarece gama posibilitatilor si constrangerilor este atat de vasta, incat pentru a face alegerea potrivita evaluatorul are nevoie nu numai de o judecata foarte clara, ci si de virtuozitate in alegerea alternativelor posibile. fiecare evaluare se desfasoara in conditii specifice si de aceea probabilitatea ca o anumita combinatie sa fie repetabila este foarte redusa. Ca atare, teoriile nu trebuie sa prezinte un set rigid de reguli pentru o buna practica, ci mai degraba sa sistematizeze optiunile posibile. (Cronbach)

Gabriel Matauan 2009

3.1.Definitii

Daca exista concepte mai greu de definit decat evaluare si politica, eu unul nu le-am intalnit. Nu este posibil sa le definesti intr-un fel care sa nu reflecte o preferinta metodologica sau epistemologica specifica.
D.J. Palumbo

Gabriel Matauan 2009

10

3.1.Definitii

Evaluarea, mai mult decat orice alta stiinta, este ceea ce


oamenii spun ca este. Si, de obicei, oamenii spun ca ea este o sumedenie de lucruri diferite.
(Glass&Ellet)

Proces rational si sistematic de masurare, descriere/ comparare/ judecare/ valorizare a relevantei/ procesului/ performantei/ impactului unei interventii si de armonizare a valorilor/ percepriilor/ intereselor stekeholderilor, menit sa ghideze decizia si actiunea.

Gabriel Matauan 2009

11

3.1.Definitii
Criterii
Momentul Obiectul Metoda Continutul Evaluatorul

In sens restrans
La sfarsit program
Performanta si procesul
Instrumente de masurare precise si utilizate cu buna credinta

In sens larg
In orice etapa a programului
In plus, relevanta si impactul
In plus, capacitatea de intelegere si adaptare a evaluatorului la situatie

Masurare, comparare identificare,descriere

In plus, judecare, valorizare, invatare

Extern
Gabriel Matauan 2009

Extern sau intern


12

3.2. Scurt istoric

demers de data relativ recenta sistemele de protectie sociala - sfarsit sec. 19 politicile sociale - dupa RM II programele sociale - inceput deceniu 7 1923 - Asociatia Americana a Lucratorilor Sociali infiinteaza un Subcomitet de Evaluare 1939-1951 - unul din primele experimente controlate menit sa evalueze eficacitatea interventiilor terapeutice (CambridgeSommerville Youth Study)

Gabriel Matauan 2009

13

3.2. Scurt istoric

Pionierii evaluarii : Tyler (1935) in educatie Lewin (1948) in psihologia sociala Lazarsfeld (1955) in sociologie La inceputul anilor 60, in SUA este adoptata o lege federala care promoveaza evaluarea si asigura fondurile necesare : 1962 - evaluarea programului federal de combatere a delicventei juvenile 1962-1964 - evaluarea programelor pentru forta de munca si antisaracie 1965- evaluarea programului de educatie compensatorie

Gabriel Matauan 2009

14

3.2. Scurt istoric

Premisele aparitiei evaluarii

nevoia de evaluare suportul institutional

Gabriel Matauan 2009

15

Nevoia de evaluare

motive financiare - finantatorii doreau sa stie cum sunt cheltuite fondurile motive politice - autoritatile centrale si locale isi disputau anumite programe motive manageriale - experienta insuficienta in conducerea programelor motive intelectuale - criticii doreau mai multa informatie motive tehnice - definirea si masurarea rezultatelor programelor sociale este dificila motive legale - reglementarile serviciilor sociale nu permit pietei se regleze acest domeniu motive epistemologice - dezvoltarea bazei de cunostinte

Gabriel Matauan 2009

16

Premisele aparitiei
Suportul institutional

initiative legislative si administrative finantare masiva cerinte explicite la nivel federal

Evaluarea = profesie sarcini clare-feed-back despre


programele sociale

sector definit-programe sociale


publice

baza certa de finantare legitimare sociala -nevoia de


evaluare a autoritatilor

Gabriel Matauan 2009

17

3.2. Scurt istoric

1980/SUA: 228 organizatii implicate in evaluare la nivel federal 1400 evaluatori profesionisti 180 mil. $ - cifra de afaceri fonduri disponibile pentru evaluare - 3 mild. $ profesionalizarea evaluarii : inceputul anilor 70 - in universitati apar primele centre si primele programe cu diploma jumatatea anilor 70 - primele asociatii,anuare, reviste si standarde (American Evaluation Association - 3000 membri in 1985) diversificarea practicii profesionale (furnizori,clienti domenii, activitati, metode, tehnici)

Gabriel Matauan 2009

18

3.2. Scurt istoric

In Europa, preocupari sistematice apar la inceputul anilor 80, in relatie cu programele sociale majore ale UE Printre primele programe evaluate:

Poverty 1 - 1980 Poverty 2 - 1990 Poverty 3 - 1993 SPEC (Support Programme for Employment Creation)-1992 ERGO - 1996 (program pentru somerii de lunga durata)

Gabriel Matauan 2009

19

3.2. Scurt istoric

La nivel national, primele incercari apar in anii 60, in Anglia, Belgia, Tarile Scandinave Din anii 90, atentia se indreapta catre Programele Phare si TACIS Se contureaza cateva caracteristici:

acceptarea diversitatii cultivarea autoevaluarii contractarea externa, fara a se insusi punctul de vedere al evaluatorului (Phare) - birocratica

Gabriel Matauan 2009

20

3.2. Scurt istoric

In Romania, primele programe evaluate:

PAEM Phare VET

Gabriel Matauan 2009

21

3.3. Evolutia profesiei


Guba&Lincoln (1986) - reconstituie istoria profesiei; disting 4 etape si, corespunzator, 4 generatii de evaluatori:

tehnica descriptiva judecare negociere

Gabriel Matauan 2009

22

3.3. Evolutia profesiei


Evaluatorul tehnician perioada debuteaza pe la inceputul sec. XX ia amploare la sfarsitul anilor 20, in SUA, in legatura cu schimbarile curiculare si performantele elevilor caracteristica principala: masurarea (determinarea nivelului individual sau de grup prin referinta la standarde) Ralph Tyler - pionierul evaluarii (1933)

Gabriel Matauan 2009

23

3.3. Evolutia profesiei


Evaluatorul narator (descriptor)

initiatorul - tot Tyler (1942), in volumul in care descrie Eight Year Study caracteristica principala: descrierea punctelor tari si a slabiciunilor sesizate in legatura cu obiectivele, cu procesul etc

Gabriel Matauan 2009

24

3.3. Evolutia profesiei


Evaluatorul judecator inceputul - in anii 60 initiatorul - Michael Scriven (1967) principala caracteristica: judecarea

obiectivele programelor incep sa fie chestionate la fel si performantele, ceea ce impune existenta unor standarde evaluatorii evita sa preia acest rol, datorita influentelor politice, dar sfarsesc prin a-l accepta

Gabriel Matauan 2009

25

3.3. Evolutia profesiei


Evaluatorul negociator debuteaza la inceputul anilor 80 evaluarea receptiva (responsive), naturalista, iluminativa etc caracteristica principala: negocierea

principalul punct de referinta: cerintele, preocuparile si problemele stakeholderilor acceptarea pluralismului de valori negocierea si medierea valorilor stakeholderilor

Gabriel Matauan 2009

26

3.3. Evolutia profesiei


Rolul evaluatorului de generatia a patra

1. tehnician - cunoscator al metodelor si standardelor de evaluare, dar devine si instrument al evaluarii 2. descriptor - descrie obiectivele, procesul, performanta, dar si constructele stakeholderilor; descriere iluminativ - istorica 3. judecator - nu isi mai asuma rolul de judecator, ci pe acela de mediator al procesului de judecata

Gabriel Matauan 2009

27

3.3. Evolutia profesiei

4. colaborator - conduce evaluarea dintr-o postura colaborativa, nu de control 5. invatat si invatator - invata despre problemele fiecarui stakeholder si le prezinta si explica celorlalti stakeholderi

Gabriel Matauan 2009

28

3.3. Evolutia profesiei

6. creator de realitate - invatandu-I pe fiecare sa inteleaga valorile celorlalti, modifica constructele initile si creaza unul nou, bazat pe o multitudine de valori 7. mediator si agent al schimbarii - prezentand un raport care include toate valorile celorlalti, creste sansa de utilizare a rezultatelor evaluarii

Gabriel Matauan 2009

29

3.4. Misiunecriterii

Misiunea - care este ratiunea de existenta a evaluarii, ca demers uman, in general ? Scopul - obiectivul general pentru care a fost initiata o anumita evaluare; de ce a fost ceruta aceasta evaluare Obiectivele - mai intim legate de modul concret de utilizare a evaluarii; carei nevoi imediate foloseste aceasta evaluare ? Impactul - rezultatele mediate si efectele neintentionate ale evaluarii

Gabriel Matauan 2009

30

3.4. Misiunea

Furnizarea feedback-ului in sistemele sociale, pentru sprijinirea imbunatatirii modului in care societatea abordeaza problemele sociale, in scopul de a face mai buna soarta umanitatii. evidentiaza si ierarhizeaza legaturile cauzale dintre misiunea evaluarii si obiectivele societale de maxima generalitate delimiteaza evaluarea de alte demersuri (decizie, actiune)

Gabriel Matauan 2009

31

3.4. Scopuri

Strategic - generarea de informatii pentru luarea deciziilor privind politica domeniului. Praxiologic - rezultatele evaluarii sunt indreptate spre imbunatatirea practicilor in interiorul programului. Demonstrativ - constatarile evaluarii nu servesc nemijlocit pentru luarea unor decizii, ci sunt utilizate pentru a demonstra anumite aspecte legate de program sau pentru a genera perceptii dezirabile asupra programului. Formal-birocratic - evaluarea serveste doar pentru perpetuarea/consolidarea unor structuri birocratice.

Gabriel Matauan 2009

32

3.4. Scopuri - Strategic


OBIECTIVE: decizii generale legate de programul evaluat (continuare, modificare, oprire) -evaluare sumativa identificarea unor noi programe alegerea intre mai multe alternative de interventie sau intre mai multe variante de program

Gabriel Matauan 2009

33

3.4. Scopuri - Praxiologic/formativ


OBIECTIVE:

imbunatatirea managementului programului perfectionarea modului de lucru al echipei programului ameliorarea modului de livrare a serviciilor programului catre beneficiarii acestuia

Gabriel Matauan 2009

34

3.4. Scopuri - Demonstrativ


OBIECTIVE:

generarea unor perceptii si atitudini dezirabile din punctul de vedere al celor care au initiat evaluarea dovedirea rationalitatii unor decizii deja luate confirmarea unor roluri si pozitii de putere demonstrarea responsabilitatilor fata de program

Gabriel Matauan 2009

35

3.4. Scopuri - Formal-birocratic


OBIECTIVE:

justificarea existentei unui compartiment de evaluare necesitati de raportare bifarea unor sarcini

Gabriel Matauan 2009

36

3.4. Impactul evaluarii


LA NIVEL SOCIETAL: dezvoltarea bazei de cunostinte a disciplinei diseminarea bunelor practici imbunatatirea procesului de luare a deciziilor de politica a domeniului intarirea raspunderii publice LA NIVELUL PROGRAMULUI: imbunatatirea comunicarii si realizarea intelegerii intre stakeholderi imbunatatirea performantelor personalului programului

Gabriel Matauan 2009

37

3.4. Obiecte

relevanta - articularea programului cu politica domeniului, cu nevoile/problemele sociale care l-au generat procesul - modul de organizare si functionare a programului performanta - masura in care programul si-a atins obiectivele impactul - contributia globala a programului la realizarea politicii domeniului (a obiectivului sau general); consecintele neintentionate ale programului.

Gabriel Matauan 2009

38

impact

relevanta proces performanta impact

Gabriel Matauan 2009

39

3.4. Relevanta - criterii

Criteriile - masura in care obiectivele, structura si/sau modul de operare a programului sunt adecvate cu:

problema sociala pe care o adreseaza programul nevoile specifice ale grupului-tinta prioritatile politicii domeniului alte interventii facute pentru rezolvarea celor de mai sus (integrarea programului in ansamblul interventiilor sociale)

Gabriel Matauan 2009

40

3.4. Procesul - criterii

Criterii:

managementul programului structura si organizarea programului activitatile desfasurate procedurile formale si informale relatiile interne si externe ale programului structura costurilor programului coerenta tuturor celor de mai sus si adecvarea lor la obiectivele programului reactiile programului la schimbarile din mediul extern

Gabriel Matauan 2009

41

3.4. Performanta - criterii

Criterii:

eficacitatea (obiectiv realizat/obiectiv planificat) eficienta (outputuri/inputuri) economia (costuri reale/costuri planificate) disponibilitatea (cantitatea si calitatea serviciilor oferite) accesibilitatea (apropierea de clienti a serviciilor oferite) targeting (numar de clienti eligibili/ numar de clienti serviti) acceptabilitatea ( numar de clienti satisfacuti/ numar de clienti serviti)

Gabriel Matauan 2009

42

3.4. Impactul

Criterii:

masura in care programul a contribuit la atingerea obiectivului sau general masura in care programul a influentat formularea politicilor ulterioare participarea (numar de clienti serviti/numar de clienti potentiali) constientizarea ( gradul de cunoastere a programului in randul grupului-tinta si/sau al intregii populatii) efecte de multiplicare (output total/output program) efecte de antrenare (input total/input program) efecte de dislocare - activitatea programului face sa nu se mai desfasoare activitati similare in alte parti produs/factori de productie/oferta/piata muncii efecte de substitutie efecte secundare - calitatea rezultatelor, echitate, parteneriate, negative

Gabriel Matauan 2009

43

3.5. Tipuri de evaluare


tipuri, strategii, modele abordari 57 identificate, fara pretentia de a fi inventariat totul criterii posibile:

scopuri si obiective metode si tehnici etapele ciclului de viata a programului relatia evaluatorului cu programul

criteriul ales: notorietatea

Gabriel Matauan 2009

44

3.5. Tipuri de evaluare

formativa / sumativa

parintele - Michael Scriven (1967) formativa - indreptata spre imbunatatirea programului evaluat sumativa - judeca performanta programului; poate conduce la continuarea, modificarea sau oprirea programului; are rezultate generalizabile; ofera informatii pentru decizia de a alege intre mai multe alternative de interventie

Gabriel Matauan 2009

45

3.5. Tipuri de evaluare

bazata pe obiective (goal-based, preordinate, goalfixed)


evaluarea clasica presupune determinarea clara a obiectivelor si stabilirea masurii in care acestea au fost atinse
evaluatorul nu trebuie sa cunoasca obiectivele programului, pentru a nu fi influentat el trebuie sa se concentreze pe ceea ce se intampla in realitate, in program si ca rezultat al programului

fara obiective (goal-free) (Scriven, 1972)

Gabriel Matauan 2009

46

3.5. Tipuri de evaluare

receptiva (responsive)

Robert Stake (1975) evaluatorul identifica nevoile de informatie percepute de stakeholderi Guba&Lincoln (1981) evaluatorul nu doreste sa-si restranga viziunea, concentrandu-se pe obiective, ci isi propune sa ramana sensibil la toate aspectele descoperite angajeaza metode calitative

naturalista

Gabriel Matauan 2009

47

3.5. Tipuri de evaluare

centrata pe utilizare (utilization focused)


initiator - Michael Quinn Patton (1982) evaluator activ-reactiv-adaptiv utilizatorii sunt implicati inca din faza de conceptie a evaluarii, pentru a clarifica problemele la care asteapta raspuns initiator - Rossi aspectele evaluate si metodele angajate depind de tipul programului (interventie inovativa/ modificare/ extensie a unui program sau program stabil/ matur/ in plina desfasurare)

adaptata (taylored)

Gabriel Matauan 2009

48

3.5. Tipuri de evaluare

estimarea evaluabilitatii (evaluability assessment) promotorul cel mai constant - Joseph Wholey inseamna: estimarea masurii in care programul este pregatit se realizeze rezultatele stabilite identificarea schimbarilor necesare pentru a-l aduce in aceasta stare estimarea masurii in care evaluarea ar contribui la imbunatatirea performantelor programului examinarea logicii prezumtiilor programului, descrie caracteristicile implementarii programului, determina fezabilitatea si utilitatea unei viitoare evaluari (E. R. S.) utilizate pentru a stimula acordul asupra unor obiective realiste si masurabile ale programului

Gabriel Matauan 2009

49

3.5. Tipuri de evaluare

metaevaluarea

evaluare a unei alte evaluari, pentru a controla subiectivismul sau a rafina evaluarea primara sinteza a tuturor evaluarilor intreprinse asupra unui program, pentru a desprinde invataminte pentru viitor cercetarea mai multor studii de evaluare, privitoare la mai multe programe, pentru a desprinde eventuale legitati, in scopul de a dezvolta fondul de cunostinte al disciplinei

Gabriel Matauan 2009

50

3.6. Metode de evaluare

3 mari categorii:

1. Cantitative

neexperimentale cvasiexperimentale experimentale examinarea urmelor programului observarea directa interviul in profunzime focus grup forum comunitar analiza minimizarii costurilor analiza cost-eficacitate analiza cost-beneficiu analiza cost-utilitate
Gabriel Matauan 2009 51

2. Calitative

3. Economice

3.6.1. Metode cantitative

Neexperimentale

utilizate mai ales in evaluarea rezultatelor programului a. un grup - un set de observari (X0) cat de bine functioneaza participantii la sfarsitul programului daca rezultatele sunt la nivelul stabilit b. un grup - doua seturi de observari (0X0) in plus, cat de mult s-au schimbat participantii pe durata programului

Gabriel Matauan 2009

52

3.6.1. Metode cantitative

Cvasiexperimentale

serii de timp intrerupte (00...00X00...00)


validitate interna discutabila nu produc rezultate generalizabile unitate de analiza putin adecvata evaluarii programelor

grup de control neechivalent (0X0/0- -0) regresia discontinua - folosita atunci cand eligibilitatea pentru un
anumit serviciu este bazata pe o variabila continua; masurarile posttest sunt folosite ca variabila dependenta de masurarile pretest si participarea la program

Gabriel Matauan 2009

53

3.6.1. Metode cantitative

Experimentale

selectia prin metode aleatorii a grupului participant si a grupului de control variante:


grup de control cu posttestare (X0/-0) doi-ori-doi factorial (-0/X0/Y0/XY0) cele patru grupuri ale lui Solomon(--0/-X0/0-0/0X0) serii de timp cu grupuri selectate aleatoriu 0-000/-0X0-000/-0-0X000)

(X0-

Gabriel Matauan 2009

54

3.6.2. Metode calitative

Calitative examinarea urmelor programului observarea directa interviul in profunzime focus grup forum comunitar

Gabriel Matauan 2009

55

3.6.2. Metode calitative

Utilizare

evaluarea procesului frecvente cazuri extreme evaluarea implementarii diferente intre proiecte evaluare formativa evaluarea calitatii imposibilitatea folosirii metodelor cantitative adaugarea de informatii la metodele cantitative

Gabriel Matauan 2009

56

3.6.3. Metode economice

Principala utilizare: compararea alternativelor


analiza minimizarii costurilor - rezultatele asteptate ale diferitelor variante de program sunt similare, ramanand de vazut care dintre ele implica costuri mai reduse analiza cost-eficacitate - mai multe variante de program produc acelasi efect, dar care difera ca voulm analiza cost-beneficiu - folosita atunci cand rezultatele unor interventii diferite sunt diferite ca natura, si nu pot fi comparate decat in unitati monetare analiza cost-utilitate - ia in considerare valoare pe care fie preferintele individuale, fie cele sociale, o ataseaza unui anumit rezultat al programului

Gabriel Matauan 2009

57

3.7. Ciclul evaluarii

Pregatirea - din momentul in care evaluatorul este contactat de initiatorul evaluarii, pana in momentul inceperii culegerii intensive a datelor necesare evaluarii propriu-zise Realizarea - incepe cu culegerea datelor si se incheie cu prezentarea raportului final Utilizarea - nu are o durata definita

directa (decizii, demonstratii) pe termen lung (metaevaluari, cercetari, informatii)

Tema comuna: COMUNICAREA !

Gabriel Matauan 2009

58

3.7. Ciclul evaluarii

Pregatirea:

identificarea stakeholderilor intalniri preliminare cu stakeholderii cine doreste evaluarea ce tip de evaluare se doreste de ce se doreste evaluarea cand se doreste evaluareacare sunt resursele disponibile estimarea evaluabilitatii programului identificarea obiectivelor programului stabilirea granitelor sistemului identificarea oboectivelor evaluarii alegerea aspectelor-cheie care vor fi evaluate examinarea altor surse de informatii referitoare la evaluari similare elaborarea metodologiei de investigatie prezentarea unei propuneri scrise
Gabriel Matauan 2009 59

3.7. Ciclul evaluarii

Realizarea:

implementarea activitatilor stabilite in etapa de pregatire comunicarea permanenta cu stakeholderii elaborarea raportului final de evaluare

Gabriel Matauan 2009

60

3.7. Ciclul evaluarii

Utilizarea:

dezvoltarea unei atitudini suportive a personalului programului si a altor decidenti abordarea constructive a constatarilor negative abordarea rezultatelor contradictorii depasirea obstacolelor in calea utilizarii imbunatatirea evaluarii prin utilizarea datelor deja existente

Gabriel Matauan 2009

61

3.8. Raportul de evaluare


nu exista formate standard, dar in linii mari sunt recomandate sectiunile:


1. Rezumat (executive summary) 2. Prezentarea programului 3. Obiectivele evaluarii 4. Abordarea conceptuala a evaluatorului 5. Descrierea activitatilor intreprinse 6. Rezultatele/constatarile evaluarii 7. Recomandarile evaluatorului 8. Anexele

Gabriel Matauan 2009

62

3.8. Raportul de evaluare

1. Rezumatul:

nu mai mult de 1-2 pagini introduce toate celelalte capitole contine toate informatiile esentiale

2. Prezentarea programului:

date de identificare a prgramului contextul (cadrul general al prgramului) obiectivele programului durata si perioada de desfasurare mediul si influentele sale nevoia/problema generatoare procesul

Gabriel Matauan 2009

63

3.8. Raportul de evaluare

3. Obiectivele evaluarii

contextul evaluarii obiectivele preocuparile si prioritatile stakeholderilor tehnici plan justificarea optiunilor metodele de colectare a informatiei criterii de selectie a informatiei surse de informatii modul de procesare a informatiei

4. Abordarea conceptuala a evaluatorului


Gabriel Matauan 2009

64

3.8. Raportul de evaluare

5. Descrierea activitatilor intreprinse


ce activitati a desfasurat rezultatele activitatilor (ce info s-au obtinut) informatii verificabile obiectiv baza pentru concluzii si recomandari organizate pe categorii de activitati pe categorii de rezultate temporal conform relevantei pentru premise sau pentru analiza rezultatele analizei /constatarile: cauze efecte impact premise noi
Gabriel Matauan 2009 65

6. Rezultatele/constatarile evaluarii

3.8. Raportul de evaluare

7. Recomandarile evaluatorului

fundamentate cu faptele interpretate prin analiza raspund obiectivelor evaluarii (raportului) lectii pentru luarea deciziilor viitoare previziuni de posibile scenarii pentru viitor in general, justificarea tuturor afirmatiilor din raport liste complete de surse info, actiuni etc

8. Anexele

Gabriel Matauan 2009

66

3.9. Obstacole in evaluare


1. sisteme de valori diferite 2. scopuri ascunse 3. atitudini 4. raportul de forte expert-decident

Gabriel Matauan 2009

67

3.9. Obstacole in evaluare


1. Sisteme de valori diferite

este pur si simplu imposibil sa fii un tehnician neutru; aplicarea unei tehnologii implica in mod necesar pozitii ideologice, cu consecinte politice; evaluatorii aleg intotdeauna o parte, chiar inainte de producerea unor rezultate empirice.
(Rossi)

Gabriel Matauan 2009

68

3.9. Obstacole in evaluare


2. Scopuri ascunse

impunerea unor presiuni administrative asupra programului probarea incompetentei unor persoane colectarea numai a acelor informatii care ar putea submina progarmul acoperirea unor deficiente ale programului considerente politice legate de alocarea viitoare a resurselor (Conant : politicul - conflict intre diferite grupuri de putere pentru alocarea resurselor)

Gabriel Matauan 2009

69

3.9. Obstacole in evaluare


3. Atitudini

presiuni din partea unor stakeholderi perceptia prea optimista a echipei de proiect asupra propriei activitati teama ca evaluarea va inhiba inovarea teama ca programul va fi oprit teama ca se va abuza de informatiile obtinute teama ca nimeni nu incearca sa inteleaga si aspectele calitative ale programului impresia ca evaluarea risipeste resursele teama de a pierde controlul asupra programului teama ca evaluarea va avea un impact prea redus

Gabriel Matauan 2009

70

3.9. Obstacole in evaluare


4. Raportul de forte expert-decident

In orice sistem politic, evaluarea are rolul unei marturii a expertului, indicand un anumit grad de eficacitate a programului. Un juriu de decidenti sau alti stakeholderi poate da acestei marturii o greutate mai mare decat unei opinii neinformate sau unor presupuneri, dar in final ei sunt aceia care iau decizia, si nu martorul (expertul).
(Rossi)

Gabriel Matauan 2009

71

Evaluarea - de unde si incotro?

constatare adevar opiniile academice stiinta pura unitate metodologica evaluatorul tehnician profesionisti

utilizare pluralismul de valori nevoile stakeholderilor inglobarea politicii diversitate metodologica evaluatorul facilitator clienti

Gabriel Matauan 2009

72

S-ar putea să vă placă și