Rolul intrebarilor de evaluare

Intrebarile de evaluare sunt acele intrebari la care evaluatorii trebuie sa raspunda in raportul de evaluare. Intrebarile ajuta evaluatorii sa isi concentreze munca si astfel sa ofere plus valoare clientului. Prin urmare, clientul este cel care ar trebui sa formuleze intrebarile de evaluare specifice pentru fiecare exercitiu de evaluare, in cadrul consultarilor cu factorii interesati. De obicei intrebarile de evaluare sunt bazate pe nevoile si asteptarile specifice ale clientului si factorilor interesati cu privire la raportul de evaluare. Intrebarile de evaluare joaca un rol cheie in procesul de evaluare si ar trebui sa fie definite ca atare. Daca acestea lipsesc, atunci evaluatorii pot alege sa evalueze oricare aspect din multitudinea de aspecte ce pot fi analizate in ceea ce priveste o interventie publica. Formularea intrebarilor de evaluare garanteaza ca evaluarea va raspunde la acele intrebari specifice la care clientul si factorii interesati doresc sa afle raspunsul. Uneori evaluatorii pot sugera in decursul procesului de consultare alte intrebari pe care clientul le-a scapat din vedere si care sunt relevante pentru evaluare. 

Cine formuleaza intrebarile de evaluare?

• In mod ideal, ar trebui sa fie clientul, in urma consultarii cu factorii interesati, la momentul definirii sferei si scopului unui exercitiu specific de evaluare;
• Atunci cand clientul are experienta limitata in gestionarea unui exercitiu de evaluare, poate fi necesar ca evaluatorul sa sprijine clientul in ceea ce priveste formularea intrebarilor de evaluare. In cadrul unui proces de cooperare, evaluatorul il asista pe client in definirea nevoilor si asteptarilor acestuia din urma si in definirea intrebarilor de evaluare. 

Focalizarea intrebarilor de evaluare

In mod obisnuit, nivelul de detaliere in formularea intrebarilor de evaluare variaza considerabil de la un exercitiu de evaluare la altul. In forma lor generala, intrebarile de evaluare pot pur si simplu sa coincida cu dimensiunile evaluarii: relevanta, eficacitatea, eficienta si impactul. In alte cazuri, in cadrul fiecareia dintre aceste dimensiuni tipice evaluarii, clientul poate formula intrebari foarte specifice de care este interesat. De exemplu, intrebari mai specifice asupra impactului programului pot acoperi urmatoarele trei aspecte: impactul cui si impactul asupra cui si pentru cine?

Tabelul 3 prezinta principalele aspecte pe care se focalizeaza intrebarile de evaluare si care depind in special de scopul pentru care a fost initiata evaluarea.

Tabelul 3. Formularea intrebarilor de evaluare in conformitate cu scopurile evaluarii.

Optiunea pentru intrebari generale sau specifice depinde de nevoile clientului si de tipul de evaluare.

Adesea clientii sau factorii interesati ai evaluarii aleg sa nu formuleze intrebari de evaluare specifice, lasand evaluatorul sa isi aleaga propriile intrebari. Acest lucru apare datorita dorintei de a verifica daca constatarile si opiniile evaluatorilor despre interventia publica coincid cu ale lor. Aceasta abordare este una comuna si de inteles, deoarece oamenii sunt adesea foarte incantati de perspectiva de a afla daca si altcineva le impartaseste opiniile. Desi este interesant de vazut daca evaluatorii impartasesc opiniile clientilor si ale factorilor interesati, trebuie formulate totusi avertismente in acest sens.  

Evaluatorii sunt confruntati cu un volum foarte mare de informatii si o multitudine de aspecte privind implementarea interventiei pe care le-ar putea evalua. Chiar si interventiile la o scara mai redusa, care au functionat pentru o perioada relativ scurta de timp, genereaza un volum mare de informatii. Interventiile relativ mari, care variaza in termeni financiari de la cateva milioane la sute de milioane de euro, si care sunt implementate cu ajutorul unor structuri institutionale complexe, avand numerosi factori interesati si fiind functionale timp de mai multi ani, de obicei genereaza un volum extraordinar de mare de informatii. Prin urmare, ar putea exista nevoia de a formula intrebari de evaluare mai specifice pentru a acoperi aceste aspecte diferite.

Daca evaluatorii nu au un focus pre-definit in ceea ce priveste intrebarile de evaluare, exista sanse reduse ca acestia sa analizeze exact acele aspecte pe care clientul le considera a fi importante. Adesea, in astfel de cazuri, constatarile evaluatorilor se intampla sa nu fie foarte utile, din cauza mai multor motive - acestea pot fi prea generale sau detaliate inutil, sau nu acopera ceea ce clientii si factorii interesati considera a fi probleme esentiale, sau constatarile sunt deja cunoscute tuturor. In final, sentimentul care prevaleaza este ca exercitiul de evaluare a avut o plus-valoare prea redusa. In plus, clientul ar trebui intotdeauna sa ia in considerare intrebarea exercitiul de confirmare a opiniilor mele pre-definite are o valoare suficienta pentru a justifica plata costurilor unui exercitiu de evaluare? Este aceasta singura valoare adaugata pe care o putem astepta de la exercitiul de evaluare?

Adesea, in practica se intampla ca respectivul client sa faca o alegere neinformata. Adica, alege sa nu defineasca intrebari de evaluare specifice, fara a fi constient de posibilele consecinte. In concluzie, daca un client sau un factor interesat aleg sa nu defineasca intrebari de evaluare detaliate, ar trebui sa faca acest lucru deplin constienti de consecintele posibile.

Tipuri de intrebari de evaluare

Tipul intrebarilor de evaluare (Tabel 4) de obicei depinde de un numar de factori:

• Scopul exercitiului de evaluare;
• Momentul evaluarii - ex-ante, intermediara sau ex-post;
• Tipul interventiei (proiect, program, politica) supusa evaluarii;
• Aspectele specifice de implementare cu care se confrunta interventia (cine si cum implementeaza);
• Rolul clientului in ceea ce priveste programul - ex. finantator, parte a managementului de program, factor decizional senior etc.

Tabel 4. Tipuri de intrebari de evaluare, grupate pe dimensiunile de evaluare si pe momentul evaluarii

Sugestii practice

Activitatile descrise in pasul urmator prezinta modul in care trebuie planificata o evaluare in mode adecvat, luand in considerare intrebarile de evaluare, resursele disponibile (umane, de timp si financiare) si cum se construiesc structurile pentru gestionarea si desfasurarea unei evaluari.