Creșterea accesului la lucrătorii din domeniul sănătății în zonele insuficient deservite: un cadru conceptual pentru măsurarea rezultatelor

Luis Huicho a, Marjolein Dieleman b, James Campbell c, Laurence Codjia d, Dina Balabanova e, Gilles Dussault f & Carmen Dolea g

a. Departamentul de pediatrie, Universidad Peruana Cayetano Heredia, Lima, Peru.
b. KIT Dezvoltare, politică și practică, Institutul Regal Tropical, Amsterdam, Olanda.
c. Instituto de Cooperación Social, Integrare, Barcelona, Spania.
d. Global Health Workforce Alliance, Geneva, Elveția.
e. London School of Hygiene and Tropical Medicine, Londra, Anglia.
f. Intituto de Higiene e Medecina Tropical, Universidade Nova de Lisboa, Lisabona, Portugalia.
g. Departamentul de Resurse Umane pentru Sănătate, Organizația Mondială a Sănătății, 20 avenue Appia, 1211 Geneva 27, Elveția.

Corespondență către Carmen Dolea (e-mail: ).

(Prezentat: 05 octombrie 2009 – Versiune revizuită primită: 19 noiembrie 2009 – Acceptată: 05 ianuarie 2010.)

Bulletin of the World Health Organization 2010;88:357-363. doi: 10.2471/BLT.09.070920

Introducere

Disponibilitatea lucrătorilor din domeniul sănătății de a practica în zone insuficient deservite, cum ar fi zonele rurale, îndepărtate sau sărace, este o provocare recunoscută în realizarea accesului echitabil la serviciile de sănătate. Multe țări au elaborat strategii pentru a atrage și a păstra lucrători din domeniul sănătății calificați în aceste zone. Dar dovezile privind succesele sau eșecurile unor astfel de intervenții sunt puține și slabe și este dificil să se compare lecțiile și să se măsoare rezultatele din puținele evaluări care sunt disponibile.1-3

S-au înregistrat progrese semnificative în ceea ce privește generarea unei înțelegeri comune și a unei dezbateri privind modalitățile de evaluare a impactului intervențiilor de dezvoltare, precum și în ceea ce privește utilizarea unei terminologii coerente de monitorizare și evaluare, cum ar fi „produse”, „rezultate” și „impact”.4-6 Cu toate acestea, acest lucru nu a fost încă aplicat la evaluarea intervențiilor în domeniul resurselor umane pentru sănătate și, în special, la cele care urmăresc să crească accesul la lucrătorii din domeniul sănătății în zonele insuficient deservite. Există o nevoie urgentă de a ajunge la un acord și de a consolida dovezile care să stea la baza unor recomandări politice solide în acest domeniu.

Încercând să abordeze această lacună, acest document propune un cadru conceptual pentru a ghida managerii, factorii de decizie politică și evaluatorii în evaluarea intervențiilor de creștere a accesului la lucrătorii din domeniul sănătății în zonele insuficient deservite. Cadrul își propune să sprijine toate etapele de elaborare a politicilor. Acesta sugerează o secvență logică care poate fi urmată atunci când se decide asupra oricărei intervenții care abordează problemele de atragere și de retenție și ajută la formularea întrebărilor-cheie la care trebuie să se răspundă atunci când se proiectează, monitorizează și evaluează astfel de intervenții. Acesta include exemple de indicatori pentru a informa procesul, care pot fi adaptate la un context specific. O analiză cuprinzătoare a indicatorilor pentru monitorizarea forței de muncă din domeniul sănătății în general este oferită în altă parte.7

Provocări în evaluare

Factorii de decizie și politici trebuie să știe dacă intervențiile funcționează sau nu, de ce funcționează și în ce context. Prin urmare, este important să se dispună de informații despre efectele intervențiilor, dar și despre factorii care au făcut ca intervenția să reușească sau să eșueze (întrebările care se referă la „când, de ce, cum și în ce circumstanțe astfel de intervenții funcționează bine sau nu funcționează”).8

Evaluarea intervențiilor de îmbunătățire a resurselor umane pentru sănătate este complexă din diferite motive. În primul rând, stabilirea unei legături între aceste intervenții și starea de sănătate este foarte dificilă din cauza factorilor socioeconomici, culturali, politici și ai sistemelor de sănătate extinse care influențează sănătatea. De exemplu, deși rezultatele îmbunătățite în materie de sănătate, cum ar fi reducerea mortalității materne, sunt direct corelate cu disponibilitatea crescută a lucrătorilor din domeniul sănătății, este dificil să se atribuie îmbunătățirea în mod direct unei anumite intervenții privind forța de muncă din domeniul sănătății.9,10 Studiile de caz naționale ilustrative au arătat că Afganistanul și Etiopia au pus în aplicare strategii cuprinzătoare în sectorul sănătății, cu multiple intervenții coexistente, cum ar fi recrutarea de lucrători comunitari din domeniul sănătății, care ar fi putut promova accesul la servicii de salvare a vieții, îmbunătățind astfel starea de sănătate.11

O altă problemă este aceea că multe evaluări nu dispun de o bază de referință în raport cu care să se evalueze rezultatele, în special în țările cu un deficit major de lucrători din domeniul sănătății,3,10,12 precum și de o logică specifică a intervenției care să clarifice așteptările celor care au conceput intervenția (S Kane, B Gerretsen, R Scherpbier, M Dal Poz, MA Dieleman, date nepublicate, 2009).13 Mai mult, contextul social, politic și economic în care sunt concepute și implementate intervențiile este rareori luat în considerare în monitorizarea și evaluarea intervențiilor în domeniul resurselor umane.14,15

Astfel, principalele provocări cu care se confruntă evaluatorii sunt legate de natura multidimensională a intervențiilor și de dificultatea de a evalua influența factorilor contextuali. Pentru a putea evalua astfel de intervenții în cadrul unor sisteme complexe, este nevoie de abordări de monitorizare și evaluare multimetale și multidisciplinare, care să includă toate părțile interesate relevante.16 O altă provocare este generarea de lecții între regiuni și țări pentru a informa agenda globală de sănătate și pentru a promova un dialog semnificativ atât la nivel național, cât și internațional. Există o nevoie clară de un cadru care să ofere un model de monitorizare și evaluare a intervențiilor de retenție a lucrătorilor din domeniul sănătății, luând în considerare astfel de provocări.

Cadru conceptual

Cadrul propus se bazează pe o abordare sistemică și face diferența între „intrări”, „ieșiri”, „rezultate” și „impact”, în ceea ce privește rezultatele intervențiilor de atragere și retenție a lucrătorilor din domeniul sănătății în zonele insuficient deservite. Acesta se bazează pe cadrul comun propus pentru monitorizarea performanțelor și evaluarea progreselor în cadrul extinderii pentru o mai bună stare de sănătate17 și propune indicatori pentru a măsura progresele înregistrate în punerea în aplicare a diferitelor strategii, permițând utilizatorilor să determine ce funcționează sau nu și să exploreze factorii contextuali care influențează succesul sau eșecul acestora. Cadrul are două obiective: (i) să ghideze modul de gândire în evaluarea unei intervenții de creștere a accesului la lucrătorii din domeniul sănătății în zonele insuficient deservite, de la faza de inițiere/proiectare până la rezultatele acesteia, sugerând întrebări-cheie cu privire la relevanța, eficacitatea, eficiența, eficacitatea și durabilitatea intervenției; și (ii) să ghideze monitorizarea intervențiilor, prin concentrarea asupra unei colectări de rutină a unui set de indicatori, aplicabil la contextul specific.

Am utilizat următoarele definiții pentru evaluare și monitorizare:4

Definim „evaluare” ca fiind evaluarea sistematică și obiectivă a unui proiect, program sau politică în curs de desfășurare sau finalizat, a conceperii, implementării și rezultatelor acestuia. Scopul este de a determina relevanța și îndeplinirea obiectivelor, eficiența, eficacitatea, impactul și durabilitatea dezvoltării.

Definim „monitorizarea” ca fiind o funcție continuă care utilizează colectarea sistematică de date cu privire la indicatori specificați pentru a furniza conducerii și principalelor părți interesate ale unei intervenții de dezvoltare în curs de desfășurare indicații privind gradul de progres și de realizare a obiectivelor și progresul în utilizarea fondurilor alocate.

În continuare, în această lucrare, examinăm aplicarea cadrului la etapele de elaborare a politicilor: proiectare, punere în aplicare, monitorizare și evaluare (Fig. 1). Secvența din fazele de proiectare și implementare nu implică neapărat un proces de politică liniar, deoarece monitorizarea și evaluarea pot ajuta la identificarea necesității unor noi intervenții. Acestea fac, de fapt, parte dintr-un ciclu de politici în curs de desfășurare.

Fig. 1. Cadrul conceptual pentru măsurarea eforturilor de creștere a accesului la lucrătorii din domeniul sănătății în zonele insuficient deservite

IMR, rata mortalității infantile; MMR, rata mortalității materne.

Proiectare

Evaluarea etapei de proiectare ar trebui să identifice măsura în care intervenția aleasă a fost relevantă și adecvată nevoilor, așteptărilor populației și contextului sistemului de sănătate, precum și motivele pentru selectarea unei anumite opțiuni.18 Prin relevanță se înțelege măsura în care obiectivele și elementele intervenției sunt în concordanță cu cerințele beneficiarilor, cu nevoile țării, cu prioritățile globale și cu politicile partenerilor și ale donatorilor.4 Problema relevanței poate și ar trebui să fie abordată și retrospectiv; și atunci întrebarea este dacă obiectivele unei intervenții sau proiectarea acesteia au fost și sunt în continuare adecvate, având în vedere circumstanțele schimbate.4

Întrebările pe care ar trebui să și le pună un evaluator sunt: a răspuns intervenția la o nevoie documentată, a fost adecvată pentru contextul dat și cum a fost selectată? Se bazează alegerea intervenției pe dovezi sau cel puțin pe argumente solide?

Evaluarea analizei situației ar trebui să verifice dacă problema accesului limitat la lucrătorii din domeniul sănătății a fost descrisă în mod clar. Se datorează unui număr insuficient de studenți dispuși să lucreze în zonele insuficient deservite, sau unei producții insuficiente de lucrători din domeniul sănătății, sau au existat și alte motive? Evaluarea trebuie să verifice dacă a fost efectuată o analiză a pieței forței de muncă din domeniul sănătății, pentru a identifica dacă lipsa accesului la lucrătorii din domeniul sănătății în zonele insuficient deservite a fost o chestiune de cerere insuficientă, de ofertă insuficientă sau de remunerare și stimulente insuficiente și de condiții de muncă neatractive.19

Analiza situației trebuie să identifice, de asemenea, dacă au fost evaluate elementele existente pentru a sprijini punerea în aplicare a intervenției și dacă o analiză de fezabilitate a precedat alegerea intervenției. Strategiile de creștere a accesului la lucrătorii din domeniul sănătății în zonele insuficient deservite necesită participarea părților interesate din diferite sectoare. Prin urmare, printre întrebările care trebuie adresate se numără: au fost instituite și utilizate mecanisme de implicare a mai multor părți interesate, au fost analizate cadrele de reglementare înainte de intervenție, au fost calculate costurile intervenției și au fost considerate accesibile (disponibilitatea fondurilor), a fost analizată capacitatea organizațională de a sprijini punerea în aplicare a acesteia? În această etapă, Cadrul de acțiune privind resursele umane pentru sănătate este un instrument recunoscut care poate fi utilizat pentru a ghida analiza situației (Fig. 2).21 Acesta cuprinde dimensiuni ale sistemului de sănătate, cum ar fi politica, finanțele, educația, parteneriatul, conducerea și sistemele de gestionare a resurselor umane.

Fig. 2. Cadrul de acțiune adaptat privind resursele umane pentru sănătate20

HRMS, sisteme de gestionare a resurselor umane.

La sfârșitul acestei etape, se poate propune o strategie pentru a aborda nevoia percepută de lipsă de acces la lucrătorii din domeniul sănătății în zonele insuficient deservite și de distribuție defectuoasă a lucrătorilor din domeniul sănătății. O astfel de strategie poate fi în unul sau mai multe dintre următoarele domenii tematice: educație, reglementare, financiar și/sau management și sprijin, descrise în altă parte.3

Implementare

Atunci când se evaluează implementarea unei intervenții, întrebările pot include: activitățile s-au desfășurat conform planului, au avut loc schimbări în capacitatea de implementare sau în context care au influențat implementarea componentelor intervenției? Au avut loc schimbări în ceea ce privește implicarea și angajamentul părților interesate? Care dintre ele și de ce? A fost întreprinsă vreo acțiune de adaptare a intervenției la aceste schimbări? Ce s-a făcut și de ce? Sau de ce nu s-a întreprins nicio acțiune? Monitorizarea progresului în implementare poate fi informată prin colectarea și analiza sistematică a unui set de indicatori cheie, care sunt discutați în continuare în acest document.

Rezultate

Rezultatele intervenției pot fi evaluate la diferite niveluri (Fig. 1): realizări, rezultate intermediare, rezultate și impact. Printre întrebările care trebuie adresate se numără: a obținut intervenția rezultatele preconizate la nivelul realizărilor, al rezultatelor sau al impactului? Este intervenția durabilă? Care au fost factorii contextuali (politici, economici, sociali sau organizaționali) care au influențat rezultatele?

Nivelul „output-urilor” este efectul direct, atribuibil intervenției, cum ar fi creșterea atractivității zonelor și/sau a profesiei, îmbunătățirea recrutării și desfășurării și creșterea retenției lucrătorilor din domeniul sănătății în acele zone.

Nivelul „rezultatelor” intermediare este cel al îmbunătățirii performanței personalului sanitar, ale cărui dimensiuni au fost descrise în Raportul privind sănătatea mondială 2006 ca fiind „disponibilitate, competență, capacitate de reacție și productivitate”.10 Unele intervenții de atragere și retenție pot avea un efect direct și asupra acestor dimensiuni. De exemplu, schimbările în programele de studii din mediul rural pot îmbunătăți competențele pentru a aborda problemele de sănătate din mediul rural, iar stimulentele financiare bazate pe performanță pot îmbunătăți productivitatea. Cu toate acestea, deseori, performanța îmbunătățită a forței de muncă din domeniul sănătății nu poate fi atribuită doar intervențiilor de retenție, deoarece există mulți alți factori care contribuie, cum ar fi strategiile educaționale sau reformele de gestionare a sectorului sanitar.

Nivelul „rezultatelor” este cel al creșterii performanței sistemelor de sănătate, măsurată prin creșterea gradului de acoperire și de utilizare a serviciilor, precum și prin îmbunătățirea capacității de reacție. Îmbunătățirea performanței forței de muncă din domeniul sănătății ar putea contribui la îmbunătățirea performanței sistemului de sănătate, dar și o serie de alți factori pot contribui, de asemenea, la aceasta, cum ar fi disponibilitatea medicamentelor, a infrastructurii și a echipamentelor.22

În cele din urmă, nivelul de „impact” este înțeles ca fiind efectul asupra rezultatelor în materie de sănătate și o stare de sănătate îmbunătățită, precum și alte efecte neașteptate asupra comunităților insuficient deservite (de exemplu, atragerea/reținerea altor profesioniști sau servicii). Acest lucru nu poate fi atribuit în mod direct intervențiilor de retenție, deoarece simpla disponibilitate a lucrătorilor din domeniul sănătății nu poate îmbunătăți în mod direct rezultatele în materie de sănătate în absența unor componente eficiente, cum ar fi aprovizionarea cu medicamente, facilități funcționale și bune practici clinice.9 Dar o forță de muncă din domeniul sănătății performantă este o componentă semnificativă a unui sistem de sănătate puternic care, împreună cu alți factori sociali determinanți, poate duce la îmbunătățirea stării de sănătate.22

Evaluările oricărei intervenții de atragere și păstrare a forței de muncă trebuie să ia în considerare factorii contextuali care pot explica de ce și cum astfel de intervenții au obținut realizările, rezultatele și impactul dorit, și anume contextul social, economic și politic. Aceasta include o analiză a părților interesate, inclusiv a bazelor de putere și a intereselor respective ale acestora, precum și o analiză a capacității sectorului sănătății de a pune în aplicare. Evaluările ar trebui să utilizeze atât metode calitative, cât și cantitative pentru a măsura rezultatele și impactul, dar și pentru a analiza procesele politice formale și informale care însoțesc elaborarea și punerea în aplicare a intervențiilor. În mod ideal, pentru a afla dacă o intervenție de atragere și păstrare a forței de muncă funcționează sau nu, ar fi necesar un studiu controlat randomizat cu un grup de control adecvat, dar acest lucru ar putea să nu fie fezabil sau etic în scenariul politic din „viața reală”. În plus, lanțurile cauzale sunt adesea complexe în intervențiile în domeniul sănătății publice, ceea ce face ca rezultatele studiilor controlate randomizate să fie supuse modificării efectului în diferite populații.20 Se pot lua în considerare, de asemenea, metode observaționale alternative, cum ar fi modelele de tip „înainte și după” și de plauzibilitate, având grijă să se documenteze și să se controleze factorii contextuali în mod corespunzător.20,23 Studiile cu modele de adecvare și de plauzibilitate pot îmbunătăți atât validitatea internă, cât și cea externă a studiilor controlate randomizate, iar studiile de plauzibilitate sunt adesea singura opțiune fezabilă pentru a obține dovezi valide de impact atunci când se încearcă evaluarea intervențiilor pe scară largă.23

Monitorizare

Cadrul prezentat în Fig. 1 propune un instrument de ghidare a monitorizării intervențiilor de creștere a accesului la asistenții medicali în zonele insuficient deservite. În fiecare etapă a procesului de punere în aplicare, sunt propuși indicatori pentru a evalua dacă punerea în aplicare este pe drumul cel bun.

Indicatorii de monitorizare în etapa de proiectare ar trebui să fie cei care vor permite o descriere detaliată a stocurilor și a fluxurilor de lucrători din domeniul sănătății între sectoare, categorii de vârstă și sex, zone geografice și profesii. Descrierea detaliată a acestor indicatori, precum și a surselor de date pentru monitorizarea forței de muncă din domeniul sănătății, sunt descrise în altă parte.7

Atunci când se monitorizează punerea în aplicare a intervențiilor, este necesară colectarea sistematică a datelor privind activitățile planificate, prin revizuirea constantă a capacității de producție, precum și a capacității de organizare și de gestionare. Monitorizarea implementării necesită, de asemenea, urmărirea schimbărilor în context și a părților interesate, pentru a putea adapta intervențiile atunci când este necesar.

În ceea ce privește monitorizarea rezultatelor intervenției, la nivelul „realizărilor” este important să se monitorizeze dacă sunt atinse dimensiunile de „atractivitate”, „angajare/recrutare”, „desfășurare” și „retenție”. Indicatorii de monitorizare a progreselor în ceea ce privește aceste dimensiuni pot include, de exemplu, schimbări în intențiile studenților sau ale lucrătorilor din domeniul sănătății de a se muta, de a locui sau de a părăsi zonele insuficient deservite (atractivitate). Posturile finanțate disponibile în zonele insuficient deservite pot fi un indicator al implicării efective, în timp ce numărul de lucrători din domeniul sănătății recrutați și modificările ratelor de posturi vacante pot fi indicatori ai desfășurării și recrutării efective. În cele din urmă, efectele unei intervenții asupra retenției pot fi măsurate prin durata în post, rotația personalului, absenteismul, indicele de stabilitate sau chiar ratele de supraviețuire.24,25

La nivelul „rezultatelor”, se propune monitorizarea progreselor privind îmbunătățirea performanțelor forței de muncă din domeniul sănătății și a performanțelor sistemelor de sănătate, prin intermediul dimensiunilor și indicatorilor propuși de The world health report 2006 (tabelul 1).10 După cum s-a spus anterior, evaluarea impactului pe termen lung al intervențiilor în domeniul resurselor umane asupra rezultatelor în materie de sănătate ar trebui să se facă în contextul mai larg al factorilor care influențează starea de sănătate.

• Tabelul 1. Dimensiuni și indicatori pentru evaluarea performanței forței de muncă din domeniul sănătății11
  html, 2kb

Eficacitatea intervențiilor de atragere și de păstrare a forței de muncă poate fi măsurată doar la nivelul realizărilor și, într-o anumită măsură, la nivelul rezultatelor. În plus, punerea în aplicare a intervențiilor de retenție a resurselor umane poate dura mai mulți ani înainte de a se vedea rezultatele, de exemplu în cazul creării de noi școli în zonele rurale sau al implementării unor sisteme de stimulente financiare. Pentru a monitoriza progresul acestor intervenții în ceea ce privește creșterea atractivității, îmbunătățirea recrutării și a duratei de ședere, creșterea disponibilității, îmbunătățirea competenței, a productivității și a capacității de reacție, sunt necesare sisteme puternice de informații privind resursele umane, legate de sistemele naționale de informații din domeniul sănătății, precum și parametri sau indicatori clar definiți și conveniți. Tabelul 2 face o încercare de a avansa un set de întrebări și indicatori-cheie care să fie utilizați la evaluarea și monitorizarea intervențiilor de retenție pentru resursele umane din domeniul sănătății.

• Tabelul 2. Întrebări și indicatori propuși pentru evaluarea și monitorizarea intervențiilor de creștere a accesului la lucrătorii din domeniul sănătății în zonele insuficient deservite
  html, 3kb

Cadrul conceptual prezentat aici trebuie să fie pilotat pe scară largă și va fi rafinat prin contribuții suplimentare din diferite surse. Există planuri în curs de desfășurare pentru aplicarea acestuia în mai multe țări care sunt în curs de elaborare și punere în aplicare a strategiilor de atragere și de păstrare a forței de muncă în zonele insuficient deservite. De asemenea, se vor depune eforturi pentru a se asigura că instrumentul de evaluare este ușor de utilizat. De dragul argumentației, în caseta 1 este prezentat un exemplu ipotetic de utilizare potențială a acestuia.

Calea de urmat

Acest cadru propune o abordare comună pentru a facilita evaluarea și monitorizarea intervențiilor de creștere a accesului la lucrătorii din domeniul sănătății în zonele insuficient deservite. Acesta sugerează că trebuie utilizată o abordare cuprinzătoare pentru proiectarea, punerea în aplicare, monitorizarea, evaluarea și revizuirea unor astfel de intervenții. Cadrul nu se dorește a fi prescriptiv și poate fi aplicat în mod flexibil la contextul fiecărei țări. Se speră că acesta va promova utilizarea unei înțelegeri/logici comune cu privire la modul în care funcționează intervențiile de atragere și de păstrare a forței de muncă, utilizând o perspectivă sistemică. Acesta pornește de la un set comun de indicatori, care permit compararea între diverse cazuri și facilitează examinarea studiilor publicate. Ca atare, poate fi utilizat pentru a monitoriza și evalua intervențiile, fie folosind o abordare de evaluare bazată pe metodă, fie o abordare de evaluare bazată pe teorie, cu un set specific de indicatori.

Finanțare:

Această lucrare a fost finanțată de Organizația Mondială a Sănătății, Sisteme și servicii de sănătate, Departamentul de Resurse Umane pentru Sănătate, Unitatea de migrație și retenție a forței de muncă din domeniul sănătății, Geneva, Elveția. Sprijin suplimentar a fost primit de la Centrul de Colaborare al OMS privind Resursele Umane pentru Sănătate de la Institutul Regal Tropical (KIT), Țările de Jos.

Interesele concurente:

Nici unul declarat.

• Grobler L, Marais BJ, Mabunda SA, Marindi PN, Reuter H, Volmink J. Intervenții pentru creșterea proporției de profesioniști din domeniul sănătății care practică în zonele rurale și în alte zone insuficient deservite. Cochrane Database Syst Rev 2009; 1: CD005314- pmid: 19160251.
• Wilson NW, Couper ID, De Vries E, Reid S, Fish T, Marais BJ. O analiză critică a intervențiilor pentru a remedia distribuția inechitabilă a profesioniștilor din domeniul sănătății în zonele rurale și îndepărtate. Rural Remote Health 2009; 9: 1060- pmid: 19530891.
• Dolea C, Stormont L, Braichet J-M. Strategii evaluate pentru a crește gradul de atragere și retenție a lucrătorilor din domeniul sănătății în zonele rurale și îndepărtate. Bull World Health Organ 2010; 88: 379-385.
• Comitetul de asistență pentru dezvoltare. Glosar de termeni-cheie în domeniul evaluării și al gestionării bazate pe rezultate. Paris: Organizația pentru Cooperare și Dezvoltare Economică; 2002. Disponibil la: http://www.oecd.org/dataoecd/29/21/2754804.pdf .
• Leeuw F, Vaessen J. Impact evaluations and development: Orientări NONIE privind evaluarea impactului. Washington, DC: The Network of Networks on Impact Evaluation; 2009. Disponibil la: http://siteresources.worldbank.org/EXTOED/Resources/nonie_guidance.pdf .
• White H. Theory-based impact evaluation: principles and practice. New Delhi: Inițiativa internațională pentru evaluarea impactului (3ie); 2009.
• Dal Poz M, Gupta N, Quain E, Soucat ALB. Manual de monitorizare și evaluare a resurselor umane pentru sănătate – cu aplicații speciale pentru țările cu venituri mici și medii. Geneva: Organizația Mondială a Sănătății; 2009.
• Mills A, Gilson L, Hanson K, Palmer N, Lagarde M. What do we mean by rigorous health-systems research? Lancet 2008; 372: 1527-9 doi: 10.1016/S0140-6736(08)61633-5 pmid: 18984174.
• Anand S, Bärnighausen T. Human resources and health outcomes: cross-country econometric study. Lancet 2004; 364: 1603-9 doi: 10.1016/S0140-6736(04)17313-3 pmid: 15519630.
• Raportul privind sănătatea mondială 2006: Să lucrăm împreună pentru sănătate. Geneva: Organizația Mondială a Sănătății; 2006.
• Peters DH, El-Saharty S, Siadat B, Janovsky K, Vujicic M, editori. Îmbunătățirea furnizării serviciilor de sănătate în țările în curs de dezvoltare: de la dovezi la acțiune. Washington, DC: Banca Mondială; 2009.
• Termeni de referință pentru o evaluare independentă a impactului Programului de resurse umane de urgență din Malawi. Lilongwe: Departamentul pentru Dezvoltare Internațională (Regatul Unit); 2009.
• Dieleman M, Gerretsen B, van der Wilt GJ. Intervenții de gestionare a resurselor umane pentru a îmbunătăți performanța lucrătorilor din domeniul sănătății în țările cu venituri mici și mijlocii: o analiză realistă. Health Res Policy Syst 2009; 7: 7- doi: 10.1186/1478-4505-7-7-7 pmid: 19374734.
• Dieleman MA, Kane S, Zwanikken P, Gerretsen B. Identificarea modelelor în studiile de intervenție de retenție: revizuirea dovezilor dintr-o perspectivă realistă. Geneva: Organizația Mondială a Sănătății; 2009.
• Fogarty L, de Vries D, Reavely E, Bunch E. Indicatori pentru evaluarea resurselor umane pentru consolidarea capacităților în domeniul sănătății. În: A: Evaluation 2009: context and evaluation, American Evaluation Association, Orlando, 11-14 noiembrie 2009.
• Bristow G, Farrington J, Shaw J, Richardson T. Developing an evaluation framework for crosscutting policy goals: the Accessibility Policy Assessment Tool. Environ Plan A 2009; 41: 48-62 doi: 10.1068/a4092.
• Grupul de lucru pentru monitorizare și evaluare al Parteneriatului internațional pentru sănătate și al inițiativelor conexe (IHP+). Monitorizarea performanțelor și evaluarea progreselor în cadrul extinderii pentru o sănătate mai bună: un cadru comun propus. Geneva: Organizația Mondială a Sănătății; 2009. Disponibil la: http://www.internationalhealthpartnership.net//CMS_files/documents/a_proposed_common_framework_EN.pdf .
• Codjia L, Jabot F, Dubois H. Evaluation du programme d’appui à la médicalisation des aires de santé rurales au Mali. Geneva: Organizația Mondială a Sănătății; 2008. În limba franceză.
• Lemiere C, Herbst C, Jahanshani N, Smith A, Soucat A. Reducing geographical imbalances of health worker distribution: what works, what does not and why? O perspectivă a pieței forței de muncă a disparităților urbane-rurale în domeniul sănătății, soluție politică și experiențe în Africa Subsahariană. Washington, DC: Banca Mondială; 2009.
• Habicht J-P, Victora CG, Vaughan JP. Modele de evaluare pentru adecvarea, plauzibilitatea și probabilitatea performanței și impactului programelor de sănătate publică. Int J Epidemiol 1999; 28: 10-8 doi: 10.1093/ije/28.1.10 pmid: 10195658.
• Cadrul de acțiune privind resursele umane pentru sănătate (HRH) . Disponibil la: http://www.capacityproject.org/framework/ .
• Everybody’s business: consolidarea sistemelor de sănătate pentru a îmbunătăți rezultatele în domeniul sănătății. Geneva: Organizația Mondială a Sănătății; 2007. Disponibil la: http://www.who.int/healthsystems/strategy/everybodys_business.pdf .
• Victora CG, Habicht JP, Bryce J. Evidence-based public health: moving beyond randomized trials. Am J Public Health 2004; 94: 400-5 doi: 10.2105/AJPH.94.3.400 pmid: 14998803.
• Buchan J. The benefits of AHP workforce stability. Edinburgh: Scottish Executive Health Department; 2005.
• Rabinowitz HK, Diamond JJ, Markham FW, Rabinowitz C. Retenția pe termen lung a absolvenților unui program de creștere a ofertei de medici de familie din mediul rural. Acad Med 2005; 80: 728-32 doi: 10.1097/00001888-200508000-00004 pmid: 16043525.

.