Evaluarea de impact. Contrafactuală. S-au implementat programe operaționale, s-au investit bani europeni prin intermediul proiectelor co-finanțate, s-au raportat realizări... Dar care este impactul acestora asupra societății? Cum identificăm efectul net, faptul că schimbările, îmbunătățirile se datorează proiectelor, programelor finanțate din instrumente structurale? Care sunt diferențele pe care le-au produs aceste investiţii?
Autoritatea de Management a Programului Operațional Regional, prin Biroul Evaluare Program, a încercat să afle răspunsul la aceste întrebări cu sprijinul experţilor independenţi, prin realizarea unei serii de evaluări de impact, primele de acest gen din România.
Ce sunt evaluările de impact? Evaluarea impactului este menită să răspundă unor întrebări cheie pentru elaborarea de politici bazate pe dovezi: ce funcţionează, ce nu funcţionează, de ce şi pentru câtă vreme/în ce condiţii? Studiile identifică schimbările, rezultatele care pot fi atribuite direct unui program, unui proiect sau unor politici. Analiza contrafactuală este o metodă complexă de evaluare a impactului, prin care se cuantifică efectul net al intervențiilor, în urma unor comparații dintre unității sprijinite și cele care nu au beneficiat de fonduri UE. Avantajele aplicării metodei contrafactuale: prin intermediul ei este posibilă analiza comparativă a efectelor intervențiilor oferind atât informaţii asupra efectului net al intervenţiei, cât şi input-uri pentru analiza cost-beneficiu a DMI-ului. Pentru identificarea impactului este nevoie de trecerea a minimum un an de la finalizarea proiectelor, astfel nu toate proiectele finanțate din POR 2007-2013 au constituit subiectul acestei evaluări. Noile cerinţe cu privire la evaluare impun necesitatea analizei efectelor și măsurarea impactului, acestea fiind fundamentale pentru evaluări.
În urma aplicării diferitelor metode bazate pe teoria schimbării şi metode contrafactuale concluziile vizează impactul net al intervențiilor POR, independent de efectele altor factori contextuali.
Concluziile evaluării contrafactuale a impactului Evaluările de impact realizate de AM POR au avut ca principal obiectiv identificarea diferențelor pe care aceste intervenții le-au produs în cadrul grupurilor țintă. Pentru prima dată în România s-au folosit METODE CONTRAFACTUALE de evaluare a impactului.
4
Planuri integrate de dezvoltare urbană Evaluarea de impact a domeniului major de intervenție (DMI) 1.1 Intervenția a urmărit: Dezvoltarea, regenerarea şi creşterea rolului economic şi social al oraşelor, din perspectiva centrelor urbane, polilor de dezvoltare urbană și polilor de creștere; Întâmpinarea nevoilor orașelor din România, cu scopul de a construi un sistem urban național durabil și competitiv; Creșterea densității economice și demografice a principalelor centre urbane și facilitarea legăturii acestora cu orașele mai mici. Perioada analizată: 2008 - august 2014 Numărul de proiecte analizate - 192 de proiecte Contribuția FEDR - 1,26 miliarde Euro
CONSTATĂRI: Intervenţia a generat îmbunătățiri la nivelul infrastructurii urbane de bază, infrastructurii sociale: A contribuit la creşterea calității vieții cetățenilor, mobilității, accesibilității și sentimentului de siguranță publică; Realizarea infrastructurii urbane a generat noi locuri de muncă; A crescut atractivitatea centrelor urbane finanțate comparativ cu centrele urbane nefinanțate; A crescut rata de înscriere a populației în învățământul liceal; Polii de creștere, polii de dezvoltare urbană și centrele urbane au contribuit la promovarea rețelei urbane.
5
Investițiile în infrastructura de conectivitate produc efect net pozitiv asupra dezvoltării economice și sociale; Abordarea integrată - participarea și consultarea cetățenilor, asociațiilor de interese, ONG-urilor, actorilor economici și universităților; Abordarea policentrică sprijină dezvoltarea sustenabilă a tuturor regiunilor; Implicarea mai multor orașe în derularea proiectelor a îmbunătățit capacitatea administrativă și de programare a autorităților locale.
Recomandări Continuarea acestor intervenții în noua perioadă de programare, incluzând şi alte zone urbane; Corelarea lansării apelurilor de proiecte la nivel guvernamental și implementarea intervențiilor pentru a facilita intervențiile integrate la nivelul comunității, în acord cu nevoile beneficiarilor; Analizarea unor indicatori socio-economici suplimentari în vederea clasificării zonelor de intervenție eligibile; Diversificarea strategică a intervențiilor urbane, bazată pe diferite nevoi socio-economice ale orașelor; Utilizarea unor instrumente financiare, cum ar fi Investițiile Teritoriale Integrate (ITI) și dezvoltarea locală plasată sub responsabilitatea comunității (CLLD); Îmbunătățirea capacității administrative a resurselor umane la nivel local; Includerea dimensiunii protecției mediului și eficienței energetice în cadrul viitoarelor politici de dezvoltare urbană.
6
Reabilitarea/modernizarea/echiparea infrastructurii serviciilor de sănătate Evaluarea de impact a domeniului major de intervenție (DMI) 3.1
Intervenția a urmărit: Îmbunătățirea calității serviciilor de asistență medicală și distribuirea echilibrată la nivel regional, în vederea asigurării accesului egal al populației la serviciile de sănătate; Dezvoltarea unui sistem modern pentru tratament și prevenire, accesibil tuturor categoriilor de persoane prin reabilitarea, modernizarea și echiparea spitalelor județene; Reabilitarea, modernizarea și dotarea ambulatoriilor cu aparatură de investigaţii; Dezvoltarea serviciilor ambulatorii, mai ales pentru pacienţii aflaţi în zone dezavantajate, în vederea soluţionării cazurilor în ambulatoriile modernizate. Perioada analizată: 2008 - 2014 Numărul de proiecte analizate - 104 proiecte, din care 41 proiecte finalizate Contribuția FEDR - 191,02 mil. Euro
CONSTATĂRI: Creşterea numărului de utilizatori de la 5.700 în 2008 la 8.314 în 2014; Creşterea satisfacţiei utilizatorilor privind accesibilitatea şi calitatea serviciilor medicale; Efecte pozitive în ceea ce priveşte dezvoltarea competenţelor personalului medical; Efectele intervenţiei sunt sustenabile şi după finalizarea proiectelor.
7
Recomandări Dezvoltarea parteneriatelor (autorităţi locale,
Continuarea finanţărilor în
personal medical) și implicarea potențialilor beneficiari
infrastructura de sănătate şi
în procesul de planificare;
facilitarea accesului la servicii medicale integrate;
Analiza riguroasă a nevoilor este o condiţie pentru
Este oportună evaluarea sustenabilității intervenției în anii
apariţia efectelor;
viitori din perspectiva îmbunătăţirii accesului la serviciile
Coordonarea eficientă a personalului medical pe
medicale, precum şi investigarea percepţiei pacienților.
durata implementării proiectului; Existenţa unui plan de investiţii privind modernizarea ambulatoriilor şi achiziţia de echipamente performante.
8
Reabilitarea/modernizarea/dezvoltarea şi echiparea infrastructurii serviciilor sociale Evaluarea de impact a DMI 3.2
Intervenția a urmărit: Îmbunătățirea calității și capacității infrastructurii serviciilor sociale; Asigurarea unor condiții sociale și îmbunătăţirea calităţii vieții ("principiul ușilor deschise" - toate serviciile furnizate sunt accesibile grupurilor); Oferirea de noi oportunități de incluziune socială și inserție pe piața muncii. Perioada analizată: 2008 - 2012 Numărul de proiecte analizate - 35 proiecte analizate Contribuția FEDR - 82 milioane euro
CONSTATĂRI: Număr de utilizatori - performanţă mai bună a beneficiarilor în comparaţie cu cea a non-beneficiarilor; Creşterea numărului de utilizatori în centrele rezidenţiale faţă de celelalte categorii de centre - performanţă mai bună a beneficiarilor în comparaţie cu cea a non-beneficiarilor; Număr de angajaţi echivalenţi cu normă întreagă - performanţă mai bună a beneficiarilor în comparaţie cu cea a non-beneficiarilor. Creșterea, chiar și redusă, a angajaților înseamnă că infrastructurile de servicii sociale au acoperit cheltuielile aferente personalului nou și au adaptat modul de organizare în consecință; S-au eliberat membrii activi ai familiilor, preocupați cu îngrijirea persoanelor aflate în întreținere, în timpul programului de lucru;
9
Calitate îmbunătăţită a serviciilor oferite, creșterea numărului de utilizatori, îmbunătățirea dotărilor și achiziționarea de echipamente moderne în cadrul centrelor sociale; Nivel ridicat de satisfacție a utilizatorilor, precum şi o percepție larg răspândită de îmbunătățire în ceea ce privește serviciile, spațiile, instalațiile și utilitățile.
Recomandări Identificarea nevoilor – s-au promovat mai ușor
Necesitatea unei analize teritoriale pentru a examina
investițiile bazate pe o evaluare exactă a nevoilor
concentrarea efectelor;
potențialilor utilizatori;
Monitorizarea rezultatului intervențiilor privind numărul
Colaborarea strânsă în elaborarea proiectului (la nivelul
de angajați;
infrastructurii de servicii sociale) a contribuit la reducerea Valorificarea lecțiilor învățate, promovarea schimbului de dificultăților administrative;
experiențe, crearea de rețele între centre în vederea
Gestionarea eficientă a resurselor umane, asocierea cu
evaluării sustenabilității proiectului.
alte fonduri, care sprijină formarea profesională și activitățile sociale ale centrelor (ex. cele finanţate prin FSE); Capacitatea de a stabili și consolida rețele de colaborare s-au identificat resurse financiare suplimentare și s-au organizat acţiuni de caritate cu implicarea voluntarilor; Promovarea colectării de surse private prin identificarea de sponsori şi de cooperare între mediul public și privat.
10
Îmbunătățirea dotării cu echipamente a bazelor operaţionale pentru intervenții în situații de urgență Evaluarea de impact a domeniului major de intervenție (DMI) 3.3 Intervenția a urmărit: Reducerea timpului de intervenție pentru acordarea primului ajutor calificat și pentru intervenții în situaţii de urgență; Achiziționarea de vehicule și echipamente specifice pentru bazele operaţionale regionale și județene, destinate intervențiilor în situații de urgență.
Perioada analizată: 2008 - 2014 Numărul de proiecte analizate - 22 proiecte, din care 14 proiecte finalizate Contribuția FEDR - 86,63 mil. Euro
11
CONSTATĂRI: Reducerea timpului de intervenție în cazul situațiilor de urgență - timpul mediu de răspuns al unităţilor în mediul rural este de 22 de minute și 51 de secunde (față de valoarea iniţială de 30-45 de minute), iar în mediul urban este de 10 minute şi 51 de secunde (valoarea iniţială fiind de 20 de minute); Creșterea nivelului de siguranță publică, a calității primului ajutor și a serviciilor din zonele izolate și defavorizate; Consolidarea unei organizări integrate și cooperarea regională în asigurarea răspunsului la situaţii de urgentă.
Recomandări Evaluarea nevoilor la nivel regional şi efectuarea unei
Necesitatea reevaluării cadrului legislativ în vederea
analize aprofundate a datelor furnizate de ISU;
corelării achizițiilor publice la nivelul asociaţiilor de
Asigurarea personalului calificat - resursa umană
dezvoltare intercomunitară;
implicată este un factor cheie pentru obținerea
Efectuarea achizițiilor de echipamente la nivel central
rezultatelor;
pentru asigurarea omogenităţii dotărilor și costurilor mai
Dezvoltarea și întărirea parteneriatelor și
reduse;
colaborărilor dintre autoritățile locale și inspectoratele
Finanțarea unei intervenții similare cu DMI 3.3, pentru
pentru situații de urgență.
asigurarea continuității și coerenței efectelor; Activități de formare a personalului pentru primul ajutor și situații de urgență.
12
Reabilitarea/modernizarea/dezvoltarea şi echiparea infrastructurii educaţionale preuniversitare, universitare şi a infrastructurii pentru formarea profesională continuă Evaluarea de impact a DMI 3.4 Intervenția a urmărit: Îmbunătăţirea calităţii infrastructurii de educaţie, a dotării şcolilor, a structurilor de cazare pentru studenţi şi a centrelor pentru formare profesională în vederea asigurării unui proces educaţional la standarde europene şi a creşterii participării populaţiei şcolare şi a adulţilor la procesul educaţional.
Perioada analizată: 2008 - septembrie 2013 Numărul de proiecte analizate - 146 proiecte analizate Contribuția FEDR - 68,9 milioane Euro.
CONSTATĂRI: Îmbunătăţirea calităţii infrastructurii de educaţie - investițiile au rezultate bune acolo unde resursele alternative (bugetul local și bugetul național) nu permit finanțări de amploare; Facilitarea accesului la educație, în special a copiilor/tinerilor din mediul rural și din alte medii sociale vulnerabile, dar și alți factori (subvenționarea prețului chiriei) sunt hotărâtori în atingerea efectului urmărit; Facilitarea participării elevilor cu diferite dizabilități la educație reprezintă un efect direct al intervenţiei, atât prin crearea unui mediu de învățare mai prietenos, adaptat pentru elevii cu nevoi educaționale speciale, cât și prin dotarea cu echipamente și materiale de învățare moderne; Creșterea performanței școlare a elevilor din ciclul gimnazial din mediul rural;
13
Îmbunătățirea condițiilor de studiu poate fi o motivare suplimentară pentu performanța școlară - în colegiile naționale și învățământul liceal real, se observă creșterea performanței școlare a elevilor din ciclul secundar (liceal); Efect „propagat” al rezultatelor intervenţiilor - de modernizarea spațiilor de învățământ beneficiază și alți elevi din localitate care nu sunt înscriși în școala vizată de investiții (laboratoare moderne de limbi străine, științe și informatică, centre de artă sau facilități pentru practicarea sporturilor). Acest efect de „propagare” se realizează fie prin participarea la consorții școlare, fie prin parteneriate punctuale realizate de școli, cu sprijinul autorităților locale. Investițiile în infrastructura educațională generează impact ridicat, în special: În zonele în care accesul și participarea la educație sunt problematice (mediul social izolat, localitățile/zonele/cartierele cu număr mare de elevi din grupuri vulnerabile); În învățământul profesional și tehnic (prin creșterea calității educației profesionale și tehnice și o mai bună adaptare a acesteia la cerințele pieței muncii); În cazul dezvoltării de campusuri universitare și preuniversitare (care răspund atât nevoilor educaționale, cât și nevoilor locative ale elevilor și studenților, crescând astfel accesul la educație).
14
Lecții învățate Intervențiile realizate în comunitățile cu o tendință
Stabilirea unor relații contractuale de lungă durată
demografică ascendentă elimină riscul lipsei de
cu proiectanții investițiilor, astfel încât eventualele
eficiență în cheltuirea resurselor;
modificări în proiectul tehnic să se poată realiza fără
Investițiile în extinderi, inclusiv investițiile în cantine
a fi necesar un nou contract;
școlare, spații destinate programelor „școală după
Crearea unor spații suplimentare destinate
școală” și spațiile destinate activităților extrașcolare;
activităților educaționale extracurriculare oferă
Investițiile realizate în școlile speciale generează
posibilitatea dezvoltării școlilor (grădinițe, creșe,
rezultate vizibile prin facilitarea accesului și
cursuri, activități de formare continuă);
participării la educație a elevilor;
Continuarea implicării comunității școlare în
Consorțiile școlare sprijină transferabilitatea efectelor
planificarea intervențiilor POR, includerea în echipele
proiectelor;
de implementare a reprezentanților școlilor
S-au dovedit de succes proiectele care au planificat
beneficiare;
de la început perioade de implementare mai lungi
Promovarea proiectelor prin organizarea unor evenimente
pentru realizarea procedurilor de achiziţii publice;
de informare în parteneriat cu Inspectoratele Școlare
Investițiile complementare cu alte proiecte,
Județene;
parteneriate cu agenți economici locali, realizate
Îmbunătățirea cooperării factorilor implicați în derularea
printr-o abordare sinergică a proiectelor în programe proiectelor. de dezvoltare locală mai largi determină transferabilitatea efectelor proiectelor.
15
Dezvoltarea durabilă a structurilor de sprijinire a afacerilor de importanță regională și locală Evaluarea de impact a domeniului major de intervenție (DMI) 4.1 Intervenția a urmărit: Crearea şi modernizarea structurilor regionale şi locale de sprijinire a afacerilor, având ca scop atragerea investiţiilor, revigorarea şi dezvoltarea economiilor locale şi regionale; Dezvoltarea antreprenoriatului în România, în acord cu Directivele Strategice Comunitare 2007-2013; Oferirea de noi oportunități de inserție pe piața muncii în cadrul structurilor de sprijinire a afacerilor; Creşterea atractivităţii regiunilor pentru investiţii în activităţi economice şi sociale; Creşterea gradului de competitivitate a României. Perioada analizată: 2010 - 2014 Numărul de proiecte analizate - 99 proiecte, din care 27 proiecte finalizate Contribuția FEDR - 209,94 mil. Euro
CONSTATĂRI: Intervenția a asigurat resurse financiare în timpul crizei economice, atunci când condițiile pe piața de credit erau dificile; Au fost create 2.105 locuri de muncă în structurile de sprijinire a afacerilor; Un centru găzduieşte, în medie, 9 microîntreprinderi şi 6 IMM-uri şi oferă 5 servicii/funcţii; Au fost create multiple locuri de muncă: personal operativ – în medie, 9 persoane pe centru şi personal administrativ – în medie, 4 persoane pe centru; Centrele de afaceri au investit în dezvoltarea abilităților resurselor umane; Media bugetului centrelor de afaceri este de aproximativ 3,7 milioane lei; S-au îmbunătățit serviciile oferite IMM-urilor găzduite, prin echiparea de noi birouri și dezvoltarea de rețele pentru activitățile antreprenoriale; Au fost facilitate integrarea diferitelor servicii de afaceri în același centru și dezvoltarea capacităţii beneficiarilor de a oferi noi servicii.
16
Recomandări Sustenabilitatea centrelor este asigurată prin serviciile
Sprijinirea serviciilor de inovare și transfer tehnologic
orientate spre cerere şi inovare;
și de cunoștințe;
Este esenţială existența sistemului de rețele cu actori
Încurajarea formării rețelelor din perspectiva activității
privați și publici;
centrelor, incubatoarelor şi a acceleratoarelor de afaceri;
Cunoaşterea în profunzime a cererii teritoriale de
Acordarea sprijinului unde poate fi generată mai multă
servicii de afaceri;
valoare adăugată.
Stimularea spiritului antreprenorial prin organizarea competițiilor start-up și acordarea de premii și servicii specifice a susținut promovarea unei abordări orientate spre inovare în rândurile beneficiarilor; Experienţa și abilitățile persoanelor implicate s-au dovedit a fi axul central al mecanismului de implementare și de furnizare a serviciilor; Investiția simultană în infrastructură şi formarea personalului a produs rezultate mai bune; Stimulentele ”în termeni de grant” pentru crearea mai multor efecte asupra ocupării forţei de muncă au fost validate în termeni de eficiență.
17
Reabilitarea siturilor industriale poluate și neutilizate și pregătirea pentru noi activități Evaluarea de impact a domeniului major de intervenție (DMI) 4.2 Intervenția a urmărit: Promovarea activităților economice în siturile industriale poluate prin decontaminarea, curățarea și reabilitarea acestora pentru crearea de structuri de sprijinire a afacerilor; Reabilitarea siturilor industriale poluate şi neutilizate şi pregătirea pentru noi activităţi; Introducerea siturilor industriale în circuitul economic; Menținerea calității solului nepoluat şi prevenirea impactului negativ al siturilor industriale asupra sănătăţii umane, faunei, florei şi mediului înconjurător. Perioada analizată: 2008 - 2014 Numărul de proiecte analizate - 2 proiecte Contribuția FEDR - 26,14 mil. Euro
CONSTATĂRI: Intervenția a sprijinit investiții esențiale pentru reabilitarea și dezvoltarea economică viitoare a zonelor poluate; Intervențiile au venit în întâmpinarea nevoilor autorităților de a decontamina terenurile afectate de poluare; DMI 4.2, ca şi intervențiile POS Mediu, a fost util pentru a lansa proiecte-pilot care abordează nevoile fundamentale pentru calitatea vieţii din România și dezvoltarea economică a zonelor poluate.
18
Recomandări Principalele condiții care produc efecte intermediare
Finanțarea separată a proiectelor - decontaminarea
asupra mediului sunt depoluarea și decontaminarea,
solului și construcția de incubatoare de afaceri;
precum și reducerea folosirii resurselor naturale;
Implicarea accentuată a sferei private (parteneriat public
Co-interesarea și implicarea tuturor actorilor
privat) ar putea accelera procesul de implementare și ar
interesaţi (parteneriat public privat) catalizează
contribui la sustenabilitatea centrului de afaceri construit
sustenabilitatea structurii de afaceri, construită pe
pe terenul reabilitat;
terenul reabilitat și poate accelera procesul de
Fluidizarea procedurilor de implementare.
implementare; Se impune existenţa unei strategii sectoriale de mediu şi a unei liste a siturilor poluate.
19
Sprijinirea dezvoltării microîntreprinderilor Evaluarea de impact a DMI 4.3
Intervenția a urmărit: Sprijinirea dezvoltării microîntreprinderilor din sectorul construcţii, industrie şi servicii, situate în zonele urbane; Sprijinirea a 1500 de microîntreprinderi; Crearea a 3000 de noi locuri de muncă permanente în cadrul microîntreprinderilor sprijinite.
Perioada analizată: 2018 - august 2014 Numărul de proiecte analizate - 788 proiecte Contribuția FEDR - 210 mil. Euro
CONSTATĂRI: Creşterea capacităţii de a exploata oportunităţile de piaţă; Creșterea orientării strategice şi schimbării domeniului de activitate; Creșterea gradului de trecere de la comercializare la producţie; Creșterea calităţii producţiei şi furnizării de noi servicii; Întreprinderile beneficiare și-au mărit personalul, în medie, cu 3 noi persoane în plus faţă de întreprinderile care nu au avut finanţare; Beneficiarii proiectelor finalizate în 2009 au avut performanţe mai bune chiar şi la patru ani după finalizarea intervenţiei, menținând cu 2,4 locuri de muncă per microîntreprindere mai mult decât non-beneficiarii comparaţi; Al doilea apel de proiecte a fost mai eficient, în ceea ce priveşte crearea de locuri de muncă, datorită susținerii FEDR per loc de muncă creat.
20
Concluzii
Recomandări
S-au creat noi brand-uri și produse, s-a îmbunătățit
Promovarea activităților de formare (în special în
furnizarea de servicii şi beneficiarii au dat dovadă de
elaborarea planului de afaceri);
deschidere spre noi oportunități;
Sprijinirea constituirii în cadrul Camerelor de Comerţ şi
Solicitarea unui plan de afaceri a stimulat reorganizarea
Industrie a unor centre de help-desk pentru
generală a activităţilor microîntreprinderilor şi a asigurat
microîntreprinderi;
resursele financiare adecvate, în special în cadrul celui
Continuarea furnizării de asistență în cadrul Agenţiilor de
de-al doilea apel de proiecte;
Dezvoltare Regională ;
Cu cât microîntreprinderile au fost mai deschise către
Promovarea creării unor reţele şi schimbul de practici
piață, cu atât mai mult au fost susceptibile a fi informate
între întreprinderi;
despre DMI 4.3 și să fie finanțate;
Stabilirea unui calendar clar şi transparent pentru
Conceperea proiectului a fost o provocare, apelându-se
procesul administrativ în vederea reducerii perioadei de
la consultanți ale căror servicii nu au atins așteptările
selecţie și îmbunătăţirea grilei de evaluare;
aplicanților;
Simplificarea procedurii, utilizarea în continuare a
Principalele dificultăţi ale beneficiarilor sunt legate de
mecanismului cererilor de plată;
accesul la creditare (ex. împrumuturi şi garanţii). Criza
Criteriile de selecţie şi apelurile de proiecte ar trebui să
economică a avut un impact asupra implementării
promoveze o abordare inovatoare. (sectoare de hi-tech,
DMI 4.3, din cauza dificultăţilor sporite cu privire la
TIC, tehnologii generice esenţiale, etc.), finanţarea unor
capital şi fluxul de numerar (co-finanţare cu băncile);
etape ale lanţului inovării (instruire şi dezvoltare), care
Disponibilitatea informațiilor despre finanțări pe site-uri
sprijină microîntreprinderi performante, pentru aplicarea
relevante, apartenența la sectorul servicii
în cadrul programului Orizont 2020;
(microîntreprinderile din sectorul construcţiilor şi
O implicare mai intensă a factorilor interesaţi la nivel local
industriei au o tendinţă mai scăzută de a aplica la
şi regional pentru reducerea disparităţilor interne ca
finanțare, comparativ cu cele din sectorul serviciilor),
urmare a aplicării principiului subsidiarităţii.
precum și situația financiară bună înainte de finanțare au avut rol determinant.
21
Restaurarea și valorificarea durabilă a patrimoniului cultural și crearea/modernizarea infrastructurilor conexe Evaluarea de impact a domeniului major de intervenție (DMI) 5.1 Intervenția a urmărit: Restaurarea, valorizarea, conservarea patrimoniului cultural (clădiri istorice, monumente, muzee, teatre etc) în vederea îmbunătăţirii potențialului turismului cultural din România; Îmbunătățirea atractivității teritoriului, creșterea potențialului turistic al țării și crearea de noi locuri de muncă, precum şi generarea creșterii economice la nivel local. Perioada analizată: 2008 - 2014 Numărul de proiecte analizate - 40 proiecte Contribuția FEDR - 258,59 mil. Euro
CONSTATĂRI: Creșterea numărului de vizitatori cu 113% în obiectivele de patrimoniu cultural (de la 292.677 de vizitatori în 2008 la 623.463 în 2014); Proiectele de patrimoniu cultural național, înregistrează cele mai bune performanțe – s-a remarcat o creștere a numărului de vizitatori și o scădere a costurilor medii pe vizitator; Creşterea numărului de angajaţi cu 20,47% prin valorificarea patrimoniului cultural (de la 293 în 2008 la 353 în 2014 a numărului de angajați); Creşterea numărului de vizitatori a monumentelor și după anul 2014; Beneficiul cheie al intervenției este restaurarea patrimoniului cultural (biserici, mănăstiri, o parte din centrele istorice ale orașelor etc.).
22
Concluzii
Recomandări
Restaurarea patrimoniului cultural trebuie să aibă în
Intervențiile să aibă în vedere implicarea comunităților
vedere cele trei tipuri de monumente: patrimoniul
locale pentru a crește sustenabilitatea proiectelor și
UNESCO, patrimoniul cultural național și patrimoniul
pentru a contribui la strategia locală de dezvoltare
cultural local din mediul urban;
turistică;
Activitățile de marketing au reintrodus monumentele
Solicitarea unui plan de acţiune detaliat din partea
în circuitul turistic;
potențialilor aplicanți;
Asigurarea resurselor suplimentare din fonduri proprii
Asigurarea sustenabilității proiectelor prin integrarea
sau din alte surse de finanţare a reprezentat un atu
intervenției în contextul local și creșterea volumului de
pentru derularea activităților;
informații disponibile pentru activitățile de evaluare
Schimbul de bune practici între diferiți actori implicați
viitoare.
în sectorul turistic generează rețele multivalente de colaborare.
23
Crearea, dezvoltarea, modernizarea infrastructurii de turism pentru valorificarea resurselor naturale şi creşterea calităţii serviciilor turistice Evaluarea de impact a DMI 5.2 Intervenția a urmărit: Amenajarea obiectivelor turistice cu potențial turistic (canioane, chei, peşteri, lacuri glaciare etc.), construirea infrastructurii necesare, reabilitarea şi amenajarea căilor de acces către principalele obiective turistice naturale (refugii alpine, marcarea traseelor turistice, panouri informative, platforme de campare, posturi Salvamont); Diversificarea serviciilor turistice (ex. dezvoltarea turismului balnear, prin îmbunătăţirea, modernizarea şi dotarea bazelor de tratament, inclusiv a salinelor terapeutice, dezvoltarea reţelelor de captare şi transport a izvoarelor minerale şi saline etc.); Crearea/extinderea structurilor de agrement turistic (inclusiv cazare), în scopul creşterii numărului turiştilor şi a duratei sejurului (piscine, terenuri de mini-golf, tenis, paint-ball, turism feroviar pe linie ferată îngustă, în zonele de deal şi de munte etc.). Perioada analizată: 1 ianuarie 2017 - 31 decembrie 2014 Numărul de proiecte analizate - 43, finalizate până la data de 31 decembrie 2013 Contribuția FEDR - 68,5 milioane Euro
24
Constatări
Bune Practici
Creșterea numărului camerelor și locurilor de cazare
Construirea unei pârtii artificiale de tubing pentru
nou create;
perioada verii a determinat creșterea numărului de
Creșterea numărului de sosiri și înnoptări în unitatea
vizitatori, și veniturile IMM-ului;
de cazare;
Implementarea sinergică a proiectelor de infrastructură
Depășirea nivelului național privind gradul de ocupare
de acces (implementate de autorități publice) de cazare
a beneficiarilor;
și de agrement generează un produs turistic zonal și
Creșterea numărului de angajaţi/beneficiar IMM;
crește durata medie de ședere;
Creşterea cifrei de afaceri a beneficiarilor POR;
Diversificarea activităților de promovare crește numărul
Impact asupra dezvoltării socio-economice la nivel
turiștilor: participarea la târguri internaționale, campanii
local și zonal prin locurile de muncă create, taxele și
publicitare la nivel național și international;
impozitele virate la bugetul local, dar și prin stimularea
Organizarea de evenimente naționale și internaționale,
altor investiții și a afacerilor conexe;
furnizarea de servicii de cazare, masă, parteneriate în
Cele mai eficace proiecte sunt în oraşele mari şi în
schimbul serviciilor de promovare între infrastructurile
staţiunile de interes naţional şi local;
de agrement și de cazare;
Conceptul „integrat” al proiectului este determinant din
Numirea unei echipe dedicate asigurării calității
perspectiva impactului (combinarea activităţilor de
serviciilor furnizate de angajați, prin monitorizare,
modernizare a spaţiului de cazare cu cele de dezvoltare
instruire și training;
a unei infrastructuri de agrement);
Mecanismul de cerere de plată ce a ridicat presiunea
Trei elemente cheie, care influențează pozitiv
asupra fluxului de numerar al beneficiarilor;
impactul intervenției:
Efectuarea vizitelor de monitorizare pe perioada de
- expertiza de management strategic în domeniul
durabilitate a proiectelor.
turismului; - expertiza de management de proiect; - promovare eficace în cadrul unei strategii de marketing.
25
Promovarea potențialului turistic și crearea infrastructurii necesare, în scopul creșterii atractivității României ca destinație turistică Evaluarea de impact a domeniului major de intervenție DMI 5.3 Intervenția a urmărit: Îmbunătățirea potențialului turistic prin dezvoltarea infrastructurii necesare, crescând atractivitatea României; Promovarea potențialului turistic al României, îmbunătățind imaginea țării; Crearea Centrelor de Promovare și Informare Turistică (CPIT); Creşterea numărului de turiști; Promovarea unei oferte turistice integrate. Perioada analizată: 2008 - 2014 Numărul de proiecte analizate - 295 proiecte Contribuția FEDR - 127,31 mil. Euro
CONSTATĂRI: Numărul turiștilor sosiți în România din Uniunea Europeană a revenit la nivelul din perioada pre-criză, cu valori ușor ridicate (4,8 milioane sosiri în anul 2007 şi aproximativ 5 milioane în 2014); Creșterea scorului de rating al Strategiei de brand românesc trece de la 0,43 la 0,77; Îmbunătățirea calității și intensificarea campaniilor media și de cercetare; Intervențiile au contribuit la promovarea activităților turistice locale, generând oportunitatea de a demara proiecte similare și schimbul de bune practici din sector; Promovarea dezvoltării turismului prin centre turistice și îmbunătățirea calității serviciilor, producând efecte în special pentru turiștii selectivi.
26
Bune practici Campaniile media, precum şi site-urile destinate
Intervențiile contribuie în mod direct la dezvoltarea
potențialilor turiști au sprijinit promovarea brandului
centrului turistic, la îmbunătățirea calității
turistic;
serviciilor furnizate şi la schimbul de bune practici
Performanța actorilor turismului local este generată
între diferiții actori;
corelativ prin publicitatea în mass media la nivel
Principalii factori care au impact pozitiv asupra
regional şi naţional, activitatea de marketing,
performanței DMI 5.3 sunt: organizarea internă a
contribuția factorilor interesați de la nivel local pentru
echipelor de proiect, prin valorificarea personalului
a asigura sustenabilitatea evenimentelor în viitor;
calificat și formarea de rețele cu alte CNIPT-uri și cu actorii economici locali.
27
Recomandări Evaluarea strategieinaționale de promovare a
Implicarea în special a tour operatorilor prin evenimente
brandului turistic;
internaționale și competiții ad-hoc (foto, video etc),
Transmiterea unui mesaj specific al țării ca destinație
pentru a promova imaginea României în străinătate;
turistică, care să promoveze unicitatea naturală și
Consolidarea rețelei CNIPT prin platforme web către alți
culturală pentru ţările vizate;
parteneri din străinătate;
Derularea de campanii on-line, în mass media
Intervențiile să fie concentrate pe promovarea
specifice, în străinătate;
mediului de afaceri din domeniul turismului.
28
Recommendations
business tourism.
Conducting online campaigns in specific media and
Interventions must be focused on promoting
uniqueness to the countries concerned;
to other partners abroad;
destination that promotes natural and cultural
CNIPT network consolidation through web platforms
Sending a specific country message as a tourist
video, etc.) to promote Romania's image abroad;
brand;
international events and ad hoc competitions (photo,
strategy to promote the tourism
Involvement of tour operators in particular, through
Evaluation of the national
abroad;
28
Best practices
the project teams, by harnessing qualified personnel
sustainability of future events;
performance of KAI 5.3 are: internal organization of
contribution of local stakeholders to ensure the
The main factors that have a positive impact on the
in regional and national marketing activities, the
best practices between the various actors;
generated in correlation with: mass media advertising
provided quality of services and the exchange of
The performance of local tourism stakeholders is
of the tourist center, the improvement of the
tourists helped promote the tourism brand;
Interventions contribute directly to the development
Media campaigns, as well as the websites for potential
and networking with other National Centre for Tourism Information and Promotion sites and local business.
27
Promoting the tourism potential and setting-up the needed infrastructure in order to increase Romania’s attractiveness as tourism destination Impact assessment of Key Area of Intervention KAI 5.3 The intervention aimed: Improvement of the tourism potential through developing the necessary infrastructure, increasing the attractiveness of Romania; Promoting Romania's tourism potential, improving the country's image; Creation of Promotion and Tourist Information Centers (PTIC); Increasing the number of tourists; Promotion of an integrated travel offer. Analyzed period: 2008 - 2014 Number of projects assessed: - 295 projects ERDF contribution: - 127,31 mil. Euro
FINDINGS: The number of tourists in Romania from the European Union returned to the level of pre-crisis period, with slightly higher values (4.8 million arrivals in 2007 and about 5 million in 2014); The increase of the rating score of the Romanian brand strategy goes from 0.43 to 0.77; Improving the quality and intensifying the media campaigns and research; The interventions have helped to promote local tourism activities, generating the opportunity to start similar projects and exchange of best practices in the tourism sector; Promoting the development of tourism by developing the resort and improving service quality, producing effects especially to the selective travelers.
26
Monitoring visits carried out during the projects’ lifetime.
upgrading accommodation with the development
beneficiaries’ cash-flow;
impact (this means a combination of activities for
Payment claim mechanism relieved pressure off the
The holistic approach of the project is decisive for
and coach employees for improved quality;
and local interest;
Setting up a quality assurance team to monitor, train
implemented in big cities and resorts of national
accommodation facilities;
The most effective projects are those that were
for promotion; partnerships between leisure and
businesses ;
accommodation, food and leisure services in exchange
through stimulating other investments and related
Organizing national and international events, providing
and other dues paid to the local budget, but also
national and international advertising campaigns;
and zonal level, through the jobs created and the taxes
number of tourists: participating in international fairs,
Impact on socio-economic development at the local
Diversification of promoting activities, increases the
Increasing the turnover of the the ROP beneficiaries ;
length of stay;
Increasing the number of employees/SME beneficiary;
a regional tourism product and increase the average
ROP beneficiaries;
accommodation and leisure infrastructure, generates
Exceeding the national level on the occupancy rates of
projects (implemented by public authorities),
establishment”;
Synergistic implementation of infrastructure access
establishment and overnight stays in accommodation
for the SME;
Increasing the number of “arrivals in accommodation
increased number of visitors, hence higher income
stay units;
Building a dry tubing slope for the summer led to
Increasing the number of rooms and newly created
Best Practice
Fidings
of leisure facilities); Three key elements that positively influence the impact of the intervention: - Tourism strategic management expertise; - Project management expertise; - Effective advertising, as part of a marketing strategy.
25
Creation/development/modernization of specific infrastructure for sustainable valorization of natural resources with tourism potential and for increasing the quality of tourism services Impact assessment of Key Area of Intervention (KAI) 5.2 The intervention aimed: Developing the sites with potential for tourism (canyons, gorges, caves, glacier lakes etc.), building the required infrastructure, rehabilitating and developing access ways to the main natural tourist attractions (alpine refuges, marking tourist routes, information billboards, camping areas, mountain rescue posts); Diversifying tourist services (developing spa tourism, by improving, modernizing and equipping the spas, including health centers and therapy salt mines, developing mineral and saline spring water collection and transport etc.); Set-up/expand tourist leisure facilities (including accommodation), for the purpose of increasing the number of tourist and length of stay (swimming pools, mini-golf courses, tennis, paint-ball, narrow railway tourism in hilly and mountain areas etc.). Analyzed period: January 1, 2007 - December 31, 2014 Number of projects assessed: 43, completed by December 31, 2013 ERDF contribution: 68,5 milioane Euro
24
activities.
Sharing best practices between different
volume of information available for future evaluation
epresented an asset;
intervention in the local context and the increasing
from other sources of financing for the activities, r
Ensuring sustainability of the projects by integrating
Providing additional resources from its own funds or
applicants;
monuments into the tourist circuit;
Requiring a detailed action plan from potential
Marketing activities have reintroduced the
development strategy;
in urban areas;
intervention and to contribute to the local tourism
national cultural heritage and local cultural heritage
communities to increase the sustainability of the
consideration three types of monuments: UNESCO,
Interventions to consider and involvement of local
The restoration of cultural heritage must take into
Recommendations
Best practices
stakeholders in the tourism sector generates multivalent collaborative networks.
23
Restoration and sustainable valorization of cultural heritage and setting up/modernization of related infrastructure Impact assessment of Key Area of Intervention (KAI) 5.1 The intervention aimed: Restoration, promotion, preservation of cultural heritage (historic buildings, monuments, museums, theaters) in order to improve the potential of cultural tourism in Romania; Improving the attractiveness of the territory, increase the tourism potential of the country and creating new jobs, as well as generating economic growth at local level. Abalyzed period: 2008 - 2014 Number of projects assessed - 40 projects ERDF contribution - 258,59 mil. Euro
FINDINGS: Increasing the number of visitors by 113% in the cultural patrimony objectives (from 292 677 visitors in 2,008 to 623,463 in 2014); The national cultural heritage projects, recorded the best performance - noted a larger increase in the number of visitors and a lower average cost per visitor; Increasing the number of employees by 20.47% through cultural heritage (from 293 in 2008 to 353 in 2014 the number of employees); Increasing the number of visitors of the monuments in 2014; The key benefit of the intervention is restoring cultural heritage (churches, monasteries, part of the historic centers of cities etc.).
22
d.
Promote networking and best practice exchanges
particularly in the second call for proposals;
Development Agencies ;
secured the required resources to finance the projects,
Continued delivery of assistance under the Regional
reorganization of microenterprises activities and
microenterprises;
The request of a business plan has stimulated general
and Industry and Regional Development Agencies for
opportunities;
Support help-desks set up in the Chamber of Commerce
beneficiaries have shown openness to new
plan writing);
the provision of service has improved and the
Promote training beneficiaries (in particular, for business
They have been created new brands and products,
Recommendations
Conclusions
The more the microenterprises were open to the market, between companies;
by applying the subsidiarity principle.
tendency to apply for funding than those in the
stakeholders, in order to reduce domestic inequality,
in the construction sector and industry have a lower
More significant involvement of local and regional
companies being active in services (microenterprises
implement the Horizon 2020 Programme;
The availability of information on relevant websites,
support highly-performing microenterprises, in order to
cash-flow difficulties;
of the innovation chain (training and development) that
implementation, because of the increased capital and
critical generic technologies etc.), funding certain stages
The economic crisis impacted upon the KAI 4.3
more innovative approach (high-tech, IT&C, essential
related to bank loan access (e.g. loans and collaterals).
Selection criteria and calls for projects should promote a
The main difficulties confronting the beneficiaries are
claim mechanism;
applicants’ expectations;
Simplify the procedure; continue to use the payment
were called upon, but their services didn’t meet the
and improve the assessment grid;
Writing the project was a challenge and consultants
process, in view of reducing time of each selection stage
and receive funding;
Set clear and transparent timelines for the administrative
the more likely they were to be informed about KAI 4.3
services sector) and their good financial standing before receiving the grant.
21
Support for the development of microenterprises Impact evaluation for Key Area of Intervention (KAI) 4.3
The intervention aimed: Support for the development of microenterprises from building, industry and services sectors located in urban areas: Supporting 1.500 microenterprises ; Creating 3.000 new permanent jobs in the supported microenterprises.
Analyzed period: 2018 - august 2014 Number of projects assessed:- 788 projects 43 completed December 31, 2013 ERDF contribution - 210 mil. Euro
FINDINGS: Increased capacity to exploit market opportunities; More strategic focus and changes in scope of business; Increased degree of switching from selling to production; Increased quality of output and supply of the new services; On average, the companies receiving support increased their staff by 3 new employees as compared to the non-supported microenterprises; The beneficiaries of projects completed in 2009 still performed better four years after the end of the intervention, having retained 2.4 more jobs per business than the compared non-beneficiaries; The second call was more efficient in terms of job creation, due to the support provided from ERDF per new job creat
20
Streamlining implementation procedures.
business structure, built on the rehabilitated land
business center built on the rehabilitated land;
(private public partnership) catalyzes sustainable
process and contribute to the sustainability of the
Joint interest and involvement of all stakeholders
investments (PPPs) could accelerate the implementation
natural resources;
Increased involvement of the private sphere of
decontamination, as well as reducing the use of
construction of business incubators;
on the environment are remediation and
Separate funding of the projects - soil remediation and
The main conditions that produce intermediate effects
Recommendations
Best practices
and can accelerate the implementation process; It requires a sectorial environmental strategy and a list of contaminated sites.
19
Rehabilitation of unused polluted industrial sites and preparation for new activities Impact assessment of Key Area of Intervention (KAI) 4.2 The intervention aimed: Promoting economic activities through decontamination of polluted industrial sites, cleaning and rehabilitating them for creating structures of supporting business; Rehabilitation of unused polluted industrial sites and preparation for new activities; Introduction of industrial sites into the economic circuit; Maintaining the soil quality and preventing the negative impacts of industrial sites on human health, animals, plants and the environment. Analyzed period: 2008 - 2014 Number of projects assessed - 2 projects ERDF contribution - 26,14 mil. Euro
FINDINGS: The intervention supported essential investment for the rehabilitation and future economic development of polluted areas; The interventions met authorities’ needs to decontaminate areas affected by pollution; KAI 4.2, as SOP environment interventions, was due to launch pilot projects that address the basic needs for quality of life in Romania and economic development in the affected areas.
18
added value.
Stimulating entrepreneurship by organizing start-up
Providing support where it can be generated more
services;
and accelerators;
In-depth knowledge of the local demand of business
perspective of business centers, business incubators
and public actors;
Encouraging the creation of networks from the
It is essential existence of network system with private
and knowledge;
demand-driven services and innovation;
Supporting innovation and technology transfer services
The sustainability of the centers is provided by
Recommendations
Best practices
competitions, awards and specific services supported the promotion of an innovation-oriented approach among the beneficiaries; The experience and skills of individuals involved in developing the proved to be the backbone of the implementation mechanism and service delivery; The simultaneous investment in infrastructure and training produced better results; The incentives "in terms of grant" in order to create more employment effects have been validated in terms of efficiency.
17
Development of sustainable business support structures of regional and local importance Impact assessment of Key Area of Intervention (KAI) 4.1 The intervention aimed: Creation and modernization of regional and local business support structures aimed at attracting investment, revival and development of local and regional economy; Developing entrepreneurship in Romania according to the Community Strategic Guidelines 2007-2013; Providing new opportunities on the labor market within the structures of supporting business; Increasing the attractiveness of regions for investment in economic and social activities; Increasing the competitiveness of Romania. Analyzed period: 2010 - 2014 Number of projects assessed- 99 projects, out of which 27 finalized projects ERDF contribution - 209,94 mil. Euro
FINDINGS: This intervention has provided financial resources during the economic crisis when credit market conditions were difficult; They were created 2.105 jobs in the structures of supporting the business; A center hosts an average of 9 microenterprises and 6 SMEs and offers 5 services/functions; There were multiple jobs created: operational staff - an average of 9 persons per Center and administrative staff an average of 4 persons per Center; The business centers have invested in developing the human resources skills; The average budget of the business centers is approximately 3.7 million lei; The services offered to hosted SMEs improved by equipping new offices and developing networks for entrepreneurship; The integration of different business services in the same center and capacity to offer new services to beneficiaries were facilitated.
16
in projects.
The projects that were able to plan ahead from the very
Improving cooperation among stakeholders involved
outputs;
events in partnership with County School Inspectorates;
School consortia support transferability of project
Promotion of projects by organizing some information
(SEN) students;
within the implementation teams;
participation to education for Special Education Needs
involving some representatives of beneficiary schools
needs generate visible results by facilitating access and
community in planning the ROP operations, also
Investments made in schools for students with special
Continuing the involvement of the school-based
activities;
nursery) the possibility to develop;
of programmes and rooms targeted as extra-curricular
educational activities provides schools (kindergartens,
school canteens, rooms for “school after school” – type
Creating some additional space for extracurricular
Investments in expansions, including investments in
could be carried out without a new contract;
in using resources;
investment designers, so that any possible changes
demographic trend eliminates the risk of poor efficiency
Establishing long term contractual relations with
Interventions performed in communities with upward
Lessons learned
Best practices
beginning longer implementation periods for carrying out public procurement procedures proved to be successful; Investments complementary to other projects, partnerships with local companies delivered through a synergetic approach of projects within larger scale programmes for local development cause transferability of project outputs.
15
Improvement of educational conditions may represent an additional driver for school performance. In national colleges and science-based highschool education, it can be seen the improvement of the school performance for students included in the secondary school; “Spreading” effect of investments - other students in the same locality who are not registered with the school targeted directly by investments benefit also from the refurbishment of the educational space (e.g., foreign languages, science and information and technology modern labs, art centers or sports-related facilities). This “spreading” effect takes place either through participation in school consortia, or through specific partnerships concluded by schools, with the support of local authorities.
14
Rehabilitation/modernization/development and equipping of pre-university, university education and continuous vocational training infrastructure Impact evaluation for the Key Area of Intervention (KAI) 3.4 The intervention aimed: The improvement of educational infrastructure quality, of schools’ equipment, of accommodation structures for students and of adult learning centers in order to provide an educational process according to European standards and an increased participation of students and adults to the educational process.
Analyzed period 2008 - septembrie 2013 Number of projects assessed - 146 projects ERDF contribution - 68,9 mil. Euro.
FINDINGS: Improvement in the quality of educational infrastructure – investments made through KAI 3.4 provide good results where alternate resources (the local budget and the national budget) do not allow extensive funding; Facilitating access to education, especially for children/young people in the rural areas and from other vulnerable social environments, where other factors are decisive in achieving the targeted effect; Facilitating participation to education for students with disabilities represents a direct effect of the intervention, both by creating a more friendly learning environment, adapted to students with special educational needs, and by providing modern learning materials and equipment; An increase in the students’ educational performance from the middle school, in the rural areas;
13
FINDINGS: Reduction of intervention time in case of emergencies - the average response time of the units in rural areas is 22 minutes and 51 seconds (compared to baseline 30-45 minutes), while in urban areas 10 minutes and 51 seconds (initial value is 20 minutes); Enhancing public safety level, the quality of first aid and services in the remote and disadvantaged areas; Reinforcing of integrated organization and regional cooperation in responding to emergency situations;
ensure continuity and coherence effects;
inspectorates for emergency situations;
Financing a similar intervention to KAI 3.3 in order to
collaborations between local authorities and
lower costs;
Developing and strengthening partnerships and
level to ensure the homogeneity of the endowment and
involved is a key factor in order to achieve results;
Performing purchases of equipment at the central
Providing a qualified personnel - the human resource
procurement;
the Inspectorate for Emergency Situations;
intercommunity development associations and public
conducting a thorough analysis of data provided by
The need to reassess the legal framework on
Assessment of the needs at regional level and
Recommendations
Best practices
Personnel training activities for first aid and emergencies.
12
Improving the equipment of operational units for public safety interventions in emergency situations Impact assessment of Key Area of Intervention (KAI) 3.3 The intervention aimed: Reduction of intervention time for qualified first aid and emergency interventions. The purchase of vehicles and equipment specific to regional and county operational bases for interventions in emergency situations.
Analyzed period: 2008 - 2014 Number of projects assessed - 22 projects, out of which 14 finalized projects ERDF contribution - 86,63 mil Euro
11
Improved quality for provided services, an increase in the number of users, improvement of equipment and procurement of modern equipment within the social care centers; Higher satisfaction degree among users in terms of services, available space, installations and utilities and also a widely spread perception of improvement related to services, available space, facilities and utilities
Best practices
Recomandări
Identification of needs – valuable investments relying on The need for territorial analysis in order to examine the
centers in order to evaluate the project’s sustainability.
Efficient management of human resources, association
exchange of experiences, creation of networking between
administrative burden;
Capitalization of the lessons learned, promoting the
services infrastructure) contributed to diminishing the
employees;
Close cooperation in project design (at the level of social
Monitoring the result of interventions on the number of
promoted easier;
effects’ concentration;
a precise assessment of potential users’ needs were
with other funds supporting vocational training and social activities of the centers (such as those funded through ESF); Ability to establish and strengthen networks – additional financial resources have been identified and charity actions were organized by involving volunteers; Promoting private fund raising by identifying sponsors and cooperation between private and public sector.
10
Refurbishment/modernization/development and equipping social services infrastructure Impact evaluation for the Key Area of Intervention (KAI) 3.2
The intervention aimed to: Improve quality and capacity of social services infrastructure; Provide social conditions and improve the quality of living standards (the “open doors” principle – all services provided are accessible to vulnerable groups within community); Provide new social inclusion opportunities and labor market integration for a large number of individuals in difficult situations. Analyzed period: 2008 - 2012 Number of projects analyzed - 35 projects ERDF contribution - 82 mil. Euro
FINDINGS: Numbers of users – better performance for beneficiaries as compared to non-beneficiaries; Numbers of users within residential centers as compared to other categories of centers – better performance for beneficiaries as compared to non-beneficiaries; Number of full time equivalent employees – better performance for beneficiaries as compared to non-beneficiaries. The growth in the number of employees, even small, means that the social services infrastructures were able to cover expenses with the new staff and to consequently adapt their organizational structures; Active members of the families were released from taking care of the persons they upkeep during their working hours;
9
patients' perceptions.
project implementation;
access to health services and investigating the
Efficient coordination of medical staff during
intervention in future years in terms of improving
the apparition of the effects;
It is appropriate to evaluate the sustainability of the
Rigorous analysis of needs is a precondition for
facilitating access to integrated medical services;
beneficiaries in the planning process;
health infrastructure and
health personnel) and the involvement of potential
Continuation of funding in
Development of partnerships (local authorities,
Recommendations
Best practices
The existence of an investment plan on the modernization of outpatient departments and the acquisition of advanced equipment.
8
Rehabilitation/modernization/equipping of the health services’ infrastructure Impact assessment of Key Area of Intervention (KAI) 3.1
The intervention aimed: Improving the quality of healthcare services and regionally balanced distribution in order to ensure equal access to health services of the population; Development of a modern system for the treatment and prevention accessible to all individuals through the rehabilitation, modernization and equipping of the county hospitals; Rehabilitation, modernization and equipping outpatient departments with investigative equipment; Development of outpatient services, especially for patients in disadvantaged areas so that most cases to be resolved in the upgraded outpatient departments; Analyzed period: 2008 - 2014 Number of projects assessed - 104 projects, out of which 41 finalized ERDF contribution - 191,02 mil. Euro
FIDINGS: Increasing the number of users from 5,700 in 2008 to 8,314 in 2014; Increasing user satisfaction regarding accessibility and quality of health services; Positive effects in terms of medical staff skills development; The effects of intervention are sustainable after the completion of the projects as well.
7
Best practices Connectivity infrastructure investments produce positive net effect on economic and social development; Integrated approach – participation and consulting the citizens, associations of interests, NGOs, economic actors and universities; The polycentric approach supports the sustainable development of all regions; Involving more cities in project development improved the administrative capacity and programming of local authorities.
Recommendations Continuation of these interventions in the new programming period, including other urban areas; Correlation of launching calls for projects at government level and the implementation of the interventions can facilitate the integrated interventions at the community level, according to the needs of beneficiaries; Analysis of additional socio-economic indicators in order to classify the areas eligible for intervention (sub-domains); Strategic diversification of urban interventions, based on different socio-economic needs of the cities; The use of financial instruments such as Integrated Territorial Investment (ITI) and community-led local development (CLLD); Strengthening the administrative capacity of human resources at local level; The inclusion of environmental protection and energy efficiency dimension in the forthcoming urban development policies.
6
Integrated urban development plans Impact assessment of Key Area of Intervention (KAI) 1.1 The intervention aimed: Development, regeneration and increase of the economic and social role of cities in terms of urban centers, urban development poles and growth poles; Meeting the needs of the Romanian cities in order to build a sustainable and competitive national urban system; Increasing economic and demographic density of the main urban centers and facilitating their connection to smaller towns. The analyzed period: 2008 - August, 2014 The number projects assessed: - 192 projects ERDF contribution - 1,26 bilion Euro
FINDINGS: The intervention generated improvements in basic urban infrastructure, social infrastructure: It contributed to increasing the quality of life, mobility, accessibility and public safety sense; Development of urban infrastructure has generated new jobs; Increased attractiveness of funded urban centers compared to non-beneficiaries; Increased enrollment rates in secondary school education of the population; Growth poles, urban development poles and urban centers have helped promote the urban network.
5
Impact assessments The Regional Operational Programme 2007-2013 was implemented, European money has been invested through co-financed projects, achievements were reported ... But what is the impact on society? How to identify the net effect? The changes, improvements are due to the projects, to the financed programs of structural instruments? What are the differences that these grants have produced?
Regional Operational Programme Managing Authority tried to find the answers to these questions, by making a series of impact assessments, the first of this kind in Romania.
What are impact assessments? The impact assessment is designed to answer key questions for evidence-based policy: what works, what does not work, why and for how long/under what conditions? Impact assessments identify the changes and results that can be directly attributed to a program, project or policies. Counterfactual analysis is a complex method of impact evaluation , which quantifies the net effect of the interventions after some comparisons between beneficiaries and non-beneficiaries. By applying the counterfactual method it is possible a comparative analysis of the effects of interventions providing both information on the net effect of intervention and inputs for cost-benefit analysis of KAI . In order to identify the impact there is a need for passage of at least one year of to the completion of projects, so not all projects financed from POR 2007-2013 were the subject of this evaluation. The new requirements regarding evaluation, derived from the Europe 2020 Strategy, introduce the impact analysis and measurement of the net effect as the basic assessment tasks to be achieved.
After applying the counterfactual methods to the mix of quantitative and qualitative methods, evaluation studies have highlighted the impact of net effects, independent of the effects exerted by other contextual factors of the funding on of the type of target group.
4