REGIO. Impact asupra dezvoltarii regionale

Evaluarea de impact. Contrafactuală.

S-au implementat programe operaționale, s-au investit bani europeni prin intermediul proiectelor co-finanțate, s-au raportat realizări... Dar care este impactul acestora asupra societății?

Cum identificăm efectul net, faptul că schimbările, îmbunătățirile se datorează proiectelor, programelor finanțate din instrumente structurale? Care sunt diferențele pe care le-au produs aceste investiţii?

Autoritatea de Management a Programului Operațional Regional, prin Biroul Evaluare Program, a încercat să afle răspunsul la aceste întrebări cu sprijinul experţilor independenţi, prin realizarea unei serii de evaluări de impact, primele de acest gen din România.

Ce sunt evaluările de impact?

Evaluarea impactului este menită să răspundă unor întrebări cheie pentru elaborarea de politici bazate pe dovezi: ce funcţionează, ce nu funcţionează, de ce şi pentru câtă vreme/în ce condiţii? Studiile identifică schimbările, rezultatele care pot fi atribuite direct unui program, unui proiect sau unor politici.

Analiza contrafactuală este o metodă complexă de evaluare a impactului, prin care se cuantifică efectul net al intervențiilor, în urma unor comparații dintre unității sprijinite și cele care nu au beneficiat de fonduri UE. Avantajele aplicării metodei contrafactuale: prin intermediul ei este posibilă analiza comparativă a efectelor intervențiilor oferind atât informaţii asupra efectului net al intervenţiei, cât şi input-uri pentru analiza cost-beneficiu a DMI-ului. Pentru identificarea impactului este nevoie de trecerea a minimum un an de la finalizarea proiectelor, astfel nu toate proiectele finanțate din POR 2007-2013 au constituit subiectul acestei evaluări.

Noile cerinţe cu privire la evaluare impun necesitatea analizei efectelor și măsurarea impactului, acestea fiind fundamentale pentru evaluări.

În urma aplicării diferitelor metode bazate pe teoria schimbării şi metode contrafactuale concluziile vizează impactul net al intervențiilor POR, independent de efectele altor factori contextuali.

Concluziile evaluării contrafactuale a impactului Evaluările de impact realizate de AM POR au avut ca principal obiectiv identificarea diferențelor pe care aceste intervenții le-au produs în cadrul grupurilor țintă.

Pentru prima dată în România s-au folosit METODE CONTRAFACTUALE de evaluare a impactului.

4

Planuri integrate de dezvoltare urbană Evaluarea de impact a domeniului major de intervenție (DMI) 1.1 Intervenția a urmărit: Dezvoltarea, regenerarea şi creşterea rolului economic şi social al oraşelor, din perspectiva centrelor urbane, polilor de dezvoltare urbană și polilor de creștere; Întâmpinarea nevoilor orașelor din România, cu scopul de a construi un sistem urban național durabil și competitiv; Creșterea densității economice și demografice a principalelor centre urbane și facilitarea legăturii acestora cu orașele mai mici.

Perioada analizată: 2008 - august 2014 Numărul de proiecte analizate - 192 de proiecte Contribuția FEDR - 1,26 miliarde Euro

CONSTATĂRI: Intervenţia a generat îmbunătățiri la nivelul infrastructurii urbane de bază, infrastructurii sociale: A contribuit la creşterea calității vieții cetățenilor, mobilității, accesibilității și sentimentului de siguranță publică; Realizarea infrastructurii urbane a generat noi locuri de muncă; A crescut atractivitatea centrelor urbane finanțate comparativ cu centrele urbane nefinanțate; A crescut rata de înscriere a populației în învățământul liceal; Polii de creștere, polii de dezvoltare urbană și centrele urbane au contribuit la promovarea rețelei urbane.

5

Investițiile în infrastructura de conectivitate produc efect net pozitiv asupra dezvoltării economice și sociale; Abordarea integrată - participarea și consultarea cetățenilor, asociațiilor de interese, ONG-urilor, actorilor economici și universităților; Abordarea policentrică sprijină dezvoltarea sustenabilă a tuturor regiunilor; Implicarea mai multor orașe în derularea proiectelor a îmbunătățit capacitatea administrativă și de programare a autorităților locale.

Recomandări Continuarea acestor intervenții în noua perioadă de programare, incluzând şi alte zone urbane; Corelarea lansării apelurilor de proiecte la nivel guvernamental și implementarea intervențiilor pentru a facilita intervențiile integrate la nivelul comunității, în acord cu nevoile beneficiarilor; Analizarea unor indicatori socio-economici suplimentari în vederea clasificării zonelor de intervenție eligibile; Diversificarea strategică a intervențiilor urbane, bazată pe diferite nevoi socio-economice ale orașelor; Utilizarea unor instrumente financiare, cum ar fi Investițiile Teritoriale Integrate (ITI) și dezvoltarea locală plasată sub responsabilitatea comunității (CLLD); Îmbunătățirea capacității administrative a resurselor umane la nivel local; Includerea dimensiunii protecției mediului și eficienței energetice în cadrul viitoarelor politici de dezvoltare urbană.

6

Reabilitarea/modernizarea/echiparea infrastructurii serviciilor de sănătate Evaluarea de impact a domeniului major de intervenție (DMI) 3.1

Intervenția a urmărit: Îmbunătățirea calității serviciilor de asistență medicală și distribuirea echilibrată la nivel regional, în vederea asigurării accesului egal al populației la serviciile de sănătate; Dezvoltarea unui sistem modern pentru tratament și prevenire, accesibil tuturor categoriilor de persoane prin reabilitarea, modernizarea și echiparea spitalelor județene; Reabilitarea, modernizarea și dotarea ambulatoriilor cu aparatură de investigaţii; Dezvoltarea serviciilor ambulatorii, mai ales pentru pacienţii aflaţi în zone dezavantajate, în vederea soluţionării cazurilor în ambulatoriile modernizate.

Perioada analizată: 2008 - 2014 Numărul de proiecte analizate - 104 proiecte, din care 41 proiecte finalizate Contribuția FEDR - 191,02 mil. Euro

CONSTATĂRI: Creşterea numărului de utilizatori de la 5.700 în 2008 la 8.314 în 2014; Creşterea satisfacţiei utilizatorilor privind accesibilitatea şi calitatea serviciilor medicale; Efecte pozitive în ceea ce priveşte dezvoltarea competenţelor personalului medical; Efectele intervenţiei sunt sustenabile şi după finalizarea proiectelor.

7

Recomandări Dezvoltarea parteneriatelor (autorităţi locale,

Continuarea finanţărilor în

personal medical) și implicarea potențialilor beneficiari

infrastructura de sănătate şi

în procesul de planificare;

facilitarea accesului la servicii medicale integrate;

Analiza riguroasă a nevoilor este o condiţie pentru

Este oportună evaluarea sustenabilității intervenției în anii

apariţia efectelor;

viitori din perspectiva îmbunătăţirii accesului la serviciile

Coordonarea eficientă a personalului medical pe

medicale, precum şi investigarea percepţiei pacienților.

durata implementării proiectului; Existenţa unui plan de investiţii privind modernizarea ambulatoriilor şi achiziţia de echipamente performante.

8

Reabilitarea/modernizarea/dezvoltarea şi echiparea infrastructurii serviciilor sociale Evaluarea de impact a DMI 3.2

Intervenția a urmărit: Îmbunătățirea calității și capacității infrastructurii serviciilor sociale; Asigurarea unor condiții sociale și îmbunătăţirea calităţii vieții ("principiul ușilor deschise" - toate serviciile furnizate sunt accesibile grupurilor); Oferirea de noi oportunități de incluziune socială și inserție pe piața muncii.

Perioada analizată: 2008 - 2012 Numărul de proiecte analizate - 35 proiecte analizate Contribuția FEDR - 82 milioane euro

CONSTATĂRI: Număr de utilizatori - performanţă mai bună a beneficiarilor în comparaţie cu cea a non-beneficiarilor; Creşterea numărului de utilizatori în centrele rezidenţiale faţă de celelalte categorii de centre - performanţă mai bună a beneficiarilor în comparaţie cu cea a non-beneficiarilor; Număr de angajaţi echivalenţi cu normă întreagă - performanţă mai bună a beneficiarilor în comparaţie cu cea a non-beneficiarilor. Creșterea, chiar și redusă, a angajaților înseamnă că infrastructurile de servicii sociale au acoperit cheltuielile aferente personalului nou și au adaptat modul de organizare în consecință; S-au eliberat membrii activi ai familiilor, preocupați cu îngrijirea persoanelor aflate în întreținere, în timpul programului de lucru;

9

Calitate îmbunătăţită a serviciilor oferite, creșterea numărului de utilizatori, îmbunătățirea dotărilor și achiziționarea de echipamente moderne în cadrul centrelor sociale; Nivel ridicat de satisfacție a utilizatorilor, precum şi o percepție larg răspândită de îmbunătățire în ceea ce privește serviciile, spațiile, instalațiile și utilitățile.

Recomandări Identificarea nevoilor – s-au promovat mai ușor

Necesitatea unei analize teritoriale pentru a examina

investițiile bazate pe o evaluare exactă a nevoilor

concentrarea efectelor;

potențialilor utilizatori;

Monitorizarea rezultatului intervențiilor privind numărul

Colaborarea strânsă în elaborarea proiectului (la nivelul

de angajați;

infrastructurii de servicii sociale) a contribuit la reducerea Valorificarea lecțiilor învățate, promovarea schimbului de dificultăților administrative;

experiențe, crearea de rețele între centre în vederea

Gestionarea eficientă a resurselor umane, asocierea cu

evaluării sustenabilității proiectului.

alte fonduri, care sprijină formarea profesională și activitățile sociale ale centrelor (ex. cele finanţate prin FSE); Capacitatea de a stabili și consolida rețele de colaborare s-au identificat resurse financiare suplimentare și s-au organizat acţiuni de caritate cu implicarea voluntarilor; Promovarea colectării de surse private prin identificarea de sponsori şi de cooperare între mediul public și privat.

10

Îmbunătățirea dotării cu echipamente a bazelor operaţionale pentru intervenții în situații de urgență Evaluarea de impact a domeniului major de intervenție (DMI) 3.3 Intervenția a urmărit: Reducerea timpului de intervenție pentru acordarea primului ajutor calificat și pentru intervenții în situaţii de urgență; Achiziționarea de vehicule și echipamente specifice pentru bazele operaţionale regionale și județene, destinate intervențiilor în situații de urgență.

Perioada analizată: 2008 - 2014 Numărul de proiecte analizate - 22 proiecte, din care 14 proiecte finalizate Contribuția FEDR - 86,63 mil. Euro

11

CONSTATĂRI: Reducerea timpului de intervenție în cazul situațiilor de urgență - timpul mediu de răspuns al unităţilor în mediul rural este de 22 de minute și 51 de secunde (față de valoarea iniţială de 30-45 de minute), iar în mediul urban este de 10 minute şi 51 de secunde (valoarea iniţială fiind de 20 de minute); Creșterea nivelului de siguranță publică, a calității primului ajutor și a serviciilor din zonele izolate și defavorizate; Consolidarea unei organizări integrate și cooperarea regională în asigurarea răspunsului la situaţii de urgentă.

Recomandări Evaluarea nevoilor la nivel regional şi efectuarea unei

Necesitatea reevaluării cadrului legislativ în vederea

analize aprofundate a datelor furnizate de ISU;

corelării achizițiilor publice la nivelul asociaţiilor de

Asigurarea personalului calificat - resursa umană

dezvoltare intercomunitară;

implicată este un factor cheie pentru obținerea

Efectuarea achizițiilor de echipamente la nivel central

rezultatelor;

pentru asigurarea omogenităţii dotărilor și costurilor mai

Dezvoltarea și întărirea parteneriatelor și

reduse;

colaborărilor dintre autoritățile locale și inspectoratele

Finanțarea unei intervenții similare cu DMI 3.3, pentru

pentru situații de urgență.

asigurarea continuității și coerenței efectelor; Activități de formare a personalului pentru primul ajutor și situații de urgență.

12

Reabilitarea/modernizarea/dezvoltarea şi echiparea infrastructurii educaţionale preuniversitare, universitare şi a infrastructurii pentru formarea profesională continuă Evaluarea de impact a DMI 3.4 Intervenția a urmărit: Îmbunătăţirea calităţii infrastructurii de educaţie, a dotării şcolilor, a structurilor de cazare pentru studenţi şi a centrelor pentru formare profesională în vederea asigurării unui proces educaţional la standarde europene şi a creşterii participării populaţiei şcolare şi a adulţilor la procesul educaţional.

Perioada analizată: 2008 - septembrie 2013 Numărul de proiecte analizate - 146 proiecte analizate Contribuția FEDR - 68,9 milioane Euro.

CONSTATĂRI: Îmbunătăţirea calităţii infrastructurii de educaţie - investițiile au rezultate bune acolo unde resursele alternative (bugetul local și bugetul național) nu permit finanțări de amploare; Facilitarea accesului la educație, în special a copiilor/tinerilor din mediul rural și din alte medii sociale vulnerabile, dar și alți factori (subvenționarea prețului chiriei) sunt hotărâtori în atingerea efectului urmărit; Facilitarea participării elevilor cu diferite dizabilități la educație reprezintă un efect direct al intervenţiei, atât prin crearea unui mediu de învățare mai prietenos, adaptat pentru elevii cu nevoi educaționale speciale, cât și prin dotarea cu echipamente și materiale de învățare moderne; Creșterea performanței școlare a elevilor din ciclul gimnazial din mediul rural;

13

Îmbunătățirea condițiilor de studiu poate fi o motivare suplimentară pentu performanța școlară - în colegiile naționale și învățământul liceal real, se observă creșterea performanței școlare a elevilor din ciclul secundar (liceal); Efect „propagat” al rezultatelor intervenţiilor - de modernizarea spațiilor de învățământ beneficiază și alți elevi din localitate care nu sunt înscriși în școala vizată de investiții (laboratoare moderne de limbi străine, științe și informatică, centre de artă sau facilități pentru practicarea sporturilor).

Acest efect de „propagare” se realizează fie prin participarea la consorții școlare, fie prin parteneriate punctuale realizate de școli, cu sprijinul autorităților locale.

Investițiile în infrastructura educațională generează impact ridicat, în special: În zonele în care accesul și participarea la educație sunt problematice (mediul social izolat, localitățile/zonele/cartierele cu număr mare de elevi din grupuri vulnerabile); În învățământul profesional și tehnic (prin creșterea calității educației profesionale și tehnice și o mai bună adaptare a acesteia la cerințele pieței muncii); În cazul dezvoltării de campusuri universitare și preuniversitare (care răspund atât nevoilor educaționale, cât și nevoilor locative ale elevilor și studenților, crescând astfel accesul la educație).

14

Lecții învățate Intervențiile realizate în comunitățile cu o tendință

Stabilirea unor relații contractuale de lungă durată

demografică ascendentă elimină riscul lipsei de

cu proiectanții investițiilor, astfel încât eventualele

eficiență în cheltuirea resurselor;

modificări în proiectul tehnic să se poată realiza fără

Investițiile în extinderi, inclusiv investițiile în cantine

a fi necesar un nou contract;

școlare, spații destinate programelor „școală după

Crearea unor spații suplimentare destinate

școală” și spațiile destinate activităților extrașcolare;

activităților educaționale extracurriculare oferă

Investițiile realizate în școlile speciale generează

posibilitatea dezvoltării școlilor (grădinițe, creșe,

rezultate vizibile prin facilitarea accesului și

cursuri, activități de formare continuă);

participării la educație a elevilor;

Continuarea implicării comunității școlare în

Consorțiile școlare sprijină transferabilitatea efectelor

planificarea intervențiilor POR, includerea în echipele

proiectelor;

de implementare a reprezentanților școlilor

S-au dovedit de succes proiectele care au planificat

beneficiare;

de la început perioade de implementare mai lungi

Promovarea proiectelor prin organizarea unor evenimente

pentru realizarea procedurilor de achiziţii publice;

de informare în parteneriat cu Inspectoratele Școlare

Investițiile complementare cu alte proiecte,

Județene;

parteneriate cu agenți economici locali, realizate

Îmbunătățirea cooperării factorilor implicați în derularea

printr-o abordare sinergică a proiectelor în programe proiectelor. de dezvoltare locală mai largi determină transferabilitatea efectelor proiectelor.

15

Dezvoltarea durabilă a structurilor de sprijinire a afacerilor de importanță regională și locală Evaluarea de impact a domeniului major de intervenție (DMI) 4.1 Intervenția a urmărit: Crearea şi modernizarea structurilor regionale şi locale de sprijinire a afacerilor, având ca scop atragerea investiţiilor, revigorarea şi dezvoltarea economiilor locale şi regionale; Dezvoltarea antreprenoriatului în România, în acord cu Directivele Strategice Comunitare 2007-2013; Oferirea de noi oportunități de inserție pe piața muncii în cadrul structurilor de sprijinire a afacerilor; Creşterea atractivităţii regiunilor pentru investiţii în activităţi economice şi sociale; Creşterea gradului de competitivitate a României.

Perioada analizată: 2010 - 2014 Numărul de proiecte analizate - 99 proiecte, din care 27 proiecte finalizate Contribuția FEDR - 209,94 mil. Euro

CONSTATĂRI: Intervenția a asigurat resurse financiare în timpul crizei economice, atunci când condițiile pe piața de credit erau dificile; Au fost create 2.105 locuri de muncă în structurile de sprijinire a afacerilor; Un centru găzduieşte, în medie, 9 microîntreprinderi şi 6 IMM-uri şi oferă 5 servicii/funcţii; Au fost create multiple locuri de muncă: personal operativ – în medie, 9 persoane pe centru şi personal administrativ – în medie, 4 persoane pe centru; Centrele de afaceri au investit în dezvoltarea abilităților resurselor umane; Media bugetului centrelor de afaceri este de aproximativ 3,7 milioane lei; S-au îmbunătățit serviciile oferite IMM-urilor găzduite, prin echiparea de noi birouri și dezvoltarea de rețele pentru activitățile antreprenoriale; Au fost facilitate integrarea diferitelor servicii de afaceri în același centru și dezvoltarea capacităţii beneficiarilor de a oferi noi servicii.

16

Recomandări Sustenabilitatea centrelor este asigurată prin serviciile

Sprijinirea serviciilor de inovare și transfer tehnologic

orientate spre cerere şi inovare;

și de cunoștințe;

Este esenţială existența sistemului de rețele cu actori

Încurajarea formării rețelelor din perspectiva activității

privați și publici;

centrelor, incubatoarelor şi a acceleratoarelor de afaceri;

Cunoaşterea în profunzime a cererii teritoriale de

Acordarea sprijinului unde poate fi generată mai multă

servicii de afaceri;

valoare adăugată.

Stimularea spiritului antreprenorial prin organizarea competițiilor start-up și acordarea de premii și servicii specifice a susținut promovarea unei abordări orientate spre inovare în rândurile beneficiarilor; Experienţa și abilitățile persoanelor implicate s-au dovedit a fi axul central al mecanismului de implementare și de furnizare a serviciilor; Investiția simultană în infrastructură şi formarea personalului a produs rezultate mai bune; Stimulentele ”în termeni de grant” pentru crearea mai multor efecte asupra ocupării forţei de muncă au fost validate în termeni de eficiență.

17

Reabilitarea siturilor industriale poluate și neutilizate și pregătirea pentru noi activități Evaluarea de impact a domeniului major de intervenție (DMI) 4.2 Intervenția a urmărit: Promovarea activităților economice în siturile industriale poluate prin decontaminarea, curățarea și reabilitarea acestora pentru crearea de structuri de sprijinire a afacerilor; Reabilitarea siturilor industriale poluate şi neutilizate şi pregătirea pentru noi activităţi; Introducerea siturilor industriale în circuitul economic; Menținerea calității solului nepoluat şi prevenirea impactului negativ al siturilor industriale asupra sănătăţii umane, faunei, florei şi mediului înconjurător.

Perioada analizată: 2008 - 2014 Numărul de proiecte analizate - 2 proiecte Contribuția FEDR - 26,14 mil. Euro

CONSTATĂRI: Intervenția a sprijinit investiții esențiale pentru reabilitarea și dezvoltarea economică viitoare a zonelor poluate; Intervențiile au venit în întâmpinarea nevoilor autorităților de a decontamina terenurile afectate de poluare; DMI 4.2, ca şi intervențiile POS Mediu, a fost util pentru a lansa proiecte-pilot care abordează nevoile fundamentale pentru calitatea vieţii din România și dezvoltarea economică a zonelor poluate.

18

Recomandări Principalele condiții care produc efecte intermediare

Finanțarea separată a proiectelor - decontaminarea

asupra mediului sunt depoluarea și decontaminarea,

solului și construcția de incubatoare de afaceri;

precum și reducerea folosirii resurselor naturale;

Implicarea accentuată a sferei private (parteneriat public

Co-interesarea și implicarea tuturor actorilor

privat) ar putea accelera procesul de implementare și ar

interesaţi (parteneriat public privat) catalizează

contribui la sustenabilitatea centrului de afaceri construit

sustenabilitatea structurii de afaceri, construită pe

pe terenul reabilitat;

terenul reabilitat și poate accelera procesul de

Fluidizarea procedurilor de implementare.

implementare; Se impune existenţa unei strategii sectoriale de mediu şi a unei liste a siturilor poluate.

19

Sprijinirea dezvoltării microîntreprinderilor Evaluarea de impact a DMI 4.3

Intervenția a urmărit: Sprijinirea dezvoltării microîntreprinderilor din sectorul construcţii, industrie şi servicii, situate în zonele urbane; Sprijinirea a 1500 de microîntreprinderi; Crearea a 3000 de noi locuri de muncă permanente în cadrul microîntreprinderilor sprijinite.

Perioada analizată: 2018 - august 2014 Numărul de proiecte analizate - 788 proiecte Contribuția FEDR - 210 mil. Euro

CONSTATĂRI: Creşterea capacităţii de a exploata oportunităţile de piaţă; Creșterea orientării strategice şi schimbării domeniului de activitate; Creșterea gradului de trecere de la comercializare la producţie; Creșterea calităţii producţiei şi furnizării de noi servicii; Întreprinderile beneficiare și-au mărit personalul, în medie, cu 3 noi persoane în plus faţă de întreprinderile care nu au avut finanţare; Beneficiarii proiectelor finalizate în 2009 au avut performanţe mai bune chiar şi la patru ani după finalizarea intervenţiei, menținând cu 2,4 locuri de muncă per microîntreprindere mai mult decât non-beneficiarii comparaţi; Al doilea apel de proiecte a fost mai eficient, în ceea ce priveşte crearea de locuri de muncă, datorită susținerii FEDR per loc de muncă creat.

20

Concluzii

Recomandări

S-au creat noi brand-uri și produse, s-a îmbunătățit

Promovarea activităților de formare (în special în

furnizarea de servicii şi beneficiarii au dat dovadă de

elaborarea planului de afaceri);

deschidere spre noi oportunități;

Sprijinirea constituirii în cadrul Camerelor de Comerţ şi

Solicitarea unui plan de afaceri a stimulat reorganizarea

Industrie a unor centre de help-desk pentru

generală a activităţilor microîntreprinderilor şi a asigurat

microîntreprinderi;

resursele financiare adecvate, în special în cadrul celui

Continuarea furnizării de asistență în cadrul Agenţiilor de

de-al doilea apel de proiecte;

Dezvoltare Regională ;

Cu cât microîntreprinderile au fost mai deschise către

Promovarea creării unor reţele şi schimbul de practici

piață, cu atât mai mult au fost susceptibile a fi informate

între întreprinderi;

despre DMI 4.3 și să fie finanțate;

Stabilirea unui calendar clar şi transparent pentru

Conceperea proiectului a fost o provocare, apelându-se

procesul administrativ în vederea reducerii perioadei de

la consultanți ale căror servicii nu au atins așteptările

selecţie și îmbunătăţirea grilei de evaluare;

aplicanților;

Simplificarea procedurii, utilizarea în continuare a

Principalele dificultăţi ale beneficiarilor sunt legate de

mecanismului cererilor de plată;

accesul la creditare (ex. împrumuturi şi garanţii). Criza

Criteriile de selecţie şi apelurile de proiecte ar trebui să

economică a avut un impact asupra implementării

promoveze o abordare inovatoare. (sectoare de hi-tech,

DMI 4.3, din cauza dificultăţilor sporite cu privire la

TIC, tehnologii generice esenţiale, etc.), finanţarea unor

capital şi fluxul de numerar (co-finanţare cu băncile);

etape ale lanţului inovării (instruire şi dezvoltare), care

Disponibilitatea informațiilor despre finanțări pe site-uri

sprijină microîntreprinderi performante, pentru aplicarea

relevante, apartenența la sectorul servicii

în cadrul programului Orizont 2020;

(microîntreprinderile din sectorul construcţiilor şi

O implicare mai intensă a factorilor interesaţi la nivel local

industriei au o tendinţă mai scăzută de a aplica la

şi regional pentru reducerea disparităţilor interne ca

finanțare, comparativ cu cele din sectorul serviciilor),

urmare a aplicării principiului subsidiarităţii.

precum și situația financiară bună înainte de finanțare au avut rol determinant.

21

Restaurarea și valorificarea durabilă a patrimoniului cultural și crearea/modernizarea infrastructurilor conexe Evaluarea de impact a domeniului major de intervenție (DMI) 5.1 Intervenția a urmărit: Restaurarea, valorizarea, conservarea patrimoniului cultural (clădiri istorice, monumente, muzee, teatre etc) în vederea îmbunătăţirii potențialului turismului cultural din România; Îmbunătățirea atractivității teritoriului, creșterea potențialului turistic al țării și crearea de noi locuri de muncă, precum şi generarea creșterii economice la nivel local.

Perioada analizată: 2008 - 2014 Numărul de proiecte analizate - 40 proiecte Contribuția FEDR - 258,59 mil. Euro

CONSTATĂRI: Creșterea numărului de vizitatori cu 113% în obiectivele de patrimoniu cultural (de la 292.677 de vizitatori în 2008 la 623.463 în 2014); Proiectele de patrimoniu cultural național, înregistrează cele mai bune performanțe – s-a remarcat o creștere a numărului de vizitatori și o scădere a costurilor medii pe vizitator; Creşterea numărului de angajaţi cu 20,47% prin valorificarea patrimoniului cultural (de la 293 în 2008 la 353 în 2014 a numărului de angajați); Creşterea numărului de vizitatori a monumentelor și după anul 2014; Beneficiul cheie al intervenției este restaurarea patrimoniului cultural (biserici, mănăstiri, o parte din centrele istorice ale orașelor etc.).

22

Concluzii

Recomandări

Restaurarea patrimoniului cultural trebuie să aibă în

Intervențiile să aibă în vedere implicarea comunităților

vedere cele trei tipuri de monumente: patrimoniul

locale pentru a crește sustenabilitatea proiectelor și

UNESCO, patrimoniul cultural național și patrimoniul

pentru a contribui la strategia locală de dezvoltare

cultural local din mediul urban;

turistică;

Activitățile de marketing au reintrodus monumentele

Solicitarea unui plan de acţiune detaliat din partea

în circuitul turistic;

potențialilor aplicanți;

Asigurarea resurselor suplimentare din fonduri proprii

Asigurarea sustenabilității proiectelor prin integrarea

sau din alte surse de finanţare a reprezentat un atu

intervenției în contextul local și creșterea volumului de

pentru derularea activităților;

informații disponibile pentru activitățile de evaluare

Schimbul de bune practici între diferiți actori implicați

viitoare.

în sectorul turistic generează rețele multivalente de colaborare.

23

Crearea, dezvoltarea, modernizarea infrastructurii de turism pentru valorificarea resurselor naturale şi creşterea calităţii serviciilor turistice Evaluarea de impact a DMI 5.2 Intervenția a urmărit: Amenajarea obiectivelor turistice cu potențial turistic (canioane, chei, peşteri, lacuri glaciare etc.), construirea infrastructurii necesare, reabilitarea şi amenajarea căilor de acces către principalele obiective turistice naturale (refugii alpine, marcarea traseelor turistice, panouri informative, platforme de campare, posturi Salvamont); Diversificarea serviciilor turistice (ex. dezvoltarea turismului balnear, prin îmbunătăţirea, modernizarea şi dotarea bazelor de tratament, inclusiv a salinelor terapeutice, dezvoltarea reţelelor de captare şi transport a izvoarelor minerale şi saline etc.); Crearea/extinderea structurilor de agrement turistic (inclusiv cazare), în scopul creşterii numărului turiştilor şi a duratei sejurului (piscine, terenuri de mini-golf, tenis, paint-ball, turism feroviar pe linie ferată îngustă, în zonele de deal şi de munte etc.).

Perioada analizată: 1 ianuarie 2017 - 31 decembrie 2014 Numărul de proiecte analizate - 43, finalizate până la data de 31 decembrie 2013 Contribuția FEDR - 68,5 milioane Euro

24

Constatări

Bune Practici

Creșterea numărului camerelor și locurilor de cazare

Construirea unei pârtii artificiale de tubing pentru

nou create;

perioada verii a determinat creșterea numărului de

Creșterea numărului de sosiri și înnoptări în unitatea

vizitatori, și veniturile IMM-ului;

de cazare;

Implementarea sinergică a proiectelor de infrastructură

Depășirea nivelului național privind gradul de ocupare

de acces (implementate de autorități publice) de cazare

a beneficiarilor;

și de agrement generează un produs turistic zonal și

Creșterea numărului de angajaţi/beneficiar IMM;

crește durata medie de ședere;

Creşterea cifrei de afaceri a beneficiarilor POR;

Diversificarea activităților de promovare crește numărul

Impact asupra dezvoltării socio-economice la nivel

turiștilor: participarea la târguri internaționale, campanii

local și zonal prin locurile de muncă create, taxele și

publicitare la nivel național și international;

impozitele virate la bugetul local, dar și prin stimularea

Organizarea de evenimente naționale și internaționale,

altor investiții și a afacerilor conexe;

furnizarea de servicii de cazare, masă, parteneriate în

Cele mai eficace proiecte sunt în oraşele mari şi în

schimbul serviciilor de promovare între infrastructurile

staţiunile de interes naţional şi local;

de agrement și de cazare;

Conceptul „integrat” al proiectului este determinant din

Numirea unei echipe dedicate asigurării calității

perspectiva impactului (combinarea activităţilor de

serviciilor furnizate de angajați, prin monitorizare,

modernizare a spaţiului de cazare cu cele de dezvoltare

instruire și training;

a unei infrastructuri de agrement);

Mecanismul de cerere de plată ce a ridicat presiunea

Trei elemente cheie, care influențează pozitiv

asupra fluxului de numerar al beneficiarilor;

impactul intervenției:

Efectuarea vizitelor de monitorizare pe perioada de

- expertiza de management strategic în domeniul

durabilitate a proiectelor.

turismului; - expertiza de management de proiect; - promovare eficace în cadrul unei strategii de marketing.

25

Promovarea potențialului turistic și crearea infrastructurii necesare, în scopul creșterii atractivității României ca destinație turistică Evaluarea de impact a domeniului major de intervenție DMI 5.3 Intervenția a urmărit: Îmbunătățirea potențialului turistic prin dezvoltarea infrastructurii necesare, crescând atractivitatea României; Promovarea potențialului turistic al României, îmbunătățind imaginea țării; Crearea Centrelor de Promovare și Informare Turistică (CPIT); Creşterea numărului de turiști; Promovarea unei oferte turistice integrate.

Perioada analizată: 2008 - 2014 Numărul de proiecte analizate - 295 proiecte Contribuția FEDR - 127,31 mil. Euro

CONSTATĂRI: Numărul turiștilor sosiți în România din Uniunea Europeană a revenit la nivelul din perioada pre-criză, cu valori ușor ridicate (4,8 milioane sosiri în anul 2007 şi aproximativ 5 milioane în 2014); Creșterea scorului de rating al Strategiei de brand românesc trece de la 0,43 la 0,77; Îmbunătățirea calității și intensificarea campaniilor media și de cercetare; Intervențiile au contribuit la promovarea activităților turistice locale, generând oportunitatea de a demara proiecte similare și schimbul de bune practici din sector; Promovarea dezvoltării turismului prin centre turistice și îmbunătățirea calității serviciilor, producând efecte în special pentru turiștii selectivi.

26

Bune practici Campaniile media, precum şi site-urile destinate

Intervențiile contribuie în mod direct la dezvoltarea

potențialilor turiști au sprijinit promovarea brandului

centrului turistic, la îmbunătățirea calității

turistic;

serviciilor furnizate şi la schimbul de bune practici

Performanța actorilor turismului local este generată

între diferiții actori;

corelativ prin publicitatea în mass media la nivel

Principalii factori care au impact pozitiv asupra

regional şi naţional, activitatea de marketing,

performanței DMI 5.3 sunt: organizarea internă a

contribuția factorilor interesați de la nivel local pentru

echipelor de proiect, prin valorificarea personalului

a asigura sustenabilitatea evenimentelor în viitor;

calificat și formarea de rețele cu alte CNIPT-uri și cu actorii economici locali.

27

Recomandări Evaluarea strategieinaționale de promovare a

Implicarea în special a tour operatorilor prin evenimente

brandului turistic;

internaționale și competiții ad-hoc (foto, video etc),

Transmiterea unui mesaj specific al țării ca destinație

pentru a promova imaginea României în străinătate;

turistică, care să promoveze unicitatea naturală și

Consolidarea rețelei CNIPT prin platforme web către alți

culturală pentru ţările vizate;

parteneri din străinătate;

Derularea de campanii on-line, în mass media

Intervențiile să fie concentrate pe promovarea

specifice, în străinătate;

mediului de afaceri din domeniul turismului.

28

Recommendations

business tourism.

Conducting online campaigns in specific media and

Interventions must be focused on promoting

uniqueness to the countries concerned;

to other partners abroad;

destination that promotes natural and cultural

CNIPT network consolidation through web platforms

Sending a specific country message as a tourist

video, etc.) to promote Romania's image abroad;

brand;

international events and ad hoc competitions (photo,

strategy to promote the tourism

Involvement of tour operators in particular, through

Evaluation of the national

abroad;

28

Best practices

the project teams, by harnessing qualified personnel

sustainability of future events;

performance of KAI 5.3 are: internal organization of

contribution of local stakeholders to ensure the

The main factors that have a positive impact on the

in regional and national marketing activities, the

best practices between the various actors;

generated in correlation with: mass media advertising

provided quality of services and the exchange of

The performance of local tourism stakeholders is

of the tourist center, the improvement of the

tourists helped promote the tourism brand;

Interventions contribute directly to the development

Media campaigns, as well as the websites for potential

and networking with other National Centre for Tourism Information and Promotion sites and local business.

27

Promoting the tourism potential and setting-up the needed infrastructure in order to increase Romania’s attractiveness as tourism destination Impact assessment of Key Area of Intervention KAI 5.3 The intervention aimed: Improvement of the tourism potential through developing the necessary infrastructure, increasing the attractiveness of Romania; Promoting Romania's tourism potential, improving the country's image; Creation of Promotion and Tourist Information Centers (PTIC); Increasing the number of tourists; Promotion of an integrated travel offer.

Analyzed period: 2008 - 2014 Number of projects assessed: - 295 projects ERDF contribution: - 127,31 mil. Euro

FINDINGS: The number of tourists in Romania from the European Union returned to the level of pre-crisis period, with slightly higher values (4.8 million arrivals in 2007 and about 5 million in 2014); The increase of the rating score of the Romanian brand strategy goes from 0.43 to 0.77; Improving the quality and intensifying the media campaigns and research; The interventions have helped to promote local tourism activities, generating the opportunity to start similar projects and exchange of best practices in the tourism sector; Promoting the development of tourism by developing the resort and improving service quality, producing effects especially to the selective travelers.

26

Monitoring visits carried out during the projects’ lifetime.

upgrading accommodation with the development

beneficiaries’ cash-flow;

impact (this means a combination of activities for

Payment claim mechanism relieved pressure off the

The holistic approach of the project is decisive for

and coach employees for improved quality;

and local interest;

Setting up a quality assurance team to monitor, train

implemented in big cities and resorts of national

accommodation facilities;

The most effective projects are those that were

for promotion; partnerships between leisure and

businesses ;

accommodation, food and leisure services in exchange

through stimulating other investments and related

Organizing national and international events, providing

and other dues paid to the local budget, but also

national and international advertising campaigns;

and zonal level, through the jobs created and the taxes

number of tourists: participating in international fairs,

Impact on socio-economic development at the local

Diversification of promoting activities, increases the

Increasing the turnover of the the ROP beneficiaries ;

length of stay;

Increasing the number of employees/SME beneficiary;

a regional tourism product and increase the average

ROP beneficiaries;

accommodation and leisure infrastructure, generates

Exceeding the national level on the occupancy rates of

projects (implemented by public authorities),

establishment”;

Synergistic implementation of infrastructure access

establishment and overnight stays in accommodation

for the SME;

Increasing the number of “arrivals in accommodation

increased number of visitors, hence higher income

stay units;

Building a dry tubing slope for the summer led to

Increasing the number of rooms and newly created

Best Practice

Fidings

of leisure facilities); Three key elements that positively influence the impact of the intervention: - Tourism strategic management expertise; - Project management expertise; - Effective advertising, as part of a marketing strategy.

25

Creation/development/modernization of specific infrastructure for sustainable valorization of natural resources with tourism potential and for increasing the quality of tourism services Impact assessment of Key Area of Intervention (KAI) 5.2 The intervention aimed: Developing the sites with potential for tourism (canyons, gorges, caves, glacier lakes etc.), building the required infrastructure, rehabilitating and developing access ways to the main natural tourist attractions (alpine refuges, marking tourist routes, information billboards, camping areas, mountain rescue posts); Diversifying tourist services (developing spa tourism, by improving, modernizing and equipping the spas, including health centers and therapy salt mines, developing mineral and saline spring water collection and transport etc.); Set-up/expand tourist leisure facilities (including accommodation), for the purpose of increasing the number of tourist and length of stay (swimming pools, mini-golf courses, tennis, paint-ball, narrow railway tourism in hilly and mountain areas etc.).

Analyzed period: January 1, 2007 - December 31, 2014 Number of projects assessed: 43, completed by December 31, 2013 ERDF contribution: 68,5 milioane Euro

24

activities.

Sharing best practices between different

volume of information available for future evaluation

epresented an asset;

intervention in the local context and the increasing

from other sources of financing for the activities, r

Ensuring sustainability of the projects by integrating

Providing additional resources from its own funds or

applicants;

monuments into the tourist circuit;

Requiring a detailed action plan from potential

Marketing activities have reintroduced the

development strategy;

in urban areas;

intervention and to contribute to the local tourism

national cultural heritage and local cultural heritage

communities to increase the sustainability of the

consideration three types of monuments: UNESCO,

Interventions to consider and involvement of local

The restoration of cultural heritage must take into

Recommendations

Best practices

stakeholders in the tourism sector generates multivalent collaborative networks.

23

Restoration and sustainable valorization of cultural heritage and setting up/modernization of related infrastructure Impact assessment of Key Area of Intervention (KAI) 5.1 The intervention aimed: Restoration, promotion, preservation of cultural heritage (historic buildings, monuments, museums, theaters) in order to improve the potential of cultural tourism in Romania; Improving the attractiveness of the territory, increase the tourism potential of the country and creating new jobs, as well as generating economic growth at local level.

Abalyzed period: 2008 - 2014 Number of projects assessed - 40 projects ERDF contribution - 258,59 mil. Euro

FINDINGS: Increasing the number of visitors by 113% in the cultural patrimony objectives (from 292 677 visitors in 2,008 to 623,463 in 2014); The national cultural heritage projects, recorded the best performance - noted a larger increase in the number of visitors and a lower average cost per visitor; Increasing the number of employees by 20.47% through cultural heritage (from 293 in 2008 to 353 in 2014 the number of employees); Increasing the number of visitors of the monuments in 2014; The key benefit of the intervention is restoring cultural heritage (churches, monasteries, part of the historic centers of cities etc.).

22

d.

Promote networking and best practice exchanges

particularly in the second call for proposals;

Development Agencies ;

secured the required resources to finance the projects,

Continued delivery of assistance under the Regional

reorganization of microenterprises activities and

microenterprises;

The request of a business plan has stimulated general

and Industry and Regional Development Agencies for

opportunities;

Support help-desks set up in the Chamber of Commerce

beneficiaries have shown openness to new

plan writing);

the provision of service has improved and the

Promote training beneficiaries (in particular, for business

They have been created new brands and products,

Recommendations

Conclusions

The more the microenterprises were open to the market, between companies;

by applying the subsidiarity principle.

tendency to apply for funding than those in the

stakeholders, in order to reduce domestic inequality,

in the construction sector and industry have a lower

More significant involvement of local and regional

companies being active in services (microenterprises

implement the Horizon 2020 Programme;

The availability of information on relevant websites,

support highly-performing microenterprises, in order to

cash-flow difficulties;

of the innovation chain (training and development) that

implementation, because of the increased capital and

critical generic technologies etc.), funding certain stages

The economic crisis impacted upon the KAI 4.3

more innovative approach (high-tech, IT&C, essential

related to bank loan access (e.g. loans and collaterals).

Selection criteria and calls for projects should promote a

The main difficulties confronting the beneficiaries are

claim mechanism;

applicants’ expectations;

Simplify the procedure; continue to use the payment

were called upon, but their services didn’t meet the

and improve the assessment grid;

Writing the project was a challenge and consultants

process, in view of reducing time of each selection stage

and receive funding;

Set clear and transparent timelines for the administrative

the more likely they were to be informed about KAI 4.3

services sector) and their good financial standing before receiving the grant.

21

Support for the development of microenterprises Impact evaluation for Key Area of Intervention (KAI) 4.3

The intervention aimed: Support for the development of microenterprises from building, industry and services sectors located in urban areas: Supporting 1.500 microenterprises ; Creating 3.000 new permanent jobs in the supported microenterprises.

Analyzed period: 2018 - august 2014 Number of projects assessed:- 788 projects 43 completed December 31, 2013 ERDF contribution - 210 mil. Euro

FINDINGS: Increased capacity to exploit market opportunities; More strategic focus and changes in scope of business; Increased degree of switching from selling to production; Increased quality of output and supply of the new services; On average, the companies receiving support increased their staff by 3 new employees as compared to the non-supported microenterprises; The beneficiaries of projects completed in 2009 still performed better four years after the end of the intervention, having retained 2.4 more jobs per business than the compared non-beneficiaries; The second call was more efficient in terms of job creation, due to the support provided from ERDF per new job creat

20

Streamlining implementation procedures.

business structure, built on the rehabilitated land

business center built on the rehabilitated land;

(private public partnership) catalyzes sustainable

process and contribute to the sustainability of the

Joint interest and involvement of all stakeholders

investments (PPPs) could accelerate the implementation

natural resources;

Increased involvement of the private sphere of

decontamination, as well as reducing the use of

construction of business incubators;

on the environment are remediation and

Separate funding of the projects - soil remediation and

The main conditions that produce intermediate effects

Recommendations

Best practices

and can accelerate the implementation process; It requires a sectorial environmental strategy and a list of contaminated sites.

19

Rehabilitation of unused polluted industrial sites and preparation for new activities Impact assessment of Key Area of Intervention (KAI) 4.2 The intervention aimed: Promoting economic activities through decontamination of polluted industrial sites, cleaning and rehabilitating them for creating structures of supporting business; Rehabilitation of unused polluted industrial sites and preparation for new activities; Introduction of industrial sites into the economic circuit; Maintaining the soil quality and preventing the negative impacts of industrial sites on human health, animals, plants and the environment.

Analyzed period: 2008 - 2014 Number of projects assessed - 2 projects ERDF contribution - 26,14 mil. Euro

FINDINGS: The intervention supported essential investment for the rehabilitation and future economic development of polluted areas; The interventions met authorities’ needs to decontaminate areas affected by pollution; KAI 4.2, as SOP environment interventions, was due to launch pilot projects that address the basic needs for quality of life in Romania and economic development in the affected areas.

18

added value.

Stimulating entrepreneurship by organizing start-up

Providing support where it can be generated more

services;

and accelerators;

In-depth knowledge of the local demand of business

perspective of business centers, business incubators

and public actors;

Encouraging the creation of networks from the

It is essential existence of network system with private

and knowledge;

demand-driven services and innovation;

Supporting innovation and technology transfer services

The sustainability of the centers is provided by

Recommendations

Best practices

competitions, awards and specific services supported the promotion of an innovation-oriented approach among the beneficiaries; The experience and skills of individuals involved in developing the proved to be the backbone of the implementation mechanism and service delivery; The simultaneous investment in infrastructure and training produced better results; The incentives "in terms of grant" in order to create more employment effects have been validated in terms of efficiency.

17

Development of sustainable business support structures of regional and local importance Impact assessment of Key Area of Intervention (KAI) 4.1 The intervention aimed: Creation and modernization of regional and local business support structures aimed at attracting investment, revival and development of local and regional economy; Developing entrepreneurship in Romania according to the Community Strategic Guidelines 2007-2013; Providing new opportunities on the labor market within the structures of supporting business; Increasing the attractiveness of regions for investment in economic and social activities; Increasing the competitiveness of Romania.

Analyzed period: 2010 - 2014 Number of projects assessed- 99 projects, out of which 27 finalized projects ERDF contribution - 209,94 mil. Euro

FINDINGS: This intervention has provided financial resources during the economic crisis when credit market conditions were difficult; They were created 2.105 jobs in the structures of supporting the business; A center hosts an average of 9 microenterprises and 6 SMEs and offers 5 services/functions; There were multiple jobs created: operational staff - an average of 9 persons per Center and administrative staff an average of 4 persons per Center; The business centers have invested in developing the human resources skills; The average budget of the business centers is approximately 3.7 million lei; The services offered to hosted SMEs improved by equipping new offices and developing networks for entrepreneurship; The integration of different business services in the same center and capacity to offer new services to beneficiaries were facilitated.

16

in projects.

The projects that were able to plan ahead from the very

Improving cooperation among stakeholders involved

outputs;

events in partnership with County School Inspectorates;

School consortia support transferability of project

Promotion of projects by organizing some information

(SEN) students;

within the implementation teams;

participation to education for Special Education Needs

involving some representatives of beneficiary schools

needs generate visible results by facilitating access and

community in planning the ROP operations, also

Investments made in schools for students with special

Continuing the involvement of the school-based

activities;

nursery) the possibility to develop;

of programmes and rooms targeted as extra-curricular

educational activities provides schools (kindergartens,

school canteens, rooms for “school after school” – type

Creating some additional space for extracurricular

Investments in expansions, including investments in

could be carried out without a new contract;

in using resources;

investment designers, so that any possible changes

demographic trend eliminates the risk of poor efficiency

Establishing long term contractual relations with

Interventions performed in communities with upward

Lessons learned

Best practices

beginning longer implementation periods for carrying out public procurement procedures proved to be successful; Investments complementary to other projects, partnerships with local companies delivered through a synergetic approach of projects within larger scale programmes for local development cause transferability of project outputs.

15

Improvement of educational conditions may represent an additional driver for school performance. In national colleges and science-based highschool education, it can be seen the improvement of the school performance for students included in the secondary school; “Spreading” effect of investments - other students in the same locality who are not registered with the school targeted directly by investments benefit also from the refurbishment of the educational space (e.g., foreign languages, science and information and technology modern labs, art centers or sports-related facilities). This “spreading” effect takes place either through participation in school consortia, or through specific partnerships concluded by schools, with the support of local authorities.

14

Rehabilitation/modernization/development and equipping of pre-university, university education and continuous vocational training infrastructure Impact evaluation for the Key Area of Intervention (KAI) 3.4 The intervention aimed: The improvement of educational infrastructure quality, of schools’ equipment, of accommodation structures for students and of adult learning centers in order to provide an educational process according to European standards and an increased participation of students and adults to the educational process.

Analyzed period 2008 - septembrie 2013 Number of projects assessed - 146 projects ERDF contribution - 68,9 mil. Euro.

FINDINGS: Improvement in the quality of educational infrastructure – investments made through KAI 3.4 provide good results where alternate resources (the local budget and the national budget) do not allow extensive funding; Facilitating access to education, especially for children/young people in the rural areas and from other vulnerable social environments, where other factors are decisive in achieving the targeted effect; Facilitating participation to education for students with disabilities represents a direct effect of the intervention, both by creating a more friendly learning environment, adapted to students with special educational needs, and by providing modern learning materials and equipment; An increase in the students’ educational performance from the middle school, in the rural areas;

13

FINDINGS: Reduction of intervention time in case of emergencies - the average response time of the units in rural areas is 22 minutes and 51 seconds (compared to baseline 30-45 minutes), while in urban areas 10 minutes and 51 seconds (initial value is 20 minutes); Enhancing public safety level, the quality of first aid and services in the remote and disadvantaged areas; Reinforcing of integrated organization and regional cooperation in responding to emergency situations;

ensure continuity and coherence effects;

inspectorates for emergency situations;

Financing a similar intervention to KAI 3.3 in order to

collaborations between local authorities and

lower costs;

Developing and strengthening partnerships and

level to ensure the homogeneity of the endowment and

involved is a key factor in order to achieve results;

Performing purchases of equipment at the central

Providing a qualified personnel - the human resource

procurement;

the Inspectorate for Emergency Situations;

intercommunity development associations and public

conducting a thorough analysis of data provided by

The need to reassess the legal framework on

Assessment of the needs at regional level and

Recommendations

Best practices

Personnel training activities for first aid and emergencies.

12

Improving the equipment of operational units for public safety interventions in emergency situations Impact assessment of Key Area of Intervention (KAI) 3.3 The intervention aimed: Reduction of intervention time for qualified first aid and emergency interventions.

The purchase of vehicles and equipment specific to regional and county operational bases for interventions in emergency situations.

Analyzed period: 2008 - 2014 Number of projects assessed - 22 projects, out of which 14 finalized projects ERDF contribution - 86,63 mil Euro

11

Improved quality for provided services, an increase in the number of users, improvement of equipment and procurement of modern equipment within the social care centers; Higher satisfaction degree among users in terms of services, available space, installations and utilities and also a widely spread perception of improvement related to services, available space, facilities and utilities

Best practices

Recomandări

Identification of needs – valuable investments relying on The need for territorial analysis in order to examine the

centers in order to evaluate the project’s sustainability.

Efficient management of human resources, association

exchange of experiences, creation of networking between

administrative burden;

Capitalization of the lessons learned, promoting the

services infrastructure) contributed to diminishing the

employees;

Close cooperation in project design (at the level of social

Monitoring the result of interventions on the number of

promoted easier;

effects’ concentration;

a precise assessment of potential users’ needs were

with other funds supporting vocational training and social activities of the centers (such as those funded through ESF); Ability to establish and strengthen networks – additional financial resources have been identified and charity actions were organized by involving volunteers; Promoting private fund raising by identifying sponsors and cooperation between private and public sector.

10

Refurbishment/modernization/development and equipping social services infrastructure Impact evaluation for the Key Area of Intervention (KAI) 3.2

The intervention aimed to: Improve quality and capacity of social services infrastructure; Provide social conditions and improve the quality of living standards (the “open doors” principle – all services provided are accessible to vulnerable groups within community); Provide new social inclusion opportunities and labor market integration for a large number of individuals in difficult situations.

Analyzed period: 2008 - 2012 Number of projects analyzed - 35 projects ERDF contribution - 82 mil. Euro

FINDINGS: Numbers of users – better performance for beneficiaries as compared to non-beneficiaries; Numbers of users within residential centers as compared to other categories of centers – better performance for beneficiaries as compared to non-beneficiaries; Number of full time equivalent employees – better performance for beneficiaries as compared to non-beneficiaries. The growth in the number of employees, even small, means that the social services infrastructures were able to cover expenses with the new staff and to consequently adapt their organizational structures; Active members of the families were released from taking care of the persons they upkeep during their working hours;

9

patients' perceptions.

project implementation;

access to health services and investigating the

Efficient coordination of medical staff during

intervention in future years in terms of improving

the apparition of the effects;

It is appropriate to evaluate the sustainability of the

Rigorous analysis of needs is a precondition for

facilitating access to integrated medical services;

beneficiaries in the planning process;

health infrastructure and

health personnel) and the involvement of potential

Continuation of funding in

Development of partnerships (local authorities,

Recommendations

Best practices

The existence of an investment plan on the modernization of outpatient departments and the acquisition of advanced equipment.

8

Rehabilitation/modernization/equipping of the health services’ infrastructure Impact assessment of Key Area of Intervention (KAI) 3.1

The intervention aimed: Improving the quality of healthcare services and regionally balanced distribution in order to ensure equal access to health services of the population; Development of a modern system for the treatment and prevention accessible to all individuals through the rehabilitation, modernization and equipping of the county hospitals; Rehabilitation, modernization and equipping outpatient departments with investigative equipment; Development of outpatient services, especially for patients in disadvantaged areas so that most cases to be resolved in the upgraded outpatient departments; Analyzed period: 2008 - 2014 Number of projects assessed - 104 projects, out of which 41 finalized ERDF contribution - 191,02 mil. Euro

FIDINGS: Increasing the number of users from 5,700 in 2008 to 8,314 in 2014; Increasing user satisfaction regarding accessibility and quality of health services; Positive effects in terms of medical staff skills development; The effects of intervention are sustainable after the completion of the projects as well.

7

Best practices Connectivity infrastructure investments produce positive net effect on economic and social development; Integrated approach – participation and consulting the citizens, associations of interests, NGOs, economic actors and universities; The polycentric approach supports the sustainable development of all regions; Involving more cities in project development improved the administrative capacity and programming of local authorities.

Recommendations Continuation of these interventions in the new programming period, including other urban areas; Correlation of launching calls for projects at government level and the implementation of the interventions can facilitate the integrated interventions at the community level, according to the needs of beneficiaries; Analysis of additional socio-economic indicators in order to classify the areas eligible for intervention (sub-domains); Strategic diversification of urban interventions, based on different socio-economic needs of the cities; The use of financial instruments such as Integrated Territorial Investment (ITI) and community-led local development (CLLD); Strengthening the administrative capacity of human resources at local level; The inclusion of environmental protection and energy efficiency dimension in the forthcoming urban development policies.

6

Integrated urban development plans Impact assessment of Key Area of Intervention (KAI) 1.1 The intervention aimed: Development, regeneration and increase of the economic and social role of cities in terms of urban centers, urban development poles and growth poles; Meeting the needs of the Romanian cities in order to build a sustainable and competitive national urban system; Increasing economic and demographic density of the main urban centers and facilitating their connection to smaller towns.

The analyzed period: 2008 - August, 2014 The number projects assessed: - 192 projects ERDF contribution - 1,26 bilion Euro

FINDINGS: The intervention generated improvements in basic urban infrastructure, social infrastructure: It contributed to increasing the quality of life, mobility, accessibility and public safety sense; Development of urban infrastructure has generated new jobs; Increased attractiveness of funded urban centers compared to non-beneficiaries; Increased enrollment rates in secondary school education of the population; Growth poles, urban development poles and urban centers have helped promote the urban network.

5

Impact assessments The Regional Operational Programme 2007-2013 was implemented, European money has been invested through co-financed projects, achievements were reported ... But what is the impact on society? How to identify the net effect? The changes, improvements are due to the projects, to the financed programs of structural instruments? What are the differences that these grants have produced?

Regional Operational Programme Managing Authority tried to find the answers to these questions, by making a series of impact assessments, the first of this kind in Romania.

What are impact assessments?

The impact assessment is designed to answer key questions for evidence-based policy: what works, what does not work, why and for how long/under what conditions? Impact assessments identify the changes and results that can be directly attributed to a program, project or policies.

Counterfactual analysis is a complex method of impact evaluation , which quantifies the net effect of the interventions after some comparisons between beneficiaries and non-beneficiaries. By applying the counterfactual method it is possible a comparative analysis of the effects of interventions providing both information on the net effect of intervention and inputs for cost-benefit analysis of KAI . In order to identify the impact there is a need for passage of at least one year of to the completion of projects, so not all projects financed from POR 2007-2013 were the subject of this evaluation.

The new requirements regarding evaluation, derived from the Europe 2020 Strategy, introduce the impact analysis and measurement of the net effect as the basic assessment tasks to be achieved.

After applying the counterfactual methods to the mix of quantitative and qualitative methods, evaluation studies have highlighted the impact of net effects, independent of the effects exerted by other contextual factors of the funding on of the type of target group.

4