# Europos Sąjungos C 26/2008

| | ISSN 1725-521X |
| --- | --- |
| Europos Sąjungos
  oficialusis leidinys | C 26 |
| | |
| Leidimas lietuvių kalba | Informacija ir prane_imai | 51 tomas2008m. sausio 30d. |

ISSN 1725-521X

Europos Sąjungos

oficialusis leidinys

C 26

Leidimas lietuvių kalba

Informacija ir prane_imai

51 tomas2008m. sausio 30d.

---

| Prane_imo Nr. | Turinys | Puslapis |
| --- | --- | --- |
| | IV   Pranešimai |
| | EUROPOS SĄJUNGOS INSTITUCIJŲ IR ORGANŲ PRANEŠIMAI |
| | Audito Rūmai |
| 2008/C 026/01 | Specialioji ataskaita Nr. 9/2007 dėl ES mokslinių tyrimų ir technologinės plėtros bendrųjų programų vertinimo: ar Komisijos taikomas metodas galėtų būti pagerintas? su Komisijos atsakymais | 1 |

Prane_imo Nr.

Turinys

Puslapis

IV   Pranešimai

EUROPOS SĄJUNGOS INSTITUCIJŲ IR ORGANŲ PRANEŠIMAI

Audito Rūmai

2008/C 026/01

Specialioji ataskaita Nr. 9/2007 dėl ES mokslinių tyrimų ir technologinės plėtros bendrųjų programų vertinimo: ar Komisijos taikomas metodas galėtų būti pagerintas? su Komisijos atsakymais

1

| LT | |
| --- | --- |

LT

---

IV Pranešimai

EUROPOS SĄJUNGOS INSTITUCIJŲ IR ORGANŲ PRANEŠIMAI

Audito Rūmai

| 30.1.2008 | LT | Europos Sąjungos oficialusis leidinys | C 26/1 |
| --- | --- | --- | --- |

30.1.2008

LT

Europos Sąjungos oficialusis leidinys

C 26/1

---

SPECIALIOJI ATASKAITA Nr. 9/2007

dėl ES mokslinių tyrimų ir technologinės plėtros bendrųjų programų vertinimo: ar Komisijos taikomas metodas galėtų būti pagerintas? su Komisijos atsakymais

(pagal EB sutarties 248 straipsnio 4 dalies antrą pastraipą)

(2008/C 26/01)

TURINYS

| I–V | SANTRAUKA |
| --- | --- |

I–V

| 1–14 | ĮVADAS |
| --- | --- |

1–14

| 1–7 | Europos Sąjungos vaidmuo remiant su moksliniais tyrimais ir technologine plėtra susijusią veiklą |
| --- | --- |

1–7

| 8–14 | Bendrųjų programų vertinimas ir stebėsena |
| --- | --- |

8–14

| 15–18 | AUDITO APIMTIS IR METODAS |
| --- | --- |

15–18

| 19–109 | AUDITO PASTABOS |
| --- | --- |

19–109

| 19–37 | Intervencinė logika, tikslų nustatymas ir veiklos rodikliai |
| --- | --- |

19–37

| 38–49 | Vertinimo strategija |
| --- | --- |

38–49

| 50–68 | Bendrųjų programų vertinimo organizavimas |
| --- | --- |

50–68

| 69–97 | Vertinimo metodikos ir būdai |
| --- | --- |

69–97

| 98–109 | Vertinimo metu nustatytų faktų sklaida ir panaudojimas |
| --- | --- |

98–109

| 110–118 | BENDROJI IŠVADA |
| --- | --- |

110–118

I priedas. Viešosios intervencijos mokslinių tyrimų ir technologinės plėtros srityje poveikio ir rezultatų įvertinimas

II priedas. BP4–BP7 teisėkūros sprendimų nuostatos dėl stebėsenos ir vertinimo

III priedas. Pagrindiniai mokslinių tyrimų programų ex post vertinimo ES (BP4–BP6), JAV ir Kanadoje skirtumai

IV priedas. Galima BP7 vertinimo komisijos struktūra

Komisijos atsakymai

SANTRAUKA

| I. | Bendrijos mokslinių tyrimų ir technologinės plėtros bendrosios programos (BP) – tai didžiausias viešasis mokslinių tyrimų finansavimo šaltinis Europos Sąjungoje. Komisija yra atsakinga už bendrųjų programų valdymą ir jų rezultatų vertinimą. |
| --- | --- |

I.

Bendrijos mokslinių tyrimų ir technologinės plėtros bendrosios programos (BP) – tai didžiausias viešasis mokslinių tyrimų finansavimo šaltinis Europos Sąjungoje. Komisija yra atsakinga už bendrųjų programų valdymą ir jų rezultatų vertinimą.

| II. | Auditas apėmė nuo 1995 m. trims pastariesiems programavimo laikotarpiams (BP4, BP5 ir BP6) taikomas stebėsenos ir vertinimo priemones; taip pat buvo pateikta BP7 (2007–2013 m.) apžvalga. Auditas buvo atliktas dalyvaujant ELPA auditorių valdybos nariams ir padedant išorės ekspertams. |
| --- | --- |

II.

Auditas apėmė nuo 1995 m. trims pastariesiems programavimo laikotarpiams (BP4, BP5 ir BP6) taikomas stebėsenos ir vertinimo priemones; taip pat buvo pateikta BP7 (2007–2013 m.) apžvalga. Auditas buvo atliktas dalyvaujant ELPA auditorių valdybos nariams ir padedant išorės ekspertams.

| III. | Audito metu buvo nagrinėjamas klausimas, ar Komisijos metodas, kuriuo ji vadovavosi vertindama bendrųjų programų rezultatus, buvo adekvatus. Šiame kontekste Audito Rūmai tikrino, ar Komisija įvykdė vertinimui skirtus teisinius reikalavimus ir nustatė, ar jos vertinimo ir stebėsenos sistema atitiko suinteresuotųjų šalių lūkesčius. Visų pirma, Audito Rūmai domėjosi, ar






  i) | bendrosios programos bei jų sudėtinės programos buvo paremtos intervencijos logika, suteikiančia patikimą vertinimo ir stebėsenos pagrindą; |
| --- | --- | --- |

III.

Audito metu buvo nagrinėjamas klausimas, ar Komisijos metodas, kuriuo ji vadovavosi vertindama bendrųjų programų rezultatus, buvo adekvatus. Šiame kontekste Audito Rūmai tikrino, ar Komisija įvykdė vertinimui skirtus teisinius reikalavimus ir nustatė, ar jos vertinimo ir stebėsenos sistema atitiko suinteresuotųjų šalių lūkesčius. Visų pirma, Audito Rūmai domėjosi, ar

i)

bendrosios programos bei jų sudėtinės programos buvo paremtos intervencijos logika, suteikiančia patikimą vertinimo ir stebėsenos pagrindą;

| ii) | Komisija buvo nustačiusi bendrųjų programų vertinimo strategiją; |
| --- | --- |

ii)

Komisija buvo nustačiusi bendrųjų programų vertinimo strategiją;

| iii) | Komisijos vykdomo bendrųjų programų vertinimo sistemos organizacinė struktūra užtikrino, kad vertinimas būtų tinkamai koordinuojamas, jam būtų skirti atitinkami ištekliai, o suinteresuotosios šalys jį laikytų pakankamai nepriklausomu; |
| --- | --- |

iii)

Komisijos vykdomo bendrųjų programų vertinimo sistemos organizacinė struktūra užtikrino, kad vertinimas būtų tinkamai koordinuojamas, jam būtų skirti atitinkami ištekliai, o suinteresuotosios šalys jį laikytų pakankamai nepriklausomu;

| iv) | vertinimui naudotos metodikos buvo patenkinamos; |
| --- | --- |

iv)

vertinimui naudotos metodikos buvo patenkinamos;

| v) | su vertinimu ir stebėsena susijusios veiklos metu buvo surinkta informacija ir parengta analizė, kuria būtų galima pasinaudoti tobulinant vykdomas programas ir rengiant bendrąsias programas ateityje. |
| --- | --- |

v)

su vertinimu ir stebėsena susijusios veiklos metu buvo surinkta informacija ir parengta analizė, kuria būtų galima pasinaudoti tobulinant vykdomas programas ir rengiant bendrąsias programas ateityje.

| IV. | Audito Rūmų audito metu buvo nustatyti šie faktai ir išvados:






  i) | dėl aiškios intervencijos logikos nebuvimo ir netiksliai apibrėžtų programos tikslų, taip pat dėl prasto veiklos rezultatų įvertinimo stebėsena ir vertinimas nebuvo veiksmingi; |
| --- | --- | --- |

IV.

Audito Rūmų audito metu buvo nustatyti šie faktai ir išvados:

i)

dėl aiškios intervencijos logikos nebuvimo ir netiksliai apibrėžtų programos tikslų, taip pat dėl prasto veiklos rezultatų įvertinimo stebėsena ir vertinimas nebuvo veiksmingi;

| ii) | dėl to, kad nebuvo integruotos vertinimo strategijos, dėl kurios būtų susitarę bendrąsias programas įgyvendinantys mokslinių tyrimų generaliniai direktoratai, skirtingos Komisijos tarnybos taikė nenuoseklius metodus. Tai patvirtina, pavyzdžiui, faktas, kad buvo nepakankamai įvertintos svarbios bendrųjų programų dalys; |
| --- | --- |

ii)

dėl to, kad nebuvo integruotos vertinimo strategijos, dėl kurios būtų susitarę bendrąsias programas įgyvendinantys mokslinių tyrimų generaliniai direktoratai, skirtingos Komisijos tarnybos taikė nenuoseklius metodus. Tai patvirtina, pavyzdžiui, faktas, kad buvo nepakankamai įvertintos svarbios bendrųjų programų dalys;

| iii) | bendrųjų programų vertinimas buvo decentralizuotas, generalinių direktoratų, įgyvendinančių bendrąsias programas, taikomi veiklos koordinavimo mechanizmai buvo neveiksmingi, o Komisijos centrinėms tarnyboms nebuvo suteiktas įgyvendinimo priežiūros vaidmuo. Tačiau apskritai mokslinių tyrimų generaliniai direktoratai atitiko formalius Komisijos nustatytus vertinimo reikalavimus. Vertinimo komisijų, sudarytų iš aukštos kvalifikacijos Komisijos paskirtų išorės ekspertų svarbiems vertinimams atlikti, pasitelkimas visiškai atitiko Bendrijos ypatumus. Tačiau šios laikinosios komisijos iš pat pradžių nebuvo įsitraukusios į šį procesą, kad galėtų daryti įtaką įrodymų rinkimui, be to, jų galimybės imtis tolesnių priemonių laikui bėgant nagrinėjant svarbius klausimus buvo ribotos. Naudojantis tik visai bendrajai programai vertinti skirtos komisijos paslaugomis (be komisijos, kuri buvo įsteigta vienai specialiajai programai), buvo skiriamas nepakankamas dėmesys konkretiems su įvairiomis bendrųjų programų mokslinėmis sritimis susijusiems klausimams; |
| --- | --- |

iii)

bendrųjų programų vertinimas buvo decentralizuotas, generalinių direktoratų, įgyvendinančių bendrąsias programas, taikomi veiklos koordinavimo mechanizmai buvo neveiksmingi, o Komisijos centrinėms tarnyboms nebuvo suteiktas įgyvendinimo priežiūros vaidmuo. Tačiau apskritai mokslinių tyrimų generaliniai direktoratai atitiko formalius Komisijos nustatytus vertinimo reikalavimus. Vertinimo komisijų, sudarytų iš aukštos kvalifikacijos Komisijos paskirtų išorės ekspertų svarbiems vertinimams atlikti, pasitelkimas visiškai atitiko Bendrijos ypatumus. Tačiau šios laikinosios komisijos iš pat pradžių nebuvo įsitraukusios į šį procesą, kad galėtų daryti įtaką įrodymų rinkimui, be to, jų galimybės imtis tolesnių priemonių laikui bėgant nagrinėjant svarbius klausimus buvo ribotos. Naudojantis tik visai bendrajai programai vertinti skirtos komisijos paslaugomis (be komisijos, kuri buvo įsteigta vienai specialiajai programai), buvo skiriamas nepakankamas dėmesys konkretiems su įvairiomis bendrųjų programų mokslinėmis sritimis susijusiems klausimams;

| iv) | buvo pateiktos netinkamos metodinės gairės; vertintojai susidūrė su sunkumais renkant svarbius duomenis; nebuvo atlikti vertinimo tyrimai, kuriuose būtų nagrinėjamos ilgalaikės bendrųjų programų išdavos ir poveikiai, o ne trumpalaikiai programų įgyvendinimo klausimai; |
| --- | --- |

iv)

buvo pateiktos netinkamos metodinės gairės; vertintojai susidūrė su sunkumais renkant svarbius duomenis; nebuvo atlikti vertinimo tyrimai, kuriuose būtų nagrinėjamos ilgalaikės bendrųjų programų išdavos ir poveikiai, o ne trumpalaikiai programų įgyvendinimo klausimai;

| v) | dėl pirmiau išvardytų priežasčių ir dėl vertinimų, kurie dažnai buvo atliekami per anksti, kad būtų galima nagrinėti svarbiausius klausimus, Komisijos bendrųjų programų vertinimo sistema menkai tepasitarnavo politikos formuotojams, suinteresuotiesiems asmenims ar net pačiai Komisijai. Tokiu būdu yra mažai žinoma apie programos tikslų pasiekimą ir bendrųjų programų rezultatus. |
| --- | --- |

v)

dėl pirmiau išvardytų priežasčių ir dėl vertinimų, kurie dažnai buvo atliekami per anksti, kad būtų galima nagrinėti svarbiausius klausimus, Komisijos bendrųjų programų vertinimo sistema menkai tepasitarnavo politikos formuotojams, suinteresuotiesiems asmenims ar net pačiai Komisijai. Tokiu būdu yra mažai žinoma apie programos tikslų pasiekimą ir bendrųjų programų rezultatus.

| V. | Audito Rūmai rekomenduoja:






  i) | ateityje rengiamuose teisės aktuose aiškiai įvardyti intervencijos logiką. Turėtų būti paaiškintos pagrindinės prielaidos bei sąsaja tarp mokslinių ir socialinių bei ekonominių tikslų bei parengti atitinkami veiklos rodikliai; |
| --- | --- | --- |

V.

Audito Rūmai rekomenduoja:

i)

ateityje rengiamuose teisės aktuose aiškiai įvardyti intervencijos logiką. Turėtų būti paaiškintos pagrindinės prielaidos bei sąsaja tarp mokslinių ir socialinių bei ekonominių tikslų bei parengti atitinkami veiklos rodikliai;

| ii) | bendrąsias programas įgyvendinantys generaliniai direktoratai turėtų parengti integruotą vertinimo strategiją (ir dėl jos susitarti). Visų pirma turėtų būti vadovaujamasi nuosekliu metodu nustatant minimalų išsamaus vertinimo lygį siekiant atsižvelgti į kiekvienos mokslinės srities specifiką; |
| --- | --- |

ii)

bendrąsias programas įgyvendinantys generaliniai direktoratai turėtų parengti integruotą vertinimo strategiją (ir dėl jos susitarti). Visų pirma turėtų būti vadovaujamasi nuosekliu metodu nustatant minimalų išsamaus vertinimo lygį siekiant atsižvelgti į kiekvienos mokslinės srities specifiką;

| iii) | turėtų būti apsvarstyta galimybė įsteigti jungtinę vertinimo tarnybą, skirtą mokslinių tyrimų generalinių direktoratų vykdomai visos bendrosios programos vertinimo veiklai koordinuoti, ir sukurti vertinimo komisijų (ir pakomisių), kurias sudarytų išorės ekspertai, sistemą. Šios komisijos turėtų būti įsteigtos pakankamai anksti, kad Komisijai galėtų teikti veiksmingą pagalbą. Ši pagalba turi būti teikiama viso programavimo laikotarpio metu ir jam pasibaigus; |
| --- | --- |

iii)

turėtų būti apsvarstyta galimybė įsteigti jungtinę vertinimo tarnybą, skirtą mokslinių tyrimų generalinių direktoratų vykdomai visos bendrosios programos vertinimo veiklai koordinuoti, ir sukurti vertinimo komisijų (ir pakomisių), kurias sudarytų išorės ekspertai, sistemą. Šios komisijos turėtų būti įsteigtos pakankamai anksti, kad Komisijai galėtų teikti veiksmingą pagalbą. Ši pagalba turi būti teikiama viso programavimo laikotarpio metu ir jam pasibaigus;

| iv) | turėtų būti tinkamai išanalizuoti vertinimui ir stebėsenai skirti duomenų reikalavimai bei plačiau naudojamasi kitais esamais duomenų šaltiniais. Komisija taip pat turėtų racionalizuoti dalyviams skirtus ataskaitų teikimo reikalavimus. Galiausiai, ji turėtų parengti išsamų bendrųjų programų vertinimo vadovą ir sukurti įvairesnes vertinimo metodikas bei būdus, kurie būtų naudojami atliekant vertinimus šioje srityje; |
| --- | --- |

iv)

turėtų būti tinkamai išanalizuoti vertinimui ir stebėsenai skirti duomenų reikalavimai bei plačiau naudojamasi kitais esamais duomenų šaltiniais. Komisija taip pat turėtų racionalizuoti dalyviams skirtus ataskaitų teikimo reikalavimus. Galiausiai, ji turėtų parengti išsamų bendrųjų programų vertinimo vadovą ir sukurti įvairesnes vertinimo metodikas bei būdus, kurie būtų naudojami atliekant vertinimus šioje srityje;

| v) | Komisija turėtų nustatyti vertinimo, kuris būtų tinkamas atsižvelgiant į BP7 teisės aktuose nustatytus terminus, rūšį ir apimtį bei nurodyti, kaip šie vertinimai gali būti panaudojami pritaikant programas („mokymosi programas“) ir kaip jie gali prisidėti priimant politinius sprendimus. |
| --- | --- |

v)

Komisija turėtų nustatyti vertinimo, kuris būtų tinkamas atsižvelgiant į BP7 teisės aktuose nustatytus terminus, rūšį ir apimtį bei nurodyti, kaip šie vertinimai gali būti panaudojami pritaikant programas („mokymosi programas“) ir kaip jie gali prisidėti priimant politinius sprendimus.

ĮVADAS

Europos Sąjungos vaidmuo remiant su moksliniais tyrimais ir technologine plėtra susijusią veiklą

| 1. | Moksliniai tyrimai ir technologinė plėtra (1) – tai pagrindinis mokslo ir technologijų pažangos bei naujovių variklis. Jie – svarbus indėlis gerinant gyvenimo lygį. Viešosios intervencijos vykdymas mokslinių tyrimų ir technologinės plėtros srityje paprastai yra pagrįstas tuo, kad tai – koreguojamasis vadinamųjų nesėkmių rinkoje veiksnys, kai valstybė teikia paramą mažinant netikrumą, investuojant tose srityse, kuriose moksliniai tyrimai prisideda prie visuomenės gerovės arba tose srityse, kuriose išorės veiksniai turi didelį poveikį. |
| --- | --- |

1.

Moksliniai tyrimai ir technologinė plėtra (1) – tai pagrindinis mokslo ir technologijų pažangos bei naujovių variklis. Jie – svarbus indėlis gerinant gyvenimo lygį. Viešosios intervencijos vykdymas mokslinių tyrimų ir technologinės plėtros srityje paprastai yra pagrįstas tuo, kad tai – koreguojamasis vadinamųjų nesėkmių rinkoje veiksnys, kai valstybė teikia paramą mažinant netikrumą, investuojant tose srityse, kuriose moksliniai tyrimai prisideda prie visuomenės gerovės arba tose srityse, kuriose išorės veiksniai turi didelį poveikį.

| 2. | EB sutarties 163 straipsnyje įtvirtintas Bendrijų vaidmuo remiant mokslinius tyrimus ir technologinę plėtrą. Jame nustatyta, kad „Bendrijos tikslas – stiprinti Bendrijos pramonės mokslinį bei technologinį pagrindą ir skatinti pramonę tapti konkurencingesnę tarptautiniu mastu, kartu remiant visus reikalingus mokslinius tyrimus ...“. 164–173 straipsniuose nustatoma šiuo atžvilgiu vykdytina veikla ir apibrėžiami daugiamečių mokslinių tyrimų ir technologinės plėtros bendrųjų programų apimtis ir įgyvendinimas. Komisija yra atsakinga už pasiūlymų dėl bendrųjų programų teikimą, o Europos Parlamentas ir Taryba bendru sprendimu priima su bendrosiomis programomis susijusius sprendimus bei tvirtina dalyvavimo ir mokslinių tyrimų rezultatų sklaidos taisykles. Specialiąsias programas tvirtina viena Taryba. Bendrąsias programas bendrai įgyvendina šeši generaliniai direktoratai, vadinamieji „mokslinių tyrimų generaliniai direktoratai“ (2). |
| --- | --- |

2.

EB sutarties 163 straipsnyje įtvirtintas Bendrijų vaidmuo remiant mokslinius tyrimus ir technologinę plėtrą. Jame nustatyta, kad „Bendrijos tikslas – stiprinti Bendrijos pramonės mokslinį bei technologinį pagrindą ir skatinti pramonę tapti konkurencingesnę tarptautiniu mastu, kartu remiant visus reikalingus mokslinius tyrimus ...“. 164–173 straipsniuose nustatoma šiuo atžvilgiu vykdytina veikla ir apibrėžiami daugiamečių mokslinių tyrimų ir technologinės plėtros bendrųjų programų apimtis ir įgyvendinimas. Komisija yra atsakinga už pasiūlymų dėl bendrųjų programų teikimą, o Europos Parlamentas ir Taryba bendru sprendimu priima su bendrosiomis programomis susijusius sprendimus bei tvirtina dalyvavimo ir mokslinių tyrimų rezultatų sklaidos taisykles. Specialiąsias programas tvirtina viena Taryba. Bendrąsias programas bendrai įgyvendina šeši generaliniai direktoratai, vadinamieji „mokslinių tyrimų generaliniai direktoratai“ (2).

| 3. | Įvairių Europos Sąjungoje vykdomų politikos krypčių kontekste siekiant skatinti naujoves ir stiprinti konkurencingumą, bendrosios programos yra svarbiausias finansinis instrumentas, Bendrijos lygmeniu prisidedantis prie Lisabonos strategijos (3) ir Barselonos tikslo (4). |
| --- | --- |

3.

Įvairių Europos Sąjungoje vykdomų politikos krypčių kontekste siekiant skatinti naujoves ir stiprinti konkurencingumą, bendrosios programos yra svarbiausias finansinis instrumentas, Bendrijos lygmeniu prisidedantis prie Lisabonos strategijos (3) ir Barselonos tikslo (4).

Image

| 4. | Vykdydama bendrąsias programas Bendrija suteikia finansavimą tyrėjams, dirbantiems ES, asocijuotose šalyse ir tarptautinėse organizacijose. Jų biudžetams skiriamų lėšų dydis per pastaruosius metus ženkliai išaugo – per metus BP7 skiriama 7 217 milijonų eurų, o BP4 buvo skiriama 2 761 milijonas eurų (žr. 1 diagramą). Kiek tai susiję su biudžetiniais asignavimais, bendrosios programos sudaro didžiausią Komisijos tiesioginio centralizuoto valdymo sritį (5). |
| --- | --- |

4.

Vykdydama bendrąsias programas Bendrija suteikia finansavimą tyrėjams, dirbantiems ES, asocijuotose šalyse ir tarptautinėse organizacijose. Jų biudžetams skiriamų lėšų dydis per pastaruosius metus ženkliai išaugo – per metus BP7 skiriama 7 217 milijonų eurų, o BP4 buvo skiriama 2 761 milijonas eurų (žr. 1 diagramą). Kiek tai susiję su biudžetiniais asignavimais, bendrosios programos sudaro didžiausią Komisijos tiesioginio centralizuoto valdymo sritį (5).

| 5. | Bendrosios programos skiriasi nuo daugelio nacionalinių programų tuo, kad jos apima ir pagrindinius, ir taikomuosius mokslinius tyrimus, dalyvaujant pramonės sektoriaus atstovams ir viešosioms mokslinių tyrimų organizacijoms (6). Jas sudaro specialiosios programos (ir paprogramės), susijusios su plačiomis mokslinėmis sritimis. Paprastai šios programos aprėpia keletą sričių, kuriose dėmesys sutelkiamas į konkretesnes mokslines sritis. Tuomet šios sritys yra įgyvendinamos vykdant projektus („netiesioginiai veiksmai“) paskelbus kvietimus teikti paraiškas. Tokiu būdu kiekvienoje srityje finansuojami šimtai atskirų projektų. |
| --- | --- |

5.

Bendrosios programos skiriasi nuo daugelio nacionalinių programų tuo, kad jos apima ir pagrindinius, ir taikomuosius mokslinius tyrimus, dalyvaujant pramonės sektoriaus atstovams ir viešosioms mokslinių tyrimų organizacijoms (6). Jas sudaro specialiosios programos (ir paprogramės), susijusios su plačiomis mokslinėmis sritimis. Paprastai šios programos aprėpia keletą sričių, kuriose dėmesys sutelkiamas į konkretesnes mokslines sritis. Tuomet šios sritys yra įgyvendinamos vykdant projektus („netiesioginiai veiksmai“) paskelbus kvietimus teikti paraiškas. Tokiu būdu kiekvienoje srityje finansuojami šimtai atskirų projektų.

| 6. | Bendra bendrosioms programoms tenkanti viso viešojo finansavimo, skirto moksliniams tyrimams ir technologinei plėtrai Europos Sąjungoje ir jos valstybėse narėse, dalis sudaro 4 %–5 %. Vis dėlto jos poveikis Europoje vykdomos mokslinių tyrimų veiklos pobūdžiui yra žymiai didesnis. Taip yra todėl, kad Bendrijos dotacijos paprastai sudaro tik dalį viso projektui skirto finansavimo. Be to, teikdami prašymą dėl finansavimo, tyrėjai turi įrodyti, kad jų projektai atitinka kvietimuose teikti paraiškas nurodytus tikslus. Tokiu būdu bendrosiomis programomis skatinama taip orientuoti mokslinių tyrimų ir technologinės plėtros veiklą, kad ši atitiktų konkrečius ES tikslus. |
| --- | --- |

6.

Bendra bendrosioms programoms tenkanti viso viešojo finansavimo, skirto moksliniams tyrimams ir technologinei plėtrai Europos Sąjungoje ir jos valstybėse narėse, dalis sudaro 4 %–5 %. Vis dėlto jos poveikis Europoje vykdomos mokslinių tyrimų veiklos pobūdžiui yra žymiai didesnis. Taip yra todėl, kad Bendrijos dotacijos paprastai sudaro tik dalį viso projektui skirto finansavimo. Be to, teikdami prašymą dėl finansavimo, tyrėjai turi įrodyti, kad jų projektai atitinka kvietimuose teikti paraiškas nurodytus tikslus. Tokiu būdu bendrosiomis programomis skatinama taip orientuoti mokslinių tyrimų ir technologinės plėtros veiklą, kad ši atitiktų konkrečius ES tikslus.

| 7. | Pastaraisiais metais buvo atlikti ženklūs bendrųjų programų pakeitimai atsižvelgiant į:






  — | naujus politinius iššūkius (Lisabonos strategiją ir Barselonos tikslus, Europos mokslinių tyrimų erdvės sukūrimą ir vis plačiau naudojamą atvirą koordinavimo metodą (7) mokslinių tyrimų ir naujovių politikos srityje), |
| --- | --- | --- |

7.

Pastaraisiais metais buvo atlikti ženklūs bendrųjų programų pakeitimai atsižvelgiant į:

—

naujus politinius iššūkius (Lisabonos strategiją ir Barselonos tikslus, Europos mokslinių tyrimų erdvės sukūrimą ir vis plačiau naudojamą atvirą koordinavimo metodą (7) mokslinių tyrimų ir naujovių politikos srityje),

| — | pakeistą bendrųjų programų veiklos kryptį, pereinant nuo paprasčiausių techninių problemų sprendimo pagal BP4 ir konkrečių socialinių problemų nagrinėjimo pagal BP5, prie mokslinių tyrimų organizacijų bendradarbiavimo Europos mokslinių tyrimų erdvėje skatinimo ir prisidėjimo kuriant žinių ekonomiką ir visuomenę pagal BP6 ir BP7, |
| --- | --- |

—

pakeistą bendrųjų programų veiklos kryptį, pereinant nuo paprasčiausių techninių problemų sprendimo pagal BP4 ir konkrečių socialinių problemų nagrinėjimo pagal BP5, prie mokslinių tyrimų organizacijų bendradarbiavimo Europos mokslinių tyrimų erdvėje skatinimo ir prisidėjimo kuriant žinių ekonomiką ir visuomenę pagal BP6 ir BP7,

| — | nustatytus ilgesnius programavimo laikotarpius (anksčiau jie būdavo nustatomi ketveriems metams, dabar – septyneriems metams (BP7) pagal 2007–2013 m. finansinę perspektyvą), |
| --- | --- |

—

nustatytus ilgesnius programavimo laikotarpius (anksčiau jie būdavo nustatomi ketveriems metams, dabar – septyneriems metams (BP7) pagal 2007–2013 m. finansinę perspektyvą),

| — | didesnį dalyvaujančių valstybių narių ir susijusių šalių skaičių, |
| --- | --- |

—

didesnį dalyvaujančių valstybių narių ir susijusių šalių skaičių,

| — | padidintą finansavimą, visų pirma pagal dabartinę finansinę perspektyvą, |
| --- | --- |

—

padidintą finansavimą, visų pirma pagal dabartinę finansinę perspektyvą,

| — | Europos mokslinių tyrimų tarybos įsteigimą ir nuo BP7 vykdymo pradžios programos valdymo įgaliojimų perdavimą vykdomosioms įstaigoms, |
| --- | --- |

—

Europos mokslinių tyrimų tarybos įsteigimą ir nuo BP7 vykdymo pradžios programos valdymo įgaliojimų perdavimą vykdomosioms įstaigoms,

| — | vis platesnį naudojimąsi didelio masto finansavimo instrumentais (pvz., kompetencijos tinklais, integruotais projektais, 169 straipsnyje nurodytais projektais, bendromis technologijų iniciatyvomis). |
| --- | --- |

—

vis platesnį naudojimąsi didelio masto finansavimo instrumentais (pvz., kompetencijos tinklais, integruotais projektais, 169 straipsnyje nurodytais projektais, bendromis technologijų iniciatyvomis).

Bendrųjų programų vertinimas ir stebėsena

| 8. | Komisija yra atsakinga už programų įgyvendinimą ir programų rezultatų vertinimą (8). Komisijoje vertinimas atliekamas decentralizuotai, jį patikint generaliniams direktoratams. Centrinės tarnybos (visų pirma Biudžeto generalinis direktoratas ir Generalinis sekretoriatas) teikia paramą ir vykdo koordinavimo veiklą. |
| --- | --- |

8.

Komisija yra atsakinga už programų įgyvendinimą ir programų rezultatų vertinimą (8). Komisijoje vertinimas atliekamas decentralizuotai, jį patikint generaliniams direktoratams. Centrinės tarnybos (visų pirma Biudžeto generalinis direktoratas ir Generalinis sekretoriatas) teikia paramą ir vykdo koordinavimo veiklą.

| 9. | Šioje ataskaitoje naudojamos Komisijos nustatytos apibrėžtys. Vertinimas – tai „intervencijos priemonių analizė, atliekama pagal jų rezultatus, poveikį ir reikmes, kurias yra siekiama patenkinti“ (9), o stebėsena – tai informacijos apie įgyvendinamas programas ir projektus suteikimas siekiant patenkinti valdymo reikmes (10). Taip šios dvi veiklos rūšys yra atskiriamos ir šiuo metu taikomuose BP7 teisės aktuose. |
| --- | --- |

9.

Šioje ataskaitoje naudojamos Komisijos nustatytos apibrėžtys. Vertinimas – tai „intervencijos priemonių analizė, atliekama pagal jų rezultatus, poveikį ir reikmes, kurias yra siekiama patenkinti“ (9), o stebėsena – tai informacijos apie įgyvendinamas programas ir projektus suteikimas siekiant patenkinti valdymo reikmes (10). Taip šios dvi veiklos rūšys yra atskiriamos ir šiuo metu taikomuose BP7 teisės aktuose.

| 10. | Tolesniame tekste naudojama ši terminologija mokslinių tyrimų ir technologinės plėtros rezultatams apibūdinti:






  — | išdirbiai – tai tiesiogiai sukuriamos žinios, pagaminamos prekės ir suteikiamos paslaugos (leidiniai, konferencijų dokumentai, patentai, licencijos, prototipai, standartai, apmokyti mokslininkai ir pan.) atlikus viešąją intervenciją, |
| --- | --- | --- |

10.

Tolesniame tekste naudojama ši terminologija mokslinių tyrimų ir technologinės plėtros rezultatams apibūdinti:

—

išdirbiai – tai tiesiogiai sukuriamos žinios, pagaminamos prekės ir suteikiamos paslaugos (leidiniai, konferencijų dokumentai, patentai, licencijos, prototipai, standartai, apmokyti mokslininkai ir pan.) atlikus viešąją intervenciją,

| — | išdavos – tai vartotojų naudojimosi išdirbiais ilgalaikiai rezultatai, |
| --- | --- |

—

išdavos – tai vartotojų naudojimosi išdirbiais ilgalaikiai rezultatai,

| — | poveikiai – tai ilgalaikiai viešosios intervencijos sąlygoti socialiniai ir ekonominiai bei politiniai pokyčiai. |
| --- | --- |

—

poveikiai – tai ilgalaikiai viešosios intervencijos sąlygoti socialiniai ir ekonominiai bei politiniai pokyčiai.

1 langelisGlobaliosios judriųjų ryšių sistemos (GSM) pavyzdysŠiame pavyzdyje Bendrijai finansuojant gauti išdirbiai – tai tiesioginiai projekto rezultatai, kaip antai GSM standarto sukūrimas. Išdava – tai šio standarto kaip skaitmeninės korinės telefonijos standarto patvirtinimas visoje Europoje ir už jos ribų, o tai ženkliai prisidėjo prie telekomunikacijų pramonės vystymo. Galiausiai, poveikiai – tai naudojimosi šia technologija tarptautiniu mastu ekonominiai, socialiniai ir politiniai padariniai. Taip pat buvo prisidėta prie darbo vietų kūrimo telekomunikacijų ir susijusiose pramonės šakose bei šio pramonės sektoriaus svarbos Europos ekonomikai didinimo. Be kita ko, GSM sistema suteikė naują būdą žmonėms bendrauti vieniems su kitais.

| 11. | Tačiau vertinant šiuos rezultatus susiduriama su nemažai metodinių problemų (žr. I priedą). Socialiniai ir ekonominiai pokyčiai yra sudėtingi, o konkrečiai – dažnai sunku atsekti, koks yra santykis tarp mokslinių tyrimų veiklos ir pastebėtų išdavų bei poveikių. Nors įveikti šiuos metodinius sunkumus yra gana sunki užduotis, jie nebūtinai būna kliūtis atlikti veiksmingą įvertinimą. |
| --- | --- |

11.

Tačiau vertinant šiuos rezultatus susiduriama su nemažai metodinių problemų (žr. I priedą). Socialiniai ir ekonominiai pokyčiai yra sudėtingi, o konkrečiai – dažnai sunku atsekti, koks yra santykis tarp mokslinių tyrimų veiklos ir pastebėtų išdavų bei poveikių. Nors įveikti šiuos metodinius sunkumus yra gana sunki užduotis, jie nebūtinai būna kliūtis atlikti veiksmingą įvertinimą.

| 12. | Nuo devintojo dešimtmečio Komisija turėjo įdiegusi sistemą bendrosioms programoms stebėti ir vertinti (11). Pradėjus vykdyti BP4 programą dešimtojo dešimtmečio viduryje, stebėsenos ir vertinimo sistemą sudarė tam tikras skaičius iš dalies susijusių veiklos sričių, tarp jų:






  — | metinė (daugiausia programos įgyvendinimo) stebėsena, |
| --- | --- | --- |

12.

Nuo devintojo dešimtmečio Komisija turėjo įdiegusi sistemą bendrosioms programoms stebėti ir vertinti (11). Pradėjus vykdyti BP4 programą dešimtojo dešimtmečio viduryje, stebėsenos ir vertinimo sistemą sudarė tam tikras skaičius iš dalies susijusių veiklos sričių, tarp jų:

—

metinė (daugiausia programos įgyvendinimo) stebėsena,

| — | BP veiklos penkerių metų laikotarpio įvertinimai (ir, pradėjus vykdyti BP6 programą, – papildomi konkrečių klausimų vertinimai). |
| --- | --- |

—

BP veiklos penkerių metų laikotarpio įvertinimai (ir, pradėjus vykdyti BP6 programą, – papildomi konkrečių klausimų vertinimai).

Šios abi veiklos sritys turėjo būti vykdomos padedant išorės ekspertams (žr. 2 diagramą ir II priedą).

2 diagrama

BP4–BP7 – Pagrindiniai stebėsenos ir vertinimo reikalavimai

| BP4 (1995–1998 m.) | BP5 (1999–2002 m.) | BP6 (2003–2006 m.) | BP7 (2007–2013 m.) |
| --- | --- | --- | --- |
| du vertinimai (vidutinio laikotarpio ir galutinis), kiekvienu atveju buvo vertinamos 20 paprogramių ir bendroji programa; galutinis įvertinimas beveik sutapo su BP5 vidutinio laikotarpio vertinimu | du tuo pačiu metu atlikti (vidutinio laikotarpio) vertinimai, kiekvienu atveju buvo vertinamos 7 specialiosios programos ir bendroji programa | vienas (vidutinio laikotarpio) vertinimas, apimantis bendrąją programą ir jos 3 specialiąsias programas, bet ne konkrečiai visas 20 paprogramių. Šį vertinimą papildė specialios vertinimo ir reguliarios pažangos (t. y. stebėsenos) ataskaitos | bent penki vertinimai (ex ante, vidutinio laikotarpio ir galutinis), įskaitant specialią pažangos ataskaitą prieš atliekant tarpinį vertinimą |
| 1. | Ex ante:
  ne |

BP4 (1995–1998 m.)

BP5 (1999–2002 m.)

BP6 (2003–2006 m.)

BP7 (2007–2013 m.)

du vertinimai (vidutinio laikotarpio ir galutinis), kiekvienu atveju buvo vertinamos 20 paprogramių ir bendroji programa; galutinis įvertinimas beveik sutapo su BP5 vidutinio laikotarpio vertinimu

du tuo pačiu metu atlikti (vidutinio laikotarpio) vertinimai, kiekvienu atveju buvo vertinamos 7 specialiosios programos ir bendroji programa

vienas (vidutinio laikotarpio) vertinimas, apimantis bendrąją programą ir jos 3 specialiąsias programas, bet ne konkrečiai visas 20 paprogramių. Šį vertinimą papildė specialios vertinimo ir reguliarios pažangos (t. y. stebėsenos) ataskaitos

bent penki vertinimai (ex ante, vidutinio laikotarpio ir galutinis), įskaitant specialią pažangos ataskaitą prieš atliekant tarpinį vertinimą

1.

Ex ante:
  ne

| 1. | Ex ante:
  ne |
| --- | --- |

1.

Ex ante:
  ne

| 1. | Ex ante:
  ne |
| --- | --- |

1.

Ex ante:
  ne

| 1. | Ex ante:

  įtraukta į Komisijos pasiūlymo dėl BP7 poveikio įvertinimą (2005 m.) |
| --- | --- |

1.

įtraukta į Komisijos pasiūlymo dėl BP7 poveikio įvertinimą (2005 m.)

| 2. | Vidutinio laikotarpio:






  — | 5 metų laikotarpio įvertinimas: įpusėjus bendrajai programai, prieš prasidedant kitai bendrajai programai (1997 m.) |
| --- | --- | --- |

2.

—

5 metų laikotarpio įvertinimas: įpusėjus bendrajai programai, prieš prasidedant kitai bendrajai programai (1997 m.)

| 2. | Vidutinio laikotarpio:






  — | 5 metų laikotarpio įvertinimas: prieš pateikiant pasiūlymą dėl kitos bendrosios programos (2000 m.) |
| --- | --- | --- |

2.

—

5 metų laikotarpio įvertinimas: prieš pateikiant pasiūlymą dėl kitos bendrosios programos (2000 m.)

| — | pažangos įvertinimas įpusėjus bendrajai programai (2001 m.) |
| --- | --- |

—

pažangos įvertinimas įpusėjus bendrajai programai (2001 m.)

| 2. | Vidutinio laikotarpio:






  — | instrumentų veiksmingumo vertinimas (2004 m.) |
| --- | --- | --- |

2.

—

instrumentų veiksmingumo vertinimas (2004 m.)

| — | 5 metų laikotarpio įvertinimas, prieš pateikiant pasiūlymą dėl kitos bendrosios programos (2004 m.) |
| --- | --- |

—

5 metų laikotarpio įvertinimas, prieš pateikiant pasiūlymą dėl kitos bendrosios programos (2004 m.)

| — | reguliarios pažangos (t. y. stebėsenos) ataskaitos |
| --- | --- |

—

reguliarios pažangos (t. y. stebėsenos) ataskaitos

| 2. | Vidutinio laikotarpio:






  — | ex post, praėjus 2 metams po ankstesnės bendrosios programos pabaigos (2008 m.) |
| --- | --- | --- |

2.

—

ex post, praėjus 2 metams po ankstesnės bendrosios programos pabaigos (2008 m.)

| — | pažangos ataskaita prieš atliekant tarpinį įvertinimą (prieš 2010 m.) |
| --- | --- |

—

pažangos ataskaita prieš atliekant tarpinį įvertinimą (prieš 2010 m.)

| — | tarpinis įvertinimas (2010 m.) |
| --- | --- |

—

tarpinis įvertinimas (2010 m.)

| 3. | Galutinis:






  — | pasibaigus bendrajai programai (1999 m.) |
| --- | --- | --- |

3.

—

pasibaigus bendrajai programai (1999 m.)

| 3. | Galutinis:
  ne |
| --- | --- |

3.

ne

| 3. | Galutinis:
  ne

  (pakeista BP7 sprendimu) |
| --- | --- |

3.

ne

(pakeista BP7 sprendimu)

| 3. | Galutinis:
  praėjus dvejiems metams po bendrosios programos pabaigos (2015 m.), jį papildant konkrečiais tyrimais, tarpiniu vertinimu ir kita viso bendrosios programos laikotarpio metu vykdyta vertinimo veikla |
| --- | --- |

3.

praėjus dvejiems metams po bendrosios programos pabaigos (2015 m.), jį papildant konkrečiais tyrimais, tarpiniu vertinimu ir kita viso bendrosios programos laikotarpio metu vykdyta vertinimo veikla

Šaltinis: žr. II priedą.

| 13. | Iki šios dienos buvo atlikti trys penkerių metų laikotarpio įvertinimai (12), kuriuos atlikus buvo parengtos Davignon, Majó ir Ormala ataskaitos (atitinkamai 1997 m., 2000 m. ir 2004 m.). Be to, Informacinės visuomenės generalinis direktoratas atliko tikslinius savo specialiajai programai skirtus įvertinimus. Pažymėtina, kad pagal BP7 reglamentuojančius teisės aktus nebereikėjo atlikti penkerių metų laikotarpio įvertinimų, tokiu būdu buvo panaikintas apribojimas sutelkti daugumą pagrindinių įvertinimų ties praėjusių penkerių metų laikotarpiu, todėl į šį procesą buvo įtrauktos dviejų vienas po kito einančių programavimo laikotarpių dalys. 2004 m. taip pat buvo paskelbta Marimón ataskaita (13) – specialus BP6 laikotarpiu sukurtų naujų instrumentų veiksmingumo įvertinimas. |
| --- | --- |

13.

Iki šios dienos buvo atlikti trys penkerių metų laikotarpio įvertinimai (12), kuriuos atlikus buvo parengtos Davignon, Majó ir Ormala ataskaitos (atitinkamai 1997 m., 2000 m. ir 2004 m.). Be to, Informacinės visuomenės generalinis direktoratas atliko tikslinius savo specialiajai programai skirtus įvertinimus. Pažymėtina, kad pagal BP7 reglamentuojančius teisės aktus nebereikėjo atlikti penkerių metų laikotarpio įvertinimų, tokiu būdu buvo panaikintas apribojimas sutelkti daugumą pagrindinių įvertinimų ties praėjusių penkerių metų laikotarpiu, todėl į šį procesą buvo įtrauktos dviejų vienas po kito einančių programavimo laikotarpių dalys. 2004 m. taip pat buvo paskelbta Marimón ataskaita (13) – specialus BP6 laikotarpiu sukurtų naujų instrumentų veiksmingumo įvertinimas.

| 14. | Komisijos vertinimo veiklos sistema buvo peržiūrėta 2000 m. ir 2002 m (14). 2007 m. šie komunikatai buvo atnaujinti atsižvelgiant į Komisijos administracinės reformos pasekmes ir naująjį Finansinį reglamentą (15). Šiuose dokumentuose apibūdinti vertinimo vaidmuo ir funkcija Komisijos bendro planavimo, programavimo ir ataskaitų teikimo ciklo kontekste bei įvardytas 21 vertinimo standarto ir 18 gerosios praktikos modelių sąrašas. Be to, šiuose dokumentuose aptariamas vertinimo naudojimas rengiant ir supaprastinant ES teisės aktus. |
| --- | --- |

14.

Komisijos vertinimo veiklos sistema buvo peržiūrėta 2000 m. ir 2002 m (14). 2007 m. šie komunikatai buvo atnaujinti atsižvelgiant į Komisijos administracinės reformos pasekmes ir naująjį Finansinį reglamentą (15). Šiuose dokumentuose apibūdinti vertinimo vaidmuo ir funkcija Komisijos bendro planavimo, programavimo ir ataskaitų teikimo ciklo kontekste bei įvardytas 21 vertinimo standarto ir 18 gerosios praktikos modelių sąrašas. Be to, šiuose dokumentuose aptariamas vertinimo naudojimas rengiant ir supaprastinant ES teisės aktus.

AUDITO APIMTIS IR METODAS

15.

| 15. | Pagrindinis audito tikslas buvo įvertinti, ar Komisija taikė tinkamą metodą vertindama mokslinių tyrimų ir technologinės plėtros bendrųjų programų rezultatus. |
| --- | --- |

Pagrindinis audito tikslas buvo įvertinti, ar Komisija taikė tinkamą metodą vertindama mokslinių tyrimų ir technologinės plėtros bendrųjų programų rezultatus.

| 16. | Šiuo tikslu Audito Rūmai įvertino, kokiu mastu:






  — | bendrosios programos bei jų sudėtinės programos yra pagrįstos aiškia intervencijos logika, kuria vadovaujantis galima įvertinti išdirbius, išdavas ir poveikius, tokiu būdu suteikiant patikimą vertinimo ir stebėsenos pagrindą, |
| --- | --- | --- |

16.

Šiuo tikslu Audito Rūmai įvertino, kokiu mastu:

—

bendrosios programos bei jų sudėtinės programos yra pagrįstos aiškia intervencijos logika, kuria vadovaujantis galima įvertinti išdirbius, išdavas ir poveikius, tokiu būdu suteikiant patikimą vertinimo ir stebėsenos pagrindą,

| — | yra nustatyta bendrųjų programų vertinimo strategija, skatinanti veiksmingą ir nuoseklų vertinimą, |
| --- | --- |

—

yra nustatyta bendrųjų programų vertinimo strategija, skatinanti veiksmingą ir nuoseklų vertinimą,

| — | vertinimo sistemos organizacinė struktūra užtikrina, kad ji būtų tinkamai koordinuojama vertinant bendrąsias programas, jai būtų skirti atitinkami ištekliai, o suinteresuotosios šalys ją laikytų pakankamai nepriklausoma, |
| --- | --- |

—

vertinimo sistemos organizacinė struktūra užtikrina, kad ji būtų tinkamai koordinuojama vertinant bendrąsias programas, jai būtų skirti atitinkami ištekliai, o suinteresuotosios šalys ją laikytų pakankamai nepriklausoma,

| — | vertinimui naudotos metodikos užtikrina, kad susiję klausimai būtų tinkamai nagrinėjami, kad vertinimas būtų laikomas patikimu, |
| --- | --- |

—

vertinimui naudotos metodikos užtikrina, kad susiję klausimai būtų tinkamai nagrinėjami, kad vertinimas būtų laikomas patikimu,

| — | su vertinimu ir stebėsena susijusios veiklos metu buvo renkama informacija ir rengiama analizė, kuria būtų galima pasinaudoti tobulinant vykdomas (mokymosi) programas ir rengiant bendrąsias programas ateityje. |
| --- | --- |

—

su vertinimu ir stebėsena susijusios veiklos metu buvo renkama informacija ir rengiama analizė, kuria būtų galima pasinaudoti tobulinant vykdomas (mokymosi) programas ir rengiant bendrąsias programas ateityje.

| 17. | Šioje ataskaitoje nagrinėjami atitinkami BP4 (1995–1998 m.), BP5 (1999–2002 m.) ir BP6 (2003–2006 m.) skirti susitarimai. Joje taip pat aptariami šiuo metu pagal BP7 (2007–2013 m.) galiojantys teisiniai reikalavimai, tačiau nepateikiama Komisijos BP7 „Poveikio ir ex ante įvertinimų“ analizė (16). Joje didžiausias dėmesys skiriamas programų stebėsenai ir ex post vertinimui, o ne projektų pasiūlymų ex ante vertinimui ar pačių projektų ex post vertinimui. |
| --- | --- |

17.

Šioje ataskaitoje nagrinėjami atitinkami BP4 (1995–1998 m.), BP5 (1999–2002 m.) ir BP6 (2003–2006 m.) skirti susitarimai. Joje taip pat aptariami šiuo metu pagal BP7 (2007–2013 m.) galiojantys teisiniai reikalavimai, tačiau nepateikiama Komisijos BP7 „Poveikio ir ex ante įvertinimų“ analizė (16). Joje didžiausias dėmesys skiriamas programų stebėsenai ir ex post vertinimui, o ne projektų pasiūlymų ex ante vertinimui ar pačių projektų ex post vertinimui.

| 18. | Auditas buvo atliktas dalyvaujant ELPA auditorių valdybos nariams ir padedant išorės ekspertams. Audito įrodymai buvo surinkti:






  — | atlikus su auditu susijusį darbą Komisijoje (vykdant dokumentų peržiūrą ir organizuojant interviu su darbuotojais), įskaitant teisinių ir įstatymų nustatytų reikalavimų identifikavimą, tikslų ir veiklos kriterijų peržiūrą, daugiau kaip 80 stebėsenos ir vertinimo ataskaitų analizę bei vertinimo veiklos Komisijoje organizavimo analizę, |
| --- | --- | --- |

18.

Auditas buvo atliktas dalyvaujant ELPA auditorių valdybos nariams ir padedant išorės ekspertams. Audito įrodymai buvo surinkti:

—

atlikus su auditu susijusį darbą Komisijoje (vykdant dokumentų peržiūrą ir organizuojant interviu su darbuotojais), įskaitant teisinių ir įstatymų nustatytų reikalavimų identifikavimą, tikslų ir veiklos kriterijų peržiūrą, daugiau kaip 80 stebėsenos ir vertinimo ataskaitų analizę bei vertinimo veiklos Komisijoje organizavimo analizę,

| — | suorganizavus interviu su daugiau kaip 90 ekspertų, pripažintų suinteresuotosiomis šalimis valstybėse narėse ir asocijuotose šalyse (Čekijos Respublikoje, Vokietijoje, Estijoje, Ispanijoje, Prancūzijoje, Italijoje, Liuksemburge, Nyderlanduose, Austrijoje, Suomijoje, Švedijoje, Jungtinėje Karalystėje ir Norvegijoje), |
| --- | --- |

—

suorganizavus interviu su daugiau kaip 90 ekspertų, pripažintų suinteresuotosiomis šalimis valstybėse narėse ir asocijuotose šalyse (Čekijos Respublikoje, Vokietijoje, Estijoje, Ispanijoje, Prancūzijoje, Italijoje, Liuksemburge, Nyderlanduose, Austrijoje, Suomijoje, Švedijoje, Jungtinėje Karalystėje ir Norvegijoje),

| — | atlikus tyrimus kartu su Europos Parlamento ITRE komiteto (17) ir Tarybos CREST komiteto (18) veikloje dalyvaujančiomis suinteresuotosiomis šalimis, |
| --- | --- |

—

atlikus tyrimus kartu su Europos Parlamento ITRE komiteto (17) ir Tarybos CREST komiteto (18) veikloje dalyvaujančiomis suinteresuotosiomis šalimis,

| — | surengus konsultacijas su daugiau kaip 65 ekspertais, kaip tarptautine palyginamąja grupe, mokslinių tyrimų vertinimo srityje JAV ir Kanadoje, |
| --- | --- |

—

surengus konsultacijas su daugiau kaip 65 ekspertais, kaip tarptautine palyginamąja grupe, mokslinių tyrimų vertinimo srityje JAV ir Kanadoje,

| — | peržiūrėjus akademinę literatūrą apie naujausias tendencijas mokslinių tyrimų vertinimo srityje, |
| --- | --- |

—

peržiūrėjus akademinę literatūrą apie naujausias tendencijas mokslinių tyrimų vertinimo srityje,

| — | su mokslinių tyrimų vertinimo ekspertais iš Europos ir Šiaurės Amerikos aptarus audito metu nustatytus faktus, išvadas ir rekomendacijas 2007 m. vasario mėn. supaprastintomis aplinkybėmis surengus keletą tikslinių grupių susitikimų. |
| --- | --- |

—

su mokslinių tyrimų vertinimo ekspertais iš Europos ir Šiaurės Amerikos aptarus audito metu nustatytus faktus, išvadas ir rekomendacijas 2007 m. vasario mėn. supaprastintomis aplinkybėmis surengus keletą tikslinių grupių susitikimų.

AUDITO PASTABOS

Intervencinė logika, tikslų nustatymas ir veiklos rodikliai

| 19. | Siekiant atlikti veiksmingą įvertinimą ir stebėseną, būtina, kad politikos, programos ir projekto lygmenimis būtų nustatyti aiškūs tikslai ir tinkami veiklos rodikliai, kuriais remiantis būtų galima vertinti viešosios intervencijos rezultatus. Geroji praktika kitose biudžeto ir ne tik srityse reiškia, kad jie turėtų būti nustatomi pasitelkiant intervencijos logiką. |
| --- | --- |

19.

Siekiant atlikti veiksmingą įvertinimą ir stebėseną, būtina, kad politikos, programos ir projekto lygmenimis būtų nustatyti aiškūs tikslai ir tinkami veiklos rodikliai, kuriais remiantis būtų galima vertinti viešosios intervencijos rezultatus. Geroji praktika kitose biudžeto ir ne tik srityse reiškia, kad jie turėtų būti nustatomi pasitelkiant intervencijos logiką.

| 20. | Intervencijos logika gali būti apibrėžta kaip hipotetinių priežasčių ir pasekmių sąsajų, apibūdinančių tikimybę, kaip pasitelkus intervenciją, bus pasiekti jos bendrieji tikslai, visuma (19). Komisijos vertinimo gairėse teigiama, kad intervencijos logika sukuria „konceptualią sąsają tarp intervencijos indėlių ir gaunamų išdirbių, taigi ir jos poveikių visuomenei rezultatų ir išdavų prasme“ (20). Ši apibrėžtis naudojama visoje ataskaitoje. |
| --- | --- |

20.

Intervencijos logika gali būti apibrėžta kaip hipotetinių priežasčių ir pasekmių sąsajų, apibūdinančių tikimybę, kaip pasitelkus intervenciją, bus pasiekti jos bendrieji tikslai, visuma (19). Komisijos vertinimo gairėse teigiama, kad intervencijos logika sukuria „konceptualią sąsają tarp intervencijos indėlių ir gaunamų išdirbių, taigi ir jos poveikių visuomenei rezultatų ir išdavų prasme“ (20). Ši apibrėžtis naudojama visoje ataskaitoje.

| 21. | Audito Rūmai įvertino, kokiu mastu bendrosios programos bei jų sudėtinės programos buvo paremtos intervencijos logika, tokiu būdu suteikiant patikimą vertinimo ir stebėsenos pagrindą. |
| --- | --- |

21.

Audito Rūmai įvertino, kokiu mastu bendrosios programos bei jų sudėtinės programos buvo paremtos intervencijos logika, tokiu būdu suteikiant patikimą vertinimo ir stebėsenos pagrindą.

Bendrųjų programų intervencijos logika nebuvo aiški

| 22. | Intervencijos logikos apibrėžimas turėtų būti pagrindinis programos kūrimo elementas pačioje proceso pradžioje. Sutarties 163 straipsnis, kuriame išdėstyta, kad reikia stiprinti mokslinį bei technologinį pagrindą ir skatinti šias sritis tapti konkurencingesnėmis, turėtų būti tokios intervencijos logikos, skirtos bendrosioms programoms, pradinis taškas (žr. 2 dalį). Šis aspektas turėtų būti sukonkretintas ir pritaikytas skirtingoms mokslinėms sritims, kurias apima bendrosios programos, ir skirtingiems naudojamiems instrumentams. |
| --- | --- |

22.

Intervencijos logikos apibrėžimas turėtų būti pagrindinis programos kūrimo elementas pačioje proceso pradžioje. Sutarties 163 straipsnis, kuriame išdėstyta, kad reikia stiprinti mokslinį bei technologinį pagrindą ir skatinti šias sritis tapti konkurencingesnėmis, turėtų būti tokios intervencijos logikos, skirtos bendrosioms programoms, pradinis taškas (žr. 2 dalį). Šis aspektas turėtų būti sukonkretintas ir pritaikytas skirtingoms mokslinėms sritims, kurias apima bendrosios programos, ir skirtingiems naudojamiems instrumentams.

| 23. | Tačiau visais lygiais trūksta aiškaus loginio modelio, kuris padėtų suprasti, kaip bendrosios programos ir jų sudėtinės programos prisideda prie mokslinės ir technologinės pažangos bei naujovių. |
| --- | --- |

23.

Tačiau visais lygiais trūksta aiškaus loginio modelio, kuris padėtų suprasti, kaip bendrosios programos ir jų sudėtinės programos prisideda prie mokslinės ir technologinės pažangos bei naujovių.

| 24. | Tai, kad nėra parengta bendrosioms programoms skirta intervencijos logika, taip pat pabrėžė 2004 m. penkerių metų laikotarpio vertinimo komisija, kuri pareiškė, jog „... tokios vertinimo komisijos kaip mūsų prašoma panaikinti atotrūkį tarp, viena vertus, įrodymų, iš esmės surinktų projektų lygmenyje, ir kita vertus – aukštesnio lygio socialinių ir ekonominių mokslinių tyrimų politikos tikslų. Tačiau šiuo metu sudėtinga nustatyti sąsają dėl būdo, kaip yra planuojama bendroji programa. Trūksta aiškios logikos mechanizmo, sujungiančio aukščiausius tikslus su konkrečiais mokslinių tyrimų ir žinių tikslais“ (21). |
| --- | --- |

24.

Tai, kad nėra parengta bendrosioms programoms skirta intervencijos logika, taip pat pabrėžė 2004 m. penkerių metų laikotarpio vertinimo komisija, kuri pareiškė, jog „... tokios vertinimo komisijos kaip mūsų prašoma panaikinti atotrūkį tarp, viena vertus, įrodymų, iš esmės surinktų projektų lygmenyje, ir kita vertus – aukštesnio lygio socialinių ir ekonominių mokslinių tyrimų politikos tikslų. Tačiau šiuo metu sudėtinga nustatyti sąsają dėl būdo, kaip yra planuojama bendroji programa. Trūksta aiškios logikos mechanizmo, sujungiančio aukščiausius tikslus su konkrečiais mokslinių tyrimų ir žinių tikslais“ (21).

| 25. | Kitoks metodas yra taikomas kai kuriose valstybėse narėse (pvz., Nyderlanduose, Suomijoje) ir JAV (žr. 3 diagramą), kur intervencijos logikos apibrėžimo praktika yra daug labiau paplitusi, bei Kanadoje – ten tokią praktiką privaloma taikyti visoms programoms (žr. III priedą). Iš tiesų tose šalyse naudojant intervencijos logiką programų kūrimo metu programos tampa tikslingesnės ir geriau struktūrizuotos. Šią praktiką Komisija taip pat pradėjo diegti kitose Bendrijos politikos (pvz., išorės pagalbos) srityse (22).
  3 diagrama
  Tikslų, grindžiamų loginiais modeliais, eiliškumo pagal svarbą apibrėžtis – JAV mokslinių tyrimų žemės ūkio srityje pavyzdys








  Politika | Programa | Projektas |
| --- | --- | --- | --- |
| Politikos uždavinys:
  prisidėti prie pagerėjusio ūkininkaujančių šeimų pragyvenimo lygio | | |
| Tikslas:
  padidėjusi žemės ūkio produkcija, našumas ir ūkininkaujančių šeimų pajamos | Programos uždavinys:
  prisidėti prie žemės ūkio produkcijos, našumo ir ūkininkaujančių šeimų pajamų didinimo | |
| Laukiamas rezultatas:
  tiksliniai ūkininkai daugiau naudosis pagerintomis žemės ūkio technologijomis | Tikslas:
  ūkininkai daugiau naudosis pagerintomis žemės ūkio technologijomis (pvz., ryžių) | Projekto uždavinys:
  prisidėti prie didesnio rekomenduojamų pagerintų technologijų naudojimo |
| | Laukiamas rezultatas:
  tiksliniams ūkininkams teikiamos (platinamos) rekomendacijos | Tikslas:
  dėl pagerintų technologijų suteiktos rekomendacijos yra tinkamos tiksliniams ūkininkams |
| | | Laukiami rezultatai (pvz.):








  1. | Nustatytos technologijos grindžiamos ūkininkų prioritetais; |

25.

Kitoks metodas yra taikomas kai kuriose valstybėse narėse (pvz., Nyderlanduose, Suomijoje) ir JAV (žr. 3 diagramą), kur intervencijos logikos apibrėžimo praktika yra daug labiau paplitusi, bei Kanadoje – ten tokią praktiką privaloma taikyti visoms programoms (žr. III priedą). Iš tiesų tose šalyse naudojant intervencijos logiką programų kūrimo metu programos tampa tikslingesnės ir geriau struktūrizuotos. Šią praktiką Komisija taip pat pradėjo diegti kitose Bendrijos politikos (pvz., išorės pagalbos) srityse (22).

3 diagrama

Tikslų, grindžiamų loginiais modeliais, eiliškumo pagal svarbą apibrėžtis – JAV mokslinių tyrimų žemės ūkio srityje pavyzdys

Politika

Programa

Projektas

Politikos uždavinys:
  prisidėti prie pagerėjusio ūkininkaujančių šeimų pragyvenimo lygio

Tikslas:
  padidėjusi žemės ūkio produkcija, našumas ir ūkininkaujančių šeimų pajamos

Programos uždavinys:
  prisidėti prie žemės ūkio produkcijos, našumo ir ūkininkaujančių šeimų pajamų didinimo

Laukiamas rezultatas:
  tiksliniai ūkininkai daugiau naudosis pagerintomis žemės ūkio technologijomis

Tikslas:
  ūkininkai daugiau naudosis pagerintomis žemės ūkio technologijomis (pvz., ryžių)

Projekto uždavinys:
  prisidėti prie didesnio rekomenduojamų pagerintų technologijų naudojimo

Laukiamas rezultatas:
  tiksliniams ūkininkams teikiamos (platinamos) rekomendacijos

Tikslas:
  dėl pagerintų technologijų suteiktos rekomendacijos yra tinkamos tiksliniams ūkininkams

Laukiami rezultatai (pvz.):

1.

Nustatytos technologijos grindžiamos ūkininkų prioritetais;

| 2. | Sukurtos ir pritaikytos technologijos; |
| --- | --- |

2.

Sukurtos ir pritaikytos technologijos;

| 3. | Ūkininkų laukuose patikrintos technologijos. |
| --- | --- |

3.

Ūkininkų laukuose patikrintos technologijos.

Šaltinis: JAV nacionalinė žemės ūkio mokslinių tyrimų taryba.

| 26. | Nesusisteminus viešosios intervencijos loginio pagrindimo ir numanomų priežastinių ryšių (pagal kuriuos programa yra išsamiai suplanuojama, įvykdoma ir įvertinama), bendrųjų programų vertinimas ir stebėsena tampa nebe tokie veiksmingi. Tai visų pirma susiję su tuo, kaip nustatomi programos tikslai ir veiklos rodikliai. |
| --- | --- |

26.

Nesusisteminus viešosios intervencijos loginio pagrindimo ir numanomų priežastinių ryšių (pagal kuriuos programa yra išsamiai suplanuojama, įvykdoma ir įvertinama), bendrųjų programų vertinimas ir stebėsena tampa nebe tokie veiksmingi. Tai visų pirma susiję su tuo, kaip nustatomi programos tikslai ir veiklos rodikliai.

Be aiškaus loginio modelio sunkiau nustatyti nuoseklius programos tikslus

| 27. | Aiškiai nepagrindus viešosios intervencijos loginės esmės tampa sunkiau nuosekliai nustatyti programos tikslus bei juos susisteminti. Tai rodo, kad:






  — | nėra aišku, kaip bendrųjų programų programiniai tikslai yra susiję su politikos tikslais, kaip antai su Sutarties 163 straipsnyje pateiktu bendruoju tikslu ir Lisabonos strategijoje bei Barselonos deklaracijoje išdėstytais tikslais (žr. 2 ir 7 dalis), |
| --- | --- | --- |

27.

Aiškiai nepagrindus viešosios intervencijos loginės esmės tampa sunkiau nuosekliai nustatyti programos tikslus bei juos susisteminti. Tai rodo, kad:

—

nėra aišku, kaip bendrųjų programų programiniai tikslai yra susiję su politikos tikslais, kaip antai su Sutarties 163 straipsnyje pateiktu bendruoju tikslu ir Lisabonos strategijoje bei Barselonos deklaracijoje išdėstytais tikslais (žr. 2 ir 7 dalis),

| — | ne visuomet santykis tarp atskirų programos tikslų, tiek įvairiais teisės aktų (pvz., sprendimo dėl bendrosios programos, sprendimo dėl specialiosios programos ir dalyvavimo bei sklaidos taisyklių) lygmenimis, tiek pagrindiniuose teisės aktuose ir Komisijos darbo programose, yra akivaizdus. |
| --- | --- |

—

ne visuomet santykis tarp atskirų programos tikslų, tiek įvairiais teisės aktų (pvz., sprendimo dėl bendrosios programos, sprendimo dėl specialiosios programos ir dalyvavimo bei sklaidos taisyklių) lygmenimis, tiek pagrindiniuose teisės aktuose ir Komisijos darbo programose, yra akivaizdus.

| 28. | Komisija, remdamasi bendrųjų programų teisės aktuose nustatytais programos tikslais, mėgino darbo programose išdėstyti veiklos tikslus. Tačiau beveik visais atvejais šiomis iniciatyvomis nepasisekė paaiškinti logikos, kuria programos yra grindžiamos, o darbo programose nurodyti tikslai nebuvo konkretūs, išmatuojami, pasiekiami, svarbūs ir su laiko nuoroda (SMART). 2003 m. pagal Finansinį reglamentą tai tapo teisiniu reikalavimu (23). |
| --- | --- |

28.

Komisija, remdamasi bendrųjų programų teisės aktuose nustatytais programos tikslais, mėgino darbo programose išdėstyti veiklos tikslus. Tačiau beveik visais atvejais šiomis iniciatyvomis nepasisekė paaiškinti logikos, kuria programos yra grindžiamos, o darbo programose nurodyti tikslai nebuvo konkretūs, išmatuojami, pasiekiami, svarbūs ir su laiko nuoroda (SMART). 2003 m. pagal Finansinį reglamentą tai tapo teisiniu reikalavimu (23).

| 29. | Neaišku, kokiu mastu galima atsekti politikos tikslus individualiuose Bendrijos bendrai finansuojamuose projektuose, nagrinėjant specialiąsias programas, darbo programas ir kvietimus teikti paraiškas. Šių sąryšių nepaaiškinus, negalima įvertinti bendrųjų programų ir jų sudėtinių programų indėlio siekiant šių politikos tikslų. Audito metu buvo nustatyta, kad Komisija savo vertinimuose pateikė mažai svarių ilgalaikių tikslų pasiekimo įrodymų tiek projekto, tiek programos lygmeniu, arba apskritai jų nepateikė (žr. 82 dalį). |
| --- | --- |

29.

Neaišku, kokiu mastu galima atsekti politikos tikslus individualiuose Bendrijos bendrai finansuojamuose projektuose, nagrinėjant specialiąsias programas, darbo programas ir kvietimus teikti paraiškas. Šių sąryšių nepaaiškinus, negalima įvertinti bendrųjų programų ir jų sudėtinių programų indėlio siekiant šių politikos tikslų. Audito metu buvo nustatyta, kad Komisija savo vertinimuose pateikė mažai svarių ilgalaikių tikslų pasiekimo įrodymų tiek projekto, tiek programos lygmeniu, arba apskritai jų nepateikė (žr. 82 dalį).

Aiškios intervencijos logikos ir aiškių tikslų nebuvimas apsunkina veiklos rodiklių parengimą

| 30. | Tai, kad nėra parengtas aiškus loginis modelis ir nėra aiškiai išdėstytų programos tikslų, taip pat apsunkino veiklos rodiklių, skirtų programos tikslų pasiekimui stebėti, rengimą išdirbių, išdavų ir poveikių prasme. Tokie veiksmingumui įvertinti skirti su bendrosiomis programomis susiję rodikliai iki šiol apskritai nėra apibrėžti (žr. 73 dalį). |
| --- | --- |

30.

Tai, kad nėra parengtas aiškus loginis modelis ir nėra aiškiai išdėstytų programos tikslų, taip pat apsunkino veiklos rodiklių, skirtų programos tikslų pasiekimui stebėti, rengimą išdirbių, išdavų ir poveikių prasme. Tokie veiksmingumui įvertinti skirti su bendrosiomis programomis susiję rodikliai iki šiol apskritai nėra apibrėžti (žr. 73 dalį).

| 31. | Esant tokiai situacijai, taip pat yra sunkiau tikrinti vis dar vykdomus, pagal šias programas finansuojamus projektus ir atlikti jau užbaigtų projektų ex post įvertinimą. Tai taipogi apsunkina vertinimų nuo projekto lygmens iki programos lygmens apibendrinimą (žr. I priedą ir 84 dalį). |
| --- | --- |

31.

Esant tokiai situacijai, taip pat yra sunkiau tikrinti vis dar vykdomus, pagal šias programas finansuojamus projektus ir atlikti jau užbaigtų projektų ex post įvertinimą. Tai taipogi apsunkina vertinimų nuo projekto lygmens iki programos lygmens apibendrinimą (žr. I priedą ir 84 dalį).

Šiuo metu vykdomas biudžeto sudarymas pagal veiklos sritis (veikla pagrįstas valdymas) – netinkama bendrųjų programų veiklos vertinimo priemonė

| 32. | Kai kurie rodikliai, pagal kuriuos įvertinamas programos įgyvendinimo veiksmingumas (pvz., sutarties sudarymo, mokėjimų atlikimo laiko aspektais) yra pateikti Komisijos metinėse priežiūros ataskaitose ir Komisijos veikla pagrįsto valdymo sistemos kontekste. |
| --- | --- |

32.

Kai kurie rodikliai, pagal kuriuos įvertinamas programos įgyvendinimo veiksmingumas (pvz., sutarties sudarymo, mokėjimų atlikimo laiko aspektais) yra pateikti Komisijos metinėse priežiūros ataskaitose ir Komisijos veikla pagrįsto valdymo sistemos kontekste.

| 33. | Tačiau iki šiol mokslinių tyrimų generaliniai direktoratai, net įgyvendindami tą pačią specialiąją programą (ar paprogramę), netaikė standartizuotos ar palyginamos biudžeto sudarymo pagal veiklos sritis nomenklatūros ir atitinkamų rodiklių. Todėl šie rodikliai negali būti naudojami lyginant įvairių programų ir konkrečios programos veiklos rezultatus.

  2 langelisMokslinių tyrimų generalinių direktoratų vykdomas biudžeto sudarymas pagal veiklos sritis (veikla pagrįstas valdymas)Taikant biudžeto sudarymo pagal veiklos sritis (veikla pagrįsto valdymo) sistemą, bendrosios programos apima dvi skirtingas politikos sritis, kuriose bendrųjų programų veikla pateikiama pagal skirtingą įvairiems generaliniams direktoratams būdingą nomenklatūrą (24). Tai taikoma net toms specialiosioms programoms ar paprogramėms, kurias įgyvendina keli generaliniai direktoratai. Veikla pagrįsto valdymo tikslai buvo apibrėžti remiantis skirtingais pagrindiniais principais (25) ir, kaip nurodė Komisijos vidaus audito tarnyba (26), buvo iš esmės suformuluoti abstrakčiai, apibūdinant siekius ar veiklą. Rodikliai buvo daugiausia orientuoti į indėlius (pvz., susitikimų skaičius ir pan.). Kai kurie iš jų buvo susiję su proceso efektyvumu (pvz., sutarties sudarymo, mokėjimų atlikimo laiko aspektais), tačiau nebuvo palyginami nagrinėjant skirtingas programas ir skirtingų generalinių direktoratų veiklą dėl biudžeto sudarymo pagal veiklos sritis nomenklatūros skirtumų, generaliniams direktoratams būdingų konkrečių prielaidų (kaip antai konkrečių administracinių procesų pradžia ir pabaiga) ir jų apskaičiavimui naudotos pagrindinių duomenų (pvz., dotacijos susitarimo rūšis, mokėjimo rūšis) visumos. |
| --- | --- |

33.

Tačiau iki šiol mokslinių tyrimų generaliniai direktoratai, net įgyvendindami tą pačią specialiąją programą (ar paprogramę), netaikė standartizuotos ar palyginamos biudžeto sudarymo pagal veiklos sritis nomenklatūros ir atitinkamų rodiklių. Todėl šie rodikliai negali būti naudojami lyginant įvairių programų ir konkrečios programos veiklos rezultatus.

2 langelisMokslinių tyrimų generalinių direktoratų vykdomas biudžeto sudarymas pagal veiklos sritis (veikla pagrįstas valdymas)Taikant biudžeto sudarymo pagal veiklos sritis (veikla pagrįsto valdymo) sistemą, bendrosios programos apima dvi skirtingas politikos sritis, kuriose bendrųjų programų veikla pateikiama pagal skirtingą įvairiems generaliniams direktoratams būdingą nomenklatūrą (24). Tai taikoma net toms specialiosioms programoms ar paprogramėms, kurias įgyvendina keli generaliniai direktoratai. Veikla pagrįsto valdymo tikslai buvo apibrėžti remiantis skirtingais pagrindiniais principais (25) ir, kaip nurodė Komisijos vidaus audito tarnyba (26), buvo iš esmės suformuluoti abstrakčiai, apibūdinant siekius ar veiklą. Rodikliai buvo daugiausia orientuoti į indėlius (pvz., susitikimų skaičius ir pan.). Kai kurie iš jų buvo susiję su proceso efektyvumu (pvz., sutarties sudarymo, mokėjimų atlikimo laiko aspektais), tačiau nebuvo palyginami nagrinėjant skirtingas programas ir skirtingų generalinių direktoratų veiklą dėl biudžeto sudarymo pagal veiklos sritis nomenklatūros skirtumų, generaliniams direktoratams būdingų konkrečių prielaidų (kaip antai konkrečių administracinių procesų pradžia ir pabaiga) ir jų apskaičiavimui naudotos pagrindinių duomenų (pvz., dotacijos susitarimo rūšis, mokėjimo rūšis) visumos.

Rekomendacijos

34.

| 34. | Ateityje Tarybai ir Europos Parlamentui teikdama teisės aktų projektus Komisija turėtų išdėstyti aiškią visai bendrajai programai bei jos sudėtinėms dalims skirtą intervencijos logiką. |
| --- | --- |

Ateityje Tarybai ir Europos Parlamentui teikdama teisės aktų projektus Komisija turėtų išdėstyti aiškią visai bendrajai programai bei jos sudėtinėms dalims skirtą intervencijos logiką.

| 35. | BP7 atveju Komisija turėtų






  — | aiškiai apibūdinti bendrosios programos ir jos specialiųjų sudėtinių programų (ir paprogramių) tikslus ir būdus, kaip jie turi būti pasiekti, |
| --- | --- | --- |

35.

BP7 atveju Komisija turėtų

—

aiškiai apibūdinti bendrosios programos ir jos specialiųjų sudėtinių programų (ir paprogramių) tikslus ir būdus, kaip jie turi būti pasiekti,

| — | kiekvienos specialiosios programos (ir paprogramės) atveju aiškiai įvardyti sąsają tarp mokslinių ir socialinių bei ekonominių tikslų, |
| --- | --- |

—

kiekvienos specialiosios programos (ir paprogramės) atveju aiškiai įvardyti sąsają tarp mokslinių ir socialinių bei ekonominių tikslų,

| — | apibrėžti tinkamus veiklos tikslus. |
| --- | --- |

—

apibrėžti tinkamus veiklos tikslus.

| 36. | Komisija, taikydama savo BP7 stebėsenos sistemą, kiekvienai specialiajai programai (ir paprogramei) turėtų sudaryti ribotą, bet subalansuotą veiklos rodiklių, kuriais būtų vertinami programos įgyvendinimo efektyvumas ir rezultatyvumas, sąrašą. |
| --- | --- |

36.

Komisija, taikydama savo BP7 stebėsenos sistemą, kiekvienai specialiajai programai (ir paprogramei) turėtų sudaryti ribotą, bet subalansuotą veiklos rodiklių, kuriais būtų vertinami programos įgyvendinimo efektyvumas ir rezultatyvumas, sąrašą.

| 37. | Mokslinių tyrimų generaliniai direktoratai turėtų suderinti savo biudžeto sudarymo pagal veiklos sritis (veikla pagrįsto valdymo) nomenklatūrą, kad veiklos rodikliai būti palyginami laike ir, jei įmanoma, – nagrinėjant specialiąsias programas (ir paprogrames). |
| --- | --- |

37.

Mokslinių tyrimų generaliniai direktoratai turėtų suderinti savo biudžeto sudarymo pagal veiklos sritis (veikla pagrįsto valdymo) nomenklatūrą, kad veiklos rodikliai būti palyginami laike ir, jei įmanoma, – nagrinėjant specialiąsias programas (ir paprogrames).

Vertinimo strategija

| 38. | Vertinimo strategija sudaro koncepcinę sistemą, pagal kurią vertinimo veikla yra numatoma, planuojama, vykdoma ir panaudojama. Geroji praktika kitose ES biudžeto ir ne tik srityse reiškia, kad taikant tokią strategiją turėtų būti atsižvelgiama į su programos vertinimu susijusius pagrindinius teisinius, organizacinius ir metodinius klausimus, taip pat į tai, kokie vertinimai turi būti atlikti, kas ir kada juos turi atlikti, kaip duomenys turi būti renkami, kokia turi būti naudojama metodika ir kaip turi būti pranešama apie nustatytus faktus bei kokių tolesnių veiksmų reiktų imtis. |
| --- | --- |

38.

Vertinimo strategija sudaro koncepcinę sistemą, pagal kurią vertinimo veikla yra numatoma, planuojama, vykdoma ir panaudojama. Geroji praktika kitose ES biudžeto ir ne tik srityse reiškia, kad taikant tokią strategiją turėtų būti atsižvelgiama į su programos vertinimu susijusius pagrindinius teisinius, organizacinius ir metodinius klausimus, taip pat į tai, kokie vertinimai turi būti atlikti, kas ir kada juos turi atlikti, kaip duomenys turi būti renkami, kokia turi būti naudojama metodika ir kaip turi būti pranešama apie nustatytus faktus bei kokių tolesnių veiksmų reiktų imtis.

| 39. | Turėti tokią strategiją ir užtikrinti, kad ji būtų įgyvendinta, – tai būtina vertinimo principo įdiegimo Komisijos organizacijos kultūroje ir sprendimų priėmimo procese sąlyga. Tačiau Audito Rūmai pripažįsta, kad atsižvelgiant į mokslinių sričių, kurias apima bendrosios programos, įvairovę, tokia strategija kiekvienam atsakingam generaliniam direktoratui turėtų suteikti pakankamai lankstumo ir nebūti per daug suvaržanti. |
| --- | --- |

39.

Turėti tokią strategiją ir užtikrinti, kad ji būtų įgyvendinta, – tai būtina vertinimo principo įdiegimo Komisijos organizacijos kultūroje ir sprendimų priėmimo procese sąlyga. Tačiau Audito Rūmai pripažįsta, kad atsižvelgiant į mokslinių sričių, kurias apima bendrosios programos, įvairovę, tokia strategija kiekvienam atsakingam generaliniam direktoratui turėtų suteikti pakankamai lankstumo ir nebūti per daug suvaržanti.

| 40. | Audito Rūmai patikrino, kokiu mastu Komisija turėjo įdiegusi tokią bendrųjų programų vertinimo strategiją. |
| --- | --- |

40.

Audito Rūmai patikrino, kokiu mastu Komisija turėjo įdiegusi tokią bendrųjų programų vertinimo strategiją.

Nėra integruotos bendrųjų programų vertinimo strategijos

| 41. | Bendrųjų programų atveju Komisija pirmą kartą savo vertinimo metodą paskelbė devintajame dešimtmetyje (27). Jis buvo atnaujintas 1996 m., kai Komisija informavo Europos Parlamentą ir Tarybą apie, jos manymu, tuo metu tinkamus pagrindinius stebėsenos ir vertinimo principus, ir kai patvirtinus BP4, ji išdėstė metodą, kurį ji ketina taikyti (28). Tačiau tai nebuvo integruota vertinimo strategija, kaip nurodyta pirmiau (žr. 38 ir 39 dalis). Be to, 1996–2006 m. Komisija iš naujo iš esmės neišnagrinėjo BP5 ir BP6 taikomo savo vertinimo metodo, nepaisant to, kad pasikeitė bendrųjų programų apimtis ir kryptis (žr. 7 dalį). Visų pirma mokslinių tyrimų generaliniai direktoratai nesusitarė dėl nuoseklaus bendrųjų programų ir jų sudėtinių programų vertinimo metodo, neskaitant tų teisės aktų reikalavimų, kurie buvo patvirtinti 1999 m. (BP5), 2002 m. (BP6) ir 2006 m. (BP7) (29). |
| --- | --- |

41.

Bendrųjų programų atveju Komisija pirmą kartą savo vertinimo metodą paskelbė devintajame dešimtmetyje (27). Jis buvo atnaujintas 1996 m., kai Komisija informavo Europos Parlamentą ir Tarybą apie, jos manymu, tuo metu tinkamus pagrindinius stebėsenos ir vertinimo principus, ir kai patvirtinus BP4, ji išdėstė metodą, kurį ji ketina taikyti (28). Tačiau tai nebuvo integruota vertinimo strategija, kaip nurodyta pirmiau (žr. 38 ir 39 dalis). Be to, 1996–2006 m. Komisija iš naujo iš esmės neišnagrinėjo BP5 ir BP6 taikomo savo vertinimo metodo, nepaisant to, kad pasikeitė bendrųjų programų apimtis ir kryptis (žr. 7 dalį). Visų pirma mokslinių tyrimų generaliniai direktoratai nesusitarė dėl nuoseklaus bendrųjų programų ir jų sudėtinių programų vertinimo metodo, neskaitant tų teisės aktų reikalavimų, kurie buvo patvirtinti 1999 m. (BP5), 2002 m. (BP6) ir 2006 m. (BP7) (29).

| 42. | Tokio vertinimui skirto strateginio metodo šioje srityje nebuvimas dabartiniu programavimo laikotarpiu – tai rimta problema turint omeny tai, kad keli generaliniai direktoratai, EMTT ir vykdomosios agentūros bendrai įgyvendina BP7, ir tai, kad Finansinis reglamentas nustato privalomą darbuotojų, einančių svarbias pareigas, rotaciją. Tai taip pat sudaro kontrastą esamai praktikai išorės pagalbos srityje (kuri yra antra pagal dydį tiesioginio Komisijos vykdomo valdymo sritis). Šioje srityje 2002 m. kompetentingi generaliniai direktoratai susitarė dėl bendrų daugiamečių vertinimo strategijų, susijusių su programavimo laikotarpiais (žr. 52 dalį). |
| --- | --- |

42.

Tokio vertinimui skirto strateginio metodo šioje srityje nebuvimas dabartiniu programavimo laikotarpiu – tai rimta problema turint omeny tai, kad keli generaliniai direktoratai, EMTT ir vykdomosios agentūros bendrai įgyvendina BP7, ir tai, kad Finansinis reglamentas nustato privalomą darbuotojų, einančių svarbias pareigas, rotaciją. Tai taip pat sudaro kontrastą esamai praktikai išorės pagalbos srityje (kuri yra antra pagal dydį tiesioginio Komisijos vykdomo valdymo sritis). Šioje srityje 2002 m. kompetentingi generaliniai direktoratai susitarė dėl bendrų daugiamečių vertinimo strategijų, susijusių su programavimo laikotarpiais (žr. 52 dalį).

| 43. | Šios aiškiai suformuluotos vertinimo strategijos nebuvimas taip pat sudaro didelį kontrastą situacijai JAV ir Kanadoje, kur strategijos parengimas yra būtinas pagal norminę bazę (žr. III priedą). |
| --- | --- |

43.

Šios aiškiai suformuluotos vertinimo strategijos nebuvimas taip pat sudaro didelį kontrastą situacijai JAV ir Kanadoje, kur strategijos parengimas yra būtinas pagal norminę bazę (žr. III priedą).

| 44. | Kaip parodyta toliau, esama didelių bendrųjų programų vertinimo apimties ir intensyvumo skirtumų. Taip pat buvo kitų trūkumų, kaip antai koordinavimo problemos, metodikos skirtumai, laiko apskaičiavimo problemos ir trūkumai pranešant apie vertinimo metu nustatytus faktus bei atsižvelgimą į juos. Visa tai nagrinėjama tolesniuose šios ataskaitos skirsniuose. Šie trūkumai rodo, kad nėra integruotos bendrųjų programų vertinimo strategijos. |
| --- | --- |

44.

Kaip parodyta toliau, esama didelių bendrųjų programų vertinimo apimties ir intensyvumo skirtumų. Taip pat buvo kitų trūkumų, kaip antai koordinavimo problemos, metodikos skirtumai, laiko apskaičiavimo problemos ir trūkumai pranešant apie vertinimo metu nustatytus faktus bei atsižvelgimą į juos. Visa tai nagrinėjama tolesniuose šios ataskaitos skirsniuose. Šie trūkumai rodo, kad nėra integruotos bendrųjų programų vertinimo strategijos.

Bendrųjų programų vertinimo apimties ir intensyvumo skirtumai

| 45. | Bendrąsias programas sudaro nemažai specialiųjų programų (ir paprogramių), kurios gali ženkliai skirtis savo tikslo, dinamikos, įtakojančios procesus, ir biudžeto asignavimų prasme (BP7 programos atveju žr. IV priedą). Kartu paėmus, konkrečios įvairių sprendimų dėl bendrųjų programų ir Finansinio reglamento (30) nuostatos (pagal kurias reikalaujama, kad būtų atliktas programų ir veiklos sričių, susijusių su didelėmis išlaidomis, vertinimas) reiškia, kad nuo BP4 parengimo galiojo teisinis reikalavimas vertinti ir visą bendrąją programą, ir daugelį jos specialiųjų sudėtinių programų. |
| --- | --- |

45.

Bendrąsias programas sudaro nemažai specialiųjų programų (ir paprogramių), kurios gali ženkliai skirtis savo tikslo, dinamikos, įtakojančios procesus, ir biudžeto asignavimų prasme (BP7 programos atveju žr. IV priedą). Kartu paėmus, konkrečios įvairių sprendimų dėl bendrųjų programų ir Finansinio reglamento (30) nuostatos (pagal kurias reikalaujama, kad būtų atliktas programų ir veiklos sričių, susijusių su didelėmis išlaidomis, vertinimas) reiškia, kad nuo BP4 parengimo galiojo teisinis reikalavimas vertinti ir visą bendrąją programą, ir daugelį jos specialiųjų sudėtinių programų.

| 46. | Komisija nenustatė taisyklės, kada specialiosios BP programos ar paprogramės turi būti vertinamos, ar bendros ribos, kurią viršijus tai turi būti padaryta. Todėl buvo nenuosekliai aiškinama, kas turėtų būti įvertinta ir kaip išsamiai tai turėtų būti padaryta:






  — | Informacinės visuomenės generalinis direktoratas laikė Informacinės visuomenės technologijų (IST) programą atskira pagrindine išlaidų programa ir 2004 m. kartu su visos bendrosios programos įvertinimu atliko visapusišką penkerių metų laikotarpio įvertinimą, |
| --- | --- | --- |

46.

Komisija nenustatė taisyklės, kada specialiosios BP programos ar paprogramės turi būti vertinamos, ar bendros ribos, kurią viršijus tai turi būti padaryta. Todėl buvo nenuosekliai aiškinama, kas turėtų būti įvertinta ir kaip išsamiai tai turėtų būti padaryta:

—

Informacinės visuomenės generalinis direktoratas laikė Informacinės visuomenės technologijų (IST) programą atskira pagrindine išlaidų programa ir 2004 m. kartu su visos bendrosios programos įvertinimu atliko visapusišką penkerių metų laikotarpio įvertinimą,

| — | Mokslinių tyrimų generalinis direktoratas neorganizavo sistemingų tokio pobūdžio specialiųjų programų vertinimų nepaisant to, kad kelių programų, už kurias jis yra atsakingas, biudžetai buvo panašaus dydžio. |
| --- | --- |

—

Mokslinių tyrimų generalinis direktoratas neorganizavo sistemingų tokio pobūdžio specialiųjų programų vertinimų nepaisant to, kad kelių programų, už kurias jis yra atsakingas, biudžetai buvo panašaus dydžio.

| 47. | Tokiu būdu 2004 m. atliekant penkerių metų laikotarpio įvertinimą svarbios BP4 ir BP5 programų dalys buvo visiškai neįvertintos (BP4 atveju tai atitinka 30 % visų biudžeto asignavimų, o BP5–50 % visų biudžeto asignavimų). Tai reiškia, kad Komisija nesilaikė Finansinio reglamento 27 straipsnyje nurodytų vertinimo reikalavimų. |
| --- | --- |

47.

Tokiu būdu 2004 m. atliekant penkerių metų laikotarpio įvertinimą svarbios BP4 ir BP5 programų dalys buvo visiškai neįvertintos (BP4 atveju tai atitinka 30 % visų biudžeto asignavimų, o BP5–50 % visų biudžeto asignavimų). Tai reiškia, kad Komisija nesilaikė Finansinio reglamento 27 straipsnyje nurodytų vertinimo reikalavimų.

| 48. | Šios skirtingos interpretacijos, kokie turi būti minimalūs su vertinimu susiję teisiniai reikalavimai, ir dėl to praeityje atliktas nepakankamas bendrųjų programų įvertinimas iliustruoja koordinavimo stoką ir Komisijos strateginio metodo vertinant bendrąsias programas neparengimo pasekmes. |
| --- | --- |

48.

Šios skirtingos interpretacijos, kokie turi būti minimalūs su vertinimu susiję teisiniai reikalavimai, ir dėl to praeityje atliktas nepakankamas bendrųjų programų įvertinimas iliustruoja koordinavimo stoką ir Komisijos strateginio metodo vertinant bendrąsias programas neparengimo pasekmes.

Rekomendacijos

49.

| 49. | Mokslinių tyrimų generaliniai direktoratai turėtų skubiai parengti bendrą bendrųjų programų vertinimo strategiją ir dėl jos susitarti. Nebūdama pernelyg suvaržanti, ši strategija turėtų sudaryti sąlygas taikyti nuoseklų bendrųjų programų ir jų sudėtinių dalių vertinimo metodą. Tokia strategija taip pat turėtų numatyti gaires dėl minimalaus lygio, kuriam esant turi būti atliekamas išsamus įvertinimas, siekiant atsižvelgti į kiekvienos mokslinės srities specifiką. |
| --- | --- |

Mokslinių tyrimų generaliniai direktoratai turėtų skubiai parengti bendrą bendrųjų programų vertinimo strategiją ir dėl jos susitarti. Nebūdama pernelyg suvaržanti, ši strategija turėtų sudaryti sąlygas taikyti nuoseklų bendrųjų programų ir jų sudėtinių dalių vertinimo metodą. Tokia strategija taip pat turėtų numatyti gaires dėl minimalaus lygio, kuriam esant turi būti atliekamas išsamus įvertinimas, siekiant atsižvelgti į kiekvienos mokslinės srities specifiką.

Bendrųjų programų vertinimo organizavimas

| 50. | Bendrųjų programų vertinimas turėtų remtis atitinkamomis organizacinėmis nuostatomis, suderintomis su Komisijos nustatyta strategine bendrųjų programų vertinimo kryptimi. Audito Rūmai patikrino, kokiu mastu organizacinė struktūra užtikrino, kad vertinimo sistema būtų tinkamai koordinuojama, jai būtų skirti atitinkami ištekliai, o suinteresuotosios šalys ją laikytų pakankamai nepriklausoma. |
| --- | --- |

50.

Bendrųjų programų vertinimas turėtų remtis atitinkamomis organizacinėmis nuostatomis, suderintomis su Komisijos nustatyta strategine bendrųjų programų vertinimo kryptimi. Audito Rūmai patikrino, kokiu mastu organizacinė struktūra užtikrino, kad vertinimo sistema būtų tinkamai koordinuojama, jai būtų skirti atitinkami ištekliai, o suinteresuotosios šalys ją laikytų pakankamai nepriklausoma.

Komisija

Bendrąsias programas bendrai vykdo keli generaliniai direktoratai, o atsakomybė už įvertinimą yra decentralizuota

| 51. | Komisijoje atsakomybė už išlaidų programų vertinimą tenka atskiriems generaliniams direktoratams (žr. 8 dalį); kiekviename generaliniame direktorate įsteigti vertinimo padaliniai. Šie vertinimo padaliniai yra atsakingi už vertinimų planavimą, koordinavimą ir atlikimą. |
| --- | --- |

51.

Komisijoje atsakomybė už išlaidų programų vertinimą tenka atskiriems generaliniams direktoratams (žr. 8 dalį); kiekviename generaliniame direktorate įsteigti vertinimo padaliniai. Šie vertinimo padaliniai yra atsakingi už vertinimų planavimą, koordinavimą ir atlikimą.

| 52. | Specialaus koordinavimo skyriaus ar vieno visų bendrųjų programų vertinimui skirto organizacinio darinio, pavyzdžiui, bendros vertinimo tarnybos, įsteigtos mokslinių tyrimų generaliniams direktoratams, nebuvimas sudaro kontrastą kitoms politikos sritims. Išorės pagalbos srityje trims generaliniams direktoratams (Vystymosi, Išorės ryšių ir EuropeAid) yra įsteigtas bendras vertinimo padalinys, atsakingas už Komisijos vystymosi programų trečiosiose šalyse įvertinimą (žr. 42 dalį). |
| --- | --- |

52.

Specialaus koordinavimo skyriaus ar vieno visų bendrųjų programų vertinimui skirto organizacinio darinio, pavyzdžiui, bendros vertinimo tarnybos, įsteigtos mokslinių tyrimų generaliniams direktoratams, nebuvimas sudaro kontrastą kitoms politikos sritims. Išorės pagalbos srityje trims generaliniams direktoratams (Vystymosi, Išorės ryšių ir EuropeAid) yra įsteigtas bendras vertinimo padalinys, atsakingas už Komisijos vystymosi programų trečiosiose šalyse įvertinimą (žr. 42 dalį).

| 53. | Mokslinių tyrimų generalinis direktoratas, pasitelkdamas Komisijos vidinį mokslinių tyrimų ir technologinės plėtros vertinimo tinklą, užtikrina žinių mainus tarp skirtingų generalinių direktoratų vertinimo padalinių, tačiau neturi įgaliojimų nustatyti minimalių vertinimo reikalavimų. Tačiau šis mechanizmas nebuvo pakankamas, kad galėtų užtikrinti tinkamą Komisijos vykdomo bendrųjų programų vertinimo koordinavimą. |
| --- | --- |

53.

Mokslinių tyrimų generalinis direktoratas, pasitelkdamas Komisijos vidinį mokslinių tyrimų ir technologinės plėtros vertinimo tinklą, užtikrina žinių mainus tarp skirtingų generalinių direktoratų vertinimo padalinių, tačiau neturi įgaliojimų nustatyti minimalių vertinimo reikalavimų. Tačiau šis mechanizmas nebuvo pakankamas, kad galėtų užtikrinti tinkamą Komisijos vykdomo bendrųjų programų vertinimo koordinavimą.

| 54. | 2000 m. ir 2002 m., o po to ir 2007 m. Komisija patikslino savo bendrąjį vertinimo metodą (žr. 14 dalį). Nors nebuvo pastebėta didelės pažangos planuojant, rengiant ir atliekant bendrųjų programų ir jų sudėtinių programų vertinimus, apskritai mokslinių tyrimų generaliniai direktoratai įvykdė formalius visoje Komisijoje taikomus reikalavimus. |
| --- | --- |

54.

2000 m. ir 2002 m., o po to ir 2007 m. Komisija patikslino savo bendrąjį vertinimo metodą (žr. 14 dalį). Nors nebuvo pastebėta didelės pažangos planuojant, rengiant ir atliekant bendrųjų programų ir jų sudėtinių programų vertinimus, apskritai mokslinių tyrimų generaliniai direktoratai įvykdė formalius visoje Komisijoje taikomus reikalavimus.

Komisijos centrinės tarnybos nustato standartus, bet ne prižiūri, kaip jie taikomi

| 55. | Komisijos centrinės tarnybos (visų pirma Biudžeto generalinis direktoratas ir Generalinis sekretoriatas) teikia metodines gaires, nustato visoje Komisijoje taikytinus bendrus standartus ir prižiūri, kaip generaliniai direktoratai ir tarnybos taiko šiuos standartus (žr. 14 ir 70 dalis). Jie negali nustatyti, kaip vertinimai turi būti atliekami praktikoje. |
| --- | --- |

55.

Komisijos centrinės tarnybos (visų pirma Biudžeto generalinis direktoratas ir Generalinis sekretoriatas) teikia metodines gaires, nustato visoje Komisijoje taikytinus bendrus standartus ir prižiūri, kaip generaliniai direktoratai ir tarnybos taiko šiuos standartus (žr. 14 ir 70 dalis). Jie negali nustatyti, kaip vertinimai turi būti atliekami praktikoje.

| 56. | Patirtis JAV ir Kanadoje byloja, kad tose valstybėse vykdymo priežiūros funkcija, kurią atlieka standartų nustatymo įstaigos, padeda užtikrinti veiksmingą vertinimo sistemos funkcionavimą. Abiejose šalyse federaliniai departamentai sukuria sistemą, kuria remiantis galiausiai yra vertinama programos sėkmė, bei prižiūri jos taikymą (žr. III priedą). Nors aplinkybės skiriasi, jų sistemos vis dėlto yra grindžiamos tuo pačiu pagrindiniu principu, kad įstaiga, veikianti atskirai nuo programą įgyvendinančios įstaigos, turėtų pakankamai išsamiai įvertinti vertinimo sistemos veikimo pagrindus ir patikrinti jos veiksmingumą. Ta pati tendencija pastebima ir kai kuriose valstybėse narėse (pvz., Prancūzijoje (31), Ispanijoje (32), Vokietijoje (33)), kur išorės įstaigos prižiūri finansavimo agentūrų atliekamus vertinimus ar net pačios atlieka šiuos vertinimus. |
| --- | --- |

56.

Patirtis JAV ir Kanadoje byloja, kad tose valstybėse vykdymo priežiūros funkcija, kurią atlieka standartų nustatymo įstaigos, padeda užtikrinti veiksmingą vertinimo sistemos funkcionavimą. Abiejose šalyse federaliniai departamentai sukuria sistemą, kuria remiantis galiausiai yra vertinama programos sėkmė, bei prižiūri jos taikymą (žr. III priedą). Nors aplinkybės skiriasi, jų sistemos vis dėlto yra grindžiamos tuo pačiu pagrindiniu principu, kad įstaiga, veikianti atskirai nuo programą įgyvendinančios įstaigos, turėtų pakankamai išsamiai įvertinti vertinimo sistemos veikimo pagrindus ir patikrinti jos veiksmingumą. Ta pati tendencija pastebima ir kai kuriose valstybėse narėse (pvz., Prancūzijoje (31), Ispanijoje (32), Vokietijoje (33)), kur išorės įstaigos prižiūri finansavimo agentūrų atliekamus vertinimus ar net pačios atlieka šiuos vertinimus.

Vertinimo komisijos

Išorės ekspertų vertinimo komisijos: jos privalomos nuo BP4 programos pradžios pagal bendrųjų programų teisės aktus

| 57. | Nuo BP4 programos pradžios visus svarbius pagrindinių programų vertinimus (ir metinę stebėseną) turėjo atlikti išorės ekspertų vertinimo komisijos (arba jie turėjo būti atlikti joms padedant) (žr. II priedą). Nepaisant su tinkamų ekspertų paieškomis susijusių sunkumų, tokios komisijos gali suteikti skaidrumo, tam tikro nepriklausomumo, sudaryti palankias sąlygas įsitraukti suinteresuotosioms šalims ir skleisti žinias apie pačias bendrąsias programas, vertinimą ir susijusius mokslinius klausimus. |
| --- | --- |

57.

Nuo BP4 programos pradžios visus svarbius pagrindinių programų vertinimus (ir metinę stebėseną) turėjo atlikti išorės ekspertų vertinimo komisijos (arba jie turėjo būti atlikti joms padedant) (žr. II priedą). Nepaisant su tinkamų ekspertų paieškomis susijusių sunkumų, tokios komisijos gali suteikti skaidrumo, tam tikro nepriklausomumo, sudaryti palankias sąlygas įsitraukti suinteresuotosioms šalims ir skleisti žinias apie pačias bendrąsias programas, vertinimą ir susijusius mokslinius klausimus.

| 58. | Tai patvirtino Audito Rūmų apklausos, per kurias respondentai pasisakė, jog vertinimo komisijų darbu grindžiama Komisijos vertinimo sistema suteikia nepriklausomumo garantiją (žr. 4 diagramą). |
| --- | --- |

58.

Tai patvirtino Audito Rūmų apklausos, per kurias respondentai pasisakė, jog vertinimo komisijų darbu grindžiama Komisijos vertinimo sistema suteikia nepriklausomumo garantiją (žr. 4 diagramą).

Image

Komisijos vykdomo metodo, kuris yra grindžiamas vertinimo komisijos darbu, trūkumai

| 59. | Nepaisant šios teigiamos nuomonės, kaip Audito Rūmams audito metu pareiškė vertinimo komisijos nariai ir suinteresuotosios šalys, Komisijai naudojantis vertinimo komisijos paslaugomis siekiant įvertinti bendrąsias programas, išryškėjo šie trūkumai:






  — | vertinimo komisijos dažniausiai sudaromos likus mažiau nei vieneriems metams iki dienos, kai turi būti parengta jų ataskaita; o jų susirinkimai yra reti. Dėl to vertinimo komisijos nariams sunku daryti įtaką jų darbui būtinų duomenų ir analizės apibrėžimui. Be to, kadangi komisijos yra specializuotos ir laikinos, nėra lengva kaupti žinias apie programas, o svarbūs klausimai negali būti nagrinėjami laikui bėgant. Tai – rimtas trūkumas, kai (pvz., BP7 atveju) viso programavimo laikotarpio metu planuojama atlikti nemažai svarbių įvertinimų (žr. II priedą). Tai taip pat sudaro kontrastą Komisijos praktikai bendrosioms programoms pasitelkti savo ekspertų patariamąsias grupes, kurios yra nuolatiniai dariniai (34). Tai pat ir Kanadoje (35) vertinimo komisijos yra nuolatinės, kad būtų užtikrintas nuoseklus ir suderintas požiūris (žr. III priedą), |
| --- | --- | --- |

59.

Nepaisant šios teigiamos nuomonės, kaip Audito Rūmams audito metu pareiškė vertinimo komisijos nariai ir suinteresuotosios šalys, Komisijai naudojantis vertinimo komisijos paslaugomis siekiant įvertinti bendrąsias programas, išryškėjo šie trūkumai:

—

vertinimo komisijos dažniausiai sudaromos likus mažiau nei vieneriems metams iki dienos, kai turi būti parengta jų ataskaita; o jų susirinkimai yra reti. Dėl to vertinimo komisijos nariams sunku daryti įtaką jų darbui būtinų duomenų ir analizės apibrėžimui. Be to, kadangi komisijos yra specializuotos ir laikinos, nėra lengva kaupti žinias apie programas, o svarbūs klausimai negali būti nagrinėjami laikui bėgant. Tai – rimtas trūkumas, kai (pvz., BP7 atveju) viso programavimo laikotarpio metu planuojama atlikti nemažai svarbių įvertinimų (žr. II priedą). Tai taip pat sudaro kontrastą Komisijos praktikai bendrosioms programoms pasitelkti savo ekspertų patariamąsias grupes, kurios yra nuolatiniai dariniai (34). Tai pat ir Kanadoje (35) vertinimo komisijos yra nuolatinės, kad būtų užtikrintas nuoseklus ir suderintas požiūris (žr. III priedą),

| — | nustatydama vertinimo komisijoms skirtas technines užduotis ir formuluodama vertinimo klausimus, Komisija nesikonsultuoja su išorės suinteresuotosiomis šalimis, tokiomis kaip bendrosiose programose dalyvaujančios pramonės ir didelės mokslinių tyrimų organizacijos. 2004 m. stebėsenos komisija taip pat atkreipė dėmesį į šią problemą, pažymėdama, kad „... galimi vartotojai turėtų įsijungti į procesą pačioje jo pradžioje“ (36), |
| --- | --- |

—

nustatydama vertinimo komisijoms skirtas technines užduotis ir formuluodama vertinimo klausimus, Komisija nesikonsultuoja su išorės suinteresuotosiomis šalimis, tokiomis kaip bendrosiose programose dalyvaujančios pramonės ir didelės mokslinių tyrimų organizacijos. 2004 m. stebėsenos komisija taip pat atkreipė dėmesį į šią problemą, pažymėdama, kad „... galimi vartotojai turėtų įsijungti į procesą pačioje jo pradžioje“ (36),

| — | vertinimo komisijų darbo pobūdis skiriasi nuo kolegų atliekamos peržiūros. Jų nariai neturi laiko patys atlikti vertinimus; paprastai jie duoda patarimus, pagrįstus iš kitų šaltinių jiems suteiktais duomenimis ir įrodymais. Dėl laiko suvaržymų vertinimo komisijos turėjo labai mažai galimybių pavesti atlikti jų techninėse užduotyse nurodytiems klausimams nagrinėti skirtus papildomus tyrimus. Iš tikrųjų, išskyrus kelias išimtis, penkerių metų laikotarpio vertinimo komisijoms buvo prieinama tik Komisijos pateikta informacija. |
| --- | --- |

—

vertinimo komisijų darbo pobūdis skiriasi nuo kolegų atliekamos peržiūros. Jų nariai neturi laiko patys atlikti vertinimus; paprastai jie duoda patarimus, pagrįstus iš kitų šaltinių jiems suteiktais duomenimis ir įrodymais. Dėl laiko suvaržymų vertinimo komisijos turėjo labai mažai galimybių pavesti atlikti jų techninėse užduotyse nurodytiems klausimams nagrinėti skirtus papildomus tyrimus. Iš tikrųjų, išskyrus kelias išimtis, penkerių metų laikotarpio vertinimo komisijoms buvo prieinama tik Komisijos pateikta informacija.

Ištekliai

Nėra konkrečių bendrosioms programoms vertinti skirtų išteklių

| 60. | Vertinimui skirtas finansavimas teikiamas kiekvienais metais atsižvelgiant į bendrąsias programas įgyvendinančių generalinių direktoratų nurodytus poreikius. Šiuo metu jis yra užtikrinamas iš kelių išteklių Komisijos mastu, būtent, Biudžeto generalinio direktorato ir administracinės susijusių generalinių direktoratų biudžeto dalies. Be to, iš bendrųjų programų veiklos biudžeto kaip netiesioginiai veiksmai finansuojamos konkrečios priemonės. Tai reiškia, kad nėra atidėtos konkrečios vertinimui skirtos sumos. |
| --- | --- |

60.

Vertinimui skirtas finansavimas teikiamas kiekvienais metais atsižvelgiant į bendrąsias programas įgyvendinančių generalinių direktoratų nurodytus poreikius. Šiuo metu jis yra užtikrinamas iš kelių išteklių Komisijos mastu, būtent, Biudžeto generalinio direktorato ir administracinės susijusių generalinių direktoratų biudžeto dalies. Be to, iš bendrųjų programų veiklos biudžeto kaip netiesioginiai veiksmai finansuojamos konkrečios priemonės. Tai reiškia, kad nėra atidėtos konkrečios vertinimui skirtos sumos.

| 61. | 2006 m. visos Komisijos darbuotojų, dirbančių vertinimo ir veikla grindžiamo valdymo srityje, vidurkis siekė apytiksliai 1 % visų darbuotojų (37). Mokslinių tyrimų ir technologinės plėtros bendrųjų programų stebėsenos ir vertinimo veiklos rodikliai Mokslinių tyrimų ir Informacinės visuomenės generaliniuose direktoratuose buvo atitinkamai 1,2 % ir 1,3 %. Tačiau Mokslinių tyrimų generalinio direktorato atveju daugiau kaip du trečdaliai šių žmogiškųjų išteklių buvo skirta veiklos programų skyriams, o ne vertinimo padaliniui, o vertinimas buvo tik viena iš daugelio jiems priskirtų užduočių. |
| --- | --- |

61.

2006 m. visos Komisijos darbuotojų, dirbančių vertinimo ir veikla grindžiamo valdymo srityje, vidurkis siekė apytiksliai 1 % visų darbuotojų (37). Mokslinių tyrimų ir technologinės plėtros bendrųjų programų stebėsenos ir vertinimo veiklos rodikliai Mokslinių tyrimų ir Informacinės visuomenės generaliniuose direktoratuose buvo atitinkamai 1,2 % ir 1,3 %. Tačiau Mokslinių tyrimų generalinio direktorato atveju daugiau kaip du trečdaliai šių žmogiškųjų išteklių buvo skirta veiklos programų skyriams, o ne vertinimo padaliniui, o vertinimas buvo tik viena iš daugelio jiems priskirtų užduočių.

Bendrųjų programų vertinimui skirtos sumos mažesnės nei rekomenduoja Komisija

| 62. | Vertinimui skirti ištekliai taip pat gali būti išreikšti visų programai numatytų biudžeto asignavimų procentine dalimi. Audito metu gauti skaičiai rodo, kad ES valstybėse narėse praktiniam mokslinių tyrimų programų įgyvendinimui tenka 0,1 %–2 % asignavimų. Komisijos gairėse rekomenduojama, kad 0,5 % programos biudžeto turėtų būti skirta vertinimui (38). Tačiau didesnės apimties programų atveju masto ekonomija reiškia, kad pakaktų skirti mažesnę jų biudžeto dalį. |
| --- | --- |

62.

Vertinimui skirti ištekliai taip pat gali būti išreikšti visų programai numatytų biudžeto asignavimų procentine dalimi. Audito metu gauti skaičiai rodo, kad ES valstybėse narėse praktiniam mokslinių tyrimų programų įgyvendinimui tenka 0,1 %–2 % asignavimų. Komisijos gairėse rekomenduojama, kad 0,5 % programos biudžeto turėtų būti skirta vertinimui (38). Tačiau didesnės apimties programų atveju masto ekonomija reiškia, kad pakaktų skirti mažesnę jų biudžeto dalį.

| 63. | Palyginus Komisijos 2003–2006 m. vertinimo išlaidų duomenis su kiekvienam generaliniam direktoratui skirtais biudžeto asignavimais, paaiškėjo, kad bendras vidurkis sudaro maždaug 0,15 %, o tai yra daug mažiau nei Komisijos siūlomas lygis. Atlikus išsamesnę 2006 m. analizę paaiškėjo, kad Informacinės visuomenės generalinis direktoratas vertinimui skyrė maždaug keturis kartus daugiau lėšų nei Mokslinių tyrimų generalinis direktoratas, palyginti su asignavimais, skiriamais pagal jų atitinkamas pareigas. Be to, Mokslinių tyrimų generaliniame direktorate vienam metinio biudžeto milijonui eurų vertinti tenka tik 0,7 % vieno visą darbo dieną dirbančio pareigūno. Tuo tarpu Informacinės visuomenės generalinis direktoratas skiria dukart tiek. |
| --- | --- |

63.

Palyginus Komisijos 2003–2006 m. vertinimo išlaidų duomenis su kiekvienam generaliniam direktoratui skirtais biudžeto asignavimais, paaiškėjo, kad bendras vidurkis sudaro maždaug 0,15 %, o tai yra daug mažiau nei Komisijos siūlomas lygis. Atlikus išsamesnę 2006 m. analizę paaiškėjo, kad Informacinės visuomenės generalinis direktoratas vertinimui skyrė maždaug keturis kartus daugiau lėšų nei Mokslinių tyrimų generalinis direktoratas, palyginti su asignavimais, skiriamais pagal jų atitinkamas pareigas. Be to, Mokslinių tyrimų generaliniame direktorate vienam metinio biudžeto milijonui eurų vertinti tenka tik 0,7 % vieno visą darbo dieną dirbančio pareigūno. Tuo tarpu Informacinės visuomenės generalinis direktoratas skiria dukart tiek.

| 64. | Kaip parodyta šioje ataskaitoje, šios papildomos Informacinės visuomenės generalinio direktorato pastangos leido atlikti labiau integruotą vertinimą (žr. 13 ir 46 dalis), ir kaip rodo Audito Rūmų peržiūrėtos vertinimo tyrimų imties rezultatai, buvo naudotasi vertinimo poreikiams nagrinėti geriau pritaikyta metodika (žr. 84 dalį). |
| --- | --- |

64.

Kaip parodyta šioje ataskaitoje, šios papildomos Informacinės visuomenės generalinio direktorato pastangos leido atlikti labiau integruotą vertinimą (žr. 13 ir 46 dalis), ir kaip rodo Audito Rūmų peržiūrėtos vertinimo tyrimų imties rezultatai, buvo naudotasi vertinimo poreikiams nagrinėti geriau pritaikyta metodika (žr. 84 dalį).

| 65. | Audito Rūmų parengta išlaidų sąmata, grindžiama Komisijos pateiktais duomenimis, rodo, kad vertinimo sistema, sukurta remiantis šioje ataskaitoje pateiktais pasiūlymais, vidutiniškai sudarytų mažiau nei 0,4 % BP7 biudžeto asignavimų. Šios išlaidos apimtų vertinimo komisijų, subrangos būdu atliktų tyrimų, bendros vertinimo tarnybos ir dabartinių konkrečių generalinių direktoratų vertinimo padalinių darbuotojų išlaidas bei kitas įvairias išlaidas (39). |
| --- | --- |

65.

Audito Rūmų parengta išlaidų sąmata, grindžiama Komisijos pateiktais duomenimis, rodo, kad vertinimo sistema, sukurta remiantis šioje ataskaitoje pateiktais pasiūlymais, vidutiniškai sudarytų mažiau nei 0,4 % BP7 biudžeto asignavimų. Šios išlaidos apimtų vertinimo komisijų, subrangos būdu atliktų tyrimų, bendros vertinimo tarnybos ir dabartinių konkrečių generalinių direktoratų vertinimo padalinių darbuotojų išlaidas bei kitas įvairias išlaidas (39).

Rekomendacijos

66.

| 66. | Be dabartinių vertinimo padalinių kiekviename generaliniame direktorate mokslinių tyrimų generaliniai direktoratai turėtų apsvarstyti galimybę įsteigti bendrą vertinimo tarnybą. Pagal dabartinę praktiką kitose politikos srityse ši tarnyba galėtų koordinuoti Komisijos vykdomą visos bendrosios programos vertinimo veiklą. Anksčiau jau buvo rekomenduojama bendrąsias programas įgyvendinantiems generaliniams direktoratams vykdyti tokias bendros paramos funkcijas (40). Šios funkcijos ateityje gali tapti dar svarbesnės įsteigus EMTT ir programos įgyvendinimo įgaliojimus perdavus vykdomosioms įstaigoms. |
| --- | --- |

Be dabartinių vertinimo padalinių kiekviename generaliniame direktorate mokslinių tyrimų generaliniai direktoratai turėtų apsvarstyti galimybę įsteigti bendrą vertinimo tarnybą. Pagal dabartinę praktiką kitose politikos srityse ši tarnyba galėtų koordinuoti Komisijos vykdomą visos bendrosios programos vertinimo veiklą. Anksčiau jau buvo rekomenduojama bendrąsias programas įgyvendinantiems generaliniams direktoratams vykdyti tokias bendros paramos funkcijas (40). Šios funkcijos ateityje gali tapti dar svarbesnės įsteigus EMTT ir programos įgyvendinimo įgaliojimus perdavus vykdomosioms įstaigoms.

| 67. | Komisija ir toliau turėtų naudotis vertinimo komisijų paslaugomis, kad šios padėtų jai vykdyti vertinimo veiklą. Tačiau Komisija turėtų apsvarstyti, kaip suderinti vertinimo komisijos struktūrą su bendra BP programos struktūra. Tai galėtų būti padaryta kuriant komisijas specialiosioms programoms ar, prireikus, paprogramėms (žr. IV priedą). Be to, šios komisijos turėtų būti įsteigtos pakankamai anksti, kad galėtų teikti Komisijai veiksmingą pagalbą. Tokia pagalba turėtų būti teikiama viso programavimo laikotarpio metu ir jam pasibaigus. |
| --- | --- |

67.

Komisija ir toliau turėtų naudotis vertinimo komisijų paslaugomis, kad šios padėtų jai vykdyti vertinimo veiklą. Tačiau Komisija turėtų apsvarstyti, kaip suderinti vertinimo komisijos struktūrą su bendra BP programos struktūra. Tai galėtų būti padaryta kuriant komisijas specialiosioms programoms ar, prireikus, paprogramėms (žr. IV priedą). Be to, šios komisijos turėtų būti įsteigtos pakankamai anksti, kad galėtų teikti Komisijai veiksmingą pagalbą. Tokia pagalba turėtų būti teikiama viso programavimo laikotarpio metu ir jam pasibaigus.

| 68. | Komisija turėtų iš naujo nagrinėti klausimą, kiek išteklių turi būti panaudota vertinant bendrąsias programas ir jų sudėtines programas. |
| --- | --- |

68.

Komisija turėtų iš naujo nagrinėti klausimą, kiek išteklių turi būti panaudota vertinant bendrąsias programas ir jų sudėtines programas.

Vertinimo metodikos ir būdai

| 69. | Tam, kad būtų atliktas veiksmingas įvertinimas, būtina taikyti tinkamą metodiką ir būdus. Audito Rūmai patikrino, ar buvo parengtos konkrečios gairės, skirtos bendrosioms programoms vertinti, ar poreikiai gauti informaciją buvo tinkamai ir laiku analizuojami ir ar svarbūs duomenys buvo prieinami vertintojams. Atsižvelgdami į Komisijos (ar jos vardu) atliktus vertinimo tyrimus, Audito Rūmai patikrino, ar atskiriems tyrimams naudoti būdai sudarė pakankamą pagrindą vertinimo klausimams, nustatytiems penkerių metų laikotarpio vertinimams, spręsti. Taip pat buvo atsižvelgta į galimą vertinimų, atliekamų nacionaliniu mastu, indėlį vertinant bendrąsias programas. |
| --- | --- |

69.

Tam, kad būtų atliktas veiksmingas įvertinimas, būtina taikyti tinkamą metodiką ir būdus. Audito Rūmai patikrino, ar buvo parengtos konkrečios gairės, skirtos bendrosioms programoms vertinti, ar poreikiai gauti informaciją buvo tinkamai ir laiku analizuojami ir ar svarbūs duomenys buvo prieinami vertintojams. Atsižvelgdami į Komisijos (ar jos vardu) atliktus vertinimo tyrimus, Audito Rūmai patikrino, ar atskiriems tyrimams naudoti būdai sudarė pakankamą pagrindą vertinimo klausimams, nustatytiems penkerių metų laikotarpio vertinimams, spręsti. Taip pat buvo atsižvelgta į galimą vertinimų, atliekamų nacionaliniu mastu, indėlį vertinant bendrąsias programas.

Naudojimasis bendrosioms programoms būdingais standartais ir gairėmis

| 70. | Biudžeto generalinis direktoratas paskelbė keletą komunikatų, kuriuose išdėstyta jo vertinimo politika ir numatytos jos įgyvendinimo taisyklės. Juose taip pat nustatyti visoje Komisijoje privalomi taikyti standartai (žr. 14 ir 55 dalis) (41). Kitose politikos srityse kompetentingi generaliniai direktoratai taip pat yra parengę konkrečius vertinimo vadovus (42). |
| --- | --- |

70.

Biudžeto generalinis direktoratas paskelbė keletą komunikatų, kuriuose išdėstyta jo vertinimo politika ir numatytos jos įgyvendinimo taisyklės. Juose taip pat nustatyti visoje Komisijoje privalomi taikyti standartai (žr. 14 ir 55 dalis) (41). Kitose politikos srityse kompetentingi generaliniai direktoratai taip pat yra parengę konkrečius vertinimo vadovus (42).

| 71. | Tačiau taip nėra bendrųjų programų atveju. Mokslinių tyrimų srityje yra parengta keletas vertinimo veiklai skirtų metodinių vadovų ir priemonių komplektų, kuriuos paskelbė (ar finansavo) Komisija (43). Tačiau juose nėra konkrečių gairių, kaip atlikti bendrųjų programų vertinimus, ir nėra apibrėžta, kaip Komisijos darbuotojai ar išorės ekspertai turi naudoti pagrindines sąvokas ar terminologiją. Tai sukėlė toliau aprašytas problemas. |
| --- | --- |

71.

Tačiau taip nėra bendrųjų programų atveju. Mokslinių tyrimų srityje yra parengta keletas vertinimo veiklai skirtų metodinių vadovų ir priemonių komplektų, kuriuos paskelbė (ar finansavo) Komisija (43). Tačiau juose nėra konkrečių gairių, kaip atlikti bendrųjų programų vertinimus, ir nėra apibrėžta, kaip Komisijos darbuotojai ar išorės ekspertai turi naudoti pagrindines sąvokas ar terminologiją. Tai sukėlė toliau aprašytas problemas.

Duomenų poreikiai ir duomenų rinkimas

Nepakankama informacijos poreikių analizė

| 72. | Mokslinių tyrimų generaliniai direktoratai skyrė nepakankamai dėmesio duomenų, kurių reikia vertinimo ir stebėsenos tikslams, pobūdžio nustatymui. Užuot atlikus sistemingą ir išsamią informacijos poreikių analizę, Komisija, deramai neatsižvelgdama į bendrus vertinimo poreikius, vėlai įvardijo reikalavimus dėl duomenų, jau įsibėgėjus programavimo laikotarpiui. BP6 socialinio ir ekonominio pobūdžio klausimynas buvo vienintelis generalinių direktoratų bandymas susitarti dėl tokių duomenų (žr. 76 dalį). Tačiau šis klausimynas buvo užbaigtas 2004 m. (praėjus trejiems metams nuo programavimo laikotarpio pradžios) ir daugiausia apima tokius aspektus kaip vyrų ir moterų dalyvavimas ir poveikis aplinkai, o ne mokslinius išdirbius (kaip antai intelektinės nuosavybės klausimus, leidinius ir t. t.), išdavas ar poveikius. |
| --- | --- |

72.

Mokslinių tyrimų generaliniai direktoratai skyrė nepakankamai dėmesio duomenų, kurių reikia vertinimo ir stebėsenos tikslams, pobūdžio nustatymui. Užuot atlikus sistemingą ir išsamią informacijos poreikių analizę, Komisija, deramai neatsižvelgdama į bendrus vertinimo poreikius, vėlai įvardijo reikalavimus dėl duomenų, jau įsibėgėjus programavimo laikotarpiui. BP6 socialinio ir ekonominio pobūdžio klausimynas buvo vienintelis generalinių direktoratų bandymas susitarti dėl tokių duomenų (žr. 76 dalį). Tačiau šis klausimynas buvo užbaigtas 2004 m. (praėjus trejiems metams nuo programavimo laikotarpio pradžios) ir daugiausia apima tokius aspektus kaip vyrų ir moterų dalyvavimas ir poveikis aplinkai, o ne mokslinius išdirbius (kaip antai intelektinės nuosavybės klausimus, leidinius ir t. t.), išdavas ar poveikius.

| 73. | Norint įvertinti programas būtina turėti trijų rūšių duomenis:






  — | pagal veiksmingumo rodiklius surinktus duomenis, kurių analizė suteikia informacijos apie pažangą siekiant programos tikslų. Pirmiau nurodytos intervencijos logikos nebuvimas reiškia, kad buvo sunku nustatyti tokius rodiklius (žr. 30 dalį). Faktiškai surinkti duomenys buvo mažai svarbūs įvertinant programos tikslų pasiekimą, |
| --- | --- | --- |

73.

Norint įvertinti programas būtina turėti trijų rūšių duomenis:

—

pagal veiksmingumo rodiklius surinktus duomenis, kurių analizė suteikia informacijos apie pažangą siekiant programos tikslų. Pirmiau nurodytos intervencijos logikos nebuvimas reiškia, kad buvo sunku nustatyti tokius rodiklius (žr. 30 dalį). Faktiškai surinkti duomenys buvo mažai svarbūs įvertinant programos tikslų pasiekimą,

| — | programos valdymo duomenis (pagal veiksmingumo rodiklius), |
| --- | --- |

—

programos valdymo duomenis (pagal veiksmingumo rodiklius),

| — | duomenis apie dalyvius (tokius kaip pagrindinių mokslinių tyrimų organizacijų dalyvavimo lygis). |
| --- | --- |

—

duomenis apie dalyvius (tokius kaip pagrindinių mokslinių tyrimų organizacijų dalyvavimo lygis).

| 74. | Visų pirma, Komisijoje turi būti prieinami pastarųjų dviejų rūšių duomenys. Tačiau dėl problemų, susijusių su Komisijos vidinėmis IT sistemomis, kurios yra pagrindinių duomenų apie programos valdymą ir dalyvius (44) šaltinis, praktiškai šiuos duomenis gauti buvo labai sudėtinga (45). |
| --- | --- |

74.

Visų pirma, Komisijoje turi būti prieinami pastarųjų dviejų rūšių duomenys. Tačiau dėl problemų, susijusių su Komisijos vidinėmis IT sistemomis, kurios yra pagrindinių duomenų apie programos valdymą ir dalyvius (44) šaltinis, praktiškai šiuos duomenis gauti buvo labai sudėtinga (45).

| 75. | Tai atspindi faktas, kad smarkiai vėluojama pateikti 173 straipsnyje nurodytus pranešimus ir metines priežiūros ataskaitas (2002–2005 m. 173 straipsnyje nurodytų pranešimų atveju (46) buvo vėluojama iki 16 mėnesių, o metinių priežiūros ataskaitų atveju – iki 7 mėnesių). Kadangi ši informacija būdavo pastoviai per vėlai teikiama, jos nauda buvo nedidelė. |
| --- | --- |

75.

Tai atspindi faktas, kad smarkiai vėluojama pateikti 173 straipsnyje nurodytus pranešimus ir metines priežiūros ataskaitas (2002–2005 m. 173 straipsnyje nurodytų pranešimų atveju (46) buvo vėluojama iki 16 mėnesių, o metinių priežiūros ataskaitų atveju – iki 7 mėnesių). Kadangi ši informacija būdavo pastoviai per vėlai teikiama, jos nauda buvo nedidelė.

Neveiksmingas vertinimo duomenų iš dalyvių gavimo metodas

| 76. | Nuo BP5 programos pradžios Komisija pagal sutarčių nuostatas sistemingai prašydavo dalyvių pateikti šiuos duomenis, skirtus vertinti programos tikslų pasiekimą išdirbių, išdavų ir poveikių atžvilgiu:






  — | pagal BP5 programą dalyvių buvo prašoma pateikti technologinio pobūdžio įgyvendinimo planą kartu su galutine ataskaita po to, kai būdavo užbaigiamas projektas. Šie dokumentai dažnai būdavo prastos kokybės arba visai nebūdavo pateikiami, |
| --- | --- | --- |

76.

Nuo BP5 programos pradžios Komisija pagal sutarčių nuostatas sistemingai prašydavo dalyvių pateikti šiuos duomenis, skirtus vertinti programos tikslų pasiekimą išdirbių, išdavų ir poveikių atžvilgiu:

—

pagal BP5 programą dalyvių buvo prašoma pateikti technologinio pobūdžio įgyvendinimo planą kartu su galutine ataskaita po to, kai būdavo užbaigiamas projektas. Šie dokumentai dažnai būdavo prastos kokybės arba visai nebūdavo pateikiami,

| — | pagal BP6 programą jų prašoma pateikti žinių sklaidos ir naudojimo planą; teikdami savo metines technines ataskaitas jie turi atsakyti į standartiniame klausimyne suformuluotus socialinius ir ekonominius klausimus. |
| --- | --- |

—

pagal BP6 programą jų prašoma pateikti žinių sklaidos ir naudojimo planą; teikdami savo metines technines ataskaitas jie turi atsakyti į standartiniame klausimyne suformuluotus socialinius ir ekonominius klausimus.

| 77. | Dėl šių sutartinių reikalavimų teikti duomenis dalyviams teko bereikalinga administracinė našta. Pavyzdžiui, BP6 programos metinio klausimyno atveju duomenys yra renkami daug dažniau nei to reikia; jie imami iš visos projektų populiacijos, nors užtektų tik reprezentatyviosios imties. Dėl to gali susidaryti „vertinimo nuovargio“ efektas. Be to, ši informacija buvo renkama netinkamu laiku; daugelis esminių duomenų rinkimo veiksnių yra vidutinės trukmės arba ilgalaikio pobūdžio, todėl duomenų rinkimas projekto sutartinės trukmės metu yra iš esmės per ankstyvas (47). Tai paaiškina, kodėl praktiškai buvo labai nedaug pasinaudota šių priemonių teikiama informacija atliekant vertinimus pagal BP5 ir BP6 programas. |
| --- | --- |

77.

Dėl šių sutartinių reikalavimų teikti duomenis dalyviams teko bereikalinga administracinė našta. Pavyzdžiui, BP6 programos metinio klausimyno atveju duomenys yra renkami daug dažniau nei to reikia; jie imami iš visos projektų populiacijos, nors užtektų tik reprezentatyviosios imties. Dėl to gali susidaryti „vertinimo nuovargio“ efektas. Be to, ši informacija buvo renkama netinkamu laiku; daugelis esminių duomenų rinkimo veiksnių yra vidutinės trukmės arba ilgalaikio pobūdžio, todėl duomenų rinkimas projekto sutartinės trukmės metu yra iš esmės per ankstyvas (47). Tai paaiškina, kodėl praktiškai buvo labai nedaug pasinaudota šių priemonių teikiama informacija atliekant vertinimus pagal BP5 ir BP6 programas.

| 78. | Tačiau nė viena įdiegta sistema nenumato informacijos rinkimo standartiniu būdu baigiantis (ar ką tik pasibaigus) visai projekto trukmei. Apklaustos suinteresuotosios šalys pareiškė, kad tokia informacija gali apimti projekto tikslų pasiekimą, numatytus (ir nesuplanuotus) rezultatus bei tai, kaip dalyviai suvokia Bendrijos pridėtinę vertę. Tokia informacija taip pat galėtų būti užbaigtų projektų išorės peržiūrų pagrindas (48). |
| --- | --- |

78.

Tačiau nė viena įdiegta sistema nenumato informacijos rinkimo standartiniu būdu baigiantis (ar ką tik pasibaigus) visai projekto trukmei. Apklaustos suinteresuotosios šalys pareiškė, kad tokia informacija gali apimti projekto tikslų pasiekimą, numatytus (ir nesuplanuotus) rezultatus bei tai, kaip dalyviai suvokia Bendrijos pridėtinę vertę. Tokia informacija taip pat galėtų būti užbaigtų projektų išorės peržiūrų pagrindas (48).

| 79. | Tuo pačiu plačiau naudojant mokslometrinius metodus (tokius kaip nuorodų analizė) vertinant projekto rezultatus (žr. 83 dalį), tai galėtų suteikti pagrindą Komisijai pereiti prie labiau į rezultatus orientuotos su moksliniais tyrimais ir technologine plėtra susijusios veiklos, kurią bendrai finansuoja Bendrija, finansavimo sistemos taikymo (49). |
| --- | --- |

79.

Tuo pačiu plačiau naudojant mokslometrinius metodus (tokius kaip nuorodų analizė) vertinant projekto rezultatus (žr. 83 dalį), tai galėtų suteikti pagrindą Komisijai pereiti prie labiau į rezultatus orientuotos su moksliniais tyrimais ir technologine plėtra susijusios veiklos, kurią bendrai finansuoja Bendrija, finansavimo sistemos taikymo (49).

Kiti netinkamai naudojami duomenų šaltiniai

| 80. | Nepakankamai naudojamasi kitais Komisijoje ir valstybėse narėse esamais duomenų šaltiniais (pvz., nacionalinių mokslinių tyrimų ir technologinės plėtros programų ir finansavimo agentūrų duomenų bazėmis bei Komisijos leidinių biuro (50) valdomos Bendrijos mokslinių tyrimų ir plėtros informacinės tarnybos (CORDIS) paslaugomis). |
| --- | --- |

80.

Nepakankamai naudojamasi kitais Komisijoje ir valstybėse narėse esamais duomenų šaltiniais (pvz., nacionalinių mokslinių tyrimų ir technologinės plėtros programų ir finansavimo agentūrų duomenų bazėmis bei Komisijos leidinių biuro (50) valdomos Bendrijos mokslinių tyrimų ir plėtros informacinės tarnybos (CORDIS) paslaugomis).

Komisijos atlikti vertinimo tyrimai

Audito Rūmų peržiūrėtos ataskaitos

| 81. | Audito Rūmai peržiūrėjo nuo 2000 m. Komisijos (ar jos vardu) atliktus 86 vertinimo tyrimus. Šie tyrimai apėmė visus 36 tyrimus, kurie sudarė pagrindą 2004 m. paskelbtam penkerių metų laikotarpio įvertinimui, ir kitus 50 tyrimų, kurie buvo užbaigti po šios datos. Tik 23 iš šių tyrimų gali būti laikomi tikrais bendrosios programos ir jos sudėtinių programų vertinimais (žr. 5 diagramą).
  5 diagrama
  2000–2006 m. Komisijos (ar jos vardu) atliktų vertinimo tyrimų apžvalga








  Tyrimų tipas | Skaičius | Aprašymas |
| --- | --- | --- | --- |
| BP veiklos vertinimai | 23 | Vertinimo tyrimai






  — | grindžiami pripažinta metodika (51), |

81.

Audito Rūmai peržiūrėjo nuo 2000 m. Komisijos (ar jos vardu) atliktus 86 vertinimo tyrimus. Šie tyrimai apėmė visus 36 tyrimus, kurie sudarė pagrindą 2004 m. paskelbtam penkerių metų laikotarpio įvertinimui, ir kitus 50 tyrimų, kurie buvo užbaigti po šios datos. Tik 23 iš šių tyrimų gali būti laikomi tikrais bendrosios programos ir jos sudėtinių programų vertinimais (žr. 5 diagramą).

5 diagrama

2000–2006 m. Komisijos (ar jos vardu) atliktų vertinimo tyrimų apžvalga

Tyrimų tipas

Skaičius

Aprašymas

BP veiklos vertinimai

23

Vertinimo tyrimai

—

grindžiami pripažinta metodika (51),

| — | juose pateikta konkreti nuoroda į programos tikslus ir į tai, kiek buvo pasiekti programos tikslai. |
| --- | --- |

—

juose pateikta konkreti nuoroda į programos tikslus ir į tai, kiek buvo pasiekti programos tikslai.

Valstybių narių lygmeniu atlikti nacionaliniai poveikio vertinimai

12

Valstybių narių atlikti tyrimai, kuriuose daugiausia nagrinėjamas nacionalinis dalyvavimo lygis, o ne daromos išvados dėl programos tikslų.

Metodiniai tyrimai

5

Komisijos organizuoti tyrimai siekiant padėti rengti vertinimo metodikas.

Europos mokslinių tyrimų ir technologinės plėtros aplinkos tyrimai

2

Tyrimai, kuriuose pateikiamos mokslinių tyrimų vietos Europoje, o ne bendrųjų programų konteksto analizės. Visų pirma nėra pateikta aiški nuoroda, kokį poveikį bendrosios programos turi nacionalinėms mokslinių tyrimų ir naujovių sistemoms.

Neanalitiniai aprašomieji ir statistiniai dokumentai

33

Dokumentai, kuriuose paprastai labai netiesiogiai nagrinėjama bendrųjų programų veikla. Dažnai veikla yra aprašoma, o ne analizuojama.

Kiti dokumentai

11

Įvairūs dokumentai, kuriuose analizuojami klausimai, susiję su bendraisiais politikos interesais, bendrųjų programų tame kontekste nenagrinėjant.

Vertinimai, kuriuose didžiausias dėmesys skiriamas stebėsenos klausimams, bet ne išdavoms ir poveikiams

| 82. | Dvi pagrindinės pastabos, gautos Audito Rūmams atlikus šių konkrečių vertinimo tyrimų metaanalizę, yra šios:






  — | nors daugelyje šių tyrimų stengiamasi prieiti prie tam tikrų išvadų dėl programos tikslų, šios išvados formuluojamos neaiškiai, tokiu būdu skaitytojas lieka neįtikintas, kad atlikus įvertinimą buvo iš tikrųjų išspręstas šis klausimas. Taip yra dažnai dėl to, kad neapibrėžus aiškių programos tikslų šis procesas yra labai susilpninamas (žr. 28 dalį), |
| --- | --- | --- |

82.

Dvi pagrindinės pastabos, gautos Audito Rūmams atlikus šių konkrečių vertinimo tyrimų metaanalizę, yra šios:

—

nors daugelyje šių tyrimų stengiamasi prieiti prie tam tikrų išvadų dėl programos tikslų, šios išvados formuluojamos neaiškiai, tokiu būdu skaitytojas lieka neįtikintas, kad atlikus įvertinimą buvo iš tikrųjų išspręstas šis klausimas. Taip yra dažnai dėl to, kad neapibrėžus aiškių programos tikslų šis procesas yra labai susilpninamas (žr. 28 dalį),

| — | vietoj to, kad būtų vertinami bendrųjų programų ar jų specialiųjų programų (ir paprogramių) išdavos ir poveikiai, daugelis dokumentų yra aprašomojo pobūdžio ir geriausiu atveju juose dėmesys yra skiriamas tiesioginiams projektų rezultatams ir projektų valdymo klausimams. Šios ataskaitos negali suteikti svarių su išdavomis ar poveikiais susijusių įrodymų. |
| --- | --- |

—

vietoj to, kad būtų vertinami bendrųjų programų ar jų specialiųjų programų (ir paprogramių) išdavos ir poveikiai, daugelis dokumentų yra aprašomojo pobūdžio ir geriausiu atveju juose dėmesys yra skiriamas tiesioginiams projektų rezultatams ir projektų valdymo klausimams. Šios ataskaitos negali suteikti svarių su išdavomis ar poveikiais susijusių įrodymų.

Nepakankamas dėmesys skiriamas novatoriškoms metodikoms kurti

| 83. | 2000–2006 m. vykdant tyrimus buvo daugiausia naudojamasi tradicinėmis metodikomis ir būdais (visų pirma, apklausomis, dokumentų peržiūromis ir interviu) (žr. 6 diagramą). Be to, nebuvo naudojamasi kitomis sudėtingomis, tačiau labai paplitusiomis vertinimo metodikomis ir būdais (arba tai buvo daroma labai retai), visų pirma:






  — | mokslometriniais metodais (tokiais kaip nuorodų analizė) (52), |
| --- | --- | --- |

83.

2000–2006 m. vykdant tyrimus buvo daugiausia naudojamasi tradicinėmis metodikomis ir būdais (visų pirma, apklausomis, dokumentų peržiūromis ir interviu) (žr. 6 diagramą). Be to, nebuvo naudojamasi kitomis sudėtingomis, tačiau labai paplitusiomis vertinimo metodikomis ir būdais (arba tai buvo daroma labai retai), visų pirma:

—

mokslometriniais metodais (tokiais kaip nuorodų analizė) (52),

| — | kiekybiniais modeliais (kaip antai rentabilumo, išlaidų efektyvumo ir ekonomiškumo) (53), arba |
| --- | --- |

—

kiekybiniais modeliais (kaip antai rentabilumo, išlaidų efektyvumo ir ekonomiškumo) (53), arba

| — | veikiančiųjų asmenų (ar elgesio) modeliais (kuriuos taikant dėmesys skiriamas intervencijoje dalyvaujančių subjektų požiūriams, pvz., mokslinių tyrimų tinklų charakteristikoms ar juose laikui bėgant vykstantiems pokyčiams). |
| --- | --- |

—

veikiančiųjų asmenų (ar elgesio) modeliais (kuriuos taikant dėmesys skiriamas intervencijoje dalyvaujančių subjektų požiūriams, pvz., mokslinių tyrimų tinklų charakteristikoms ar juose laikui bėgant vykstantiems pokyčiams).

Image

| 84. | Tik retais atvejais buvo atliekami vertinimo tyrimai siekiant išnagrinėti kai kuriuos viešosios intervencijos mokslinių tyrimų srityje vertinimo metodinius sunkumus (žr. I priedą):






  — | neseniai buvo užbaigti du su intervencijos logika susiję tyrimai (54), |
| --- | --- | --- |

84.

Tik retais atvejais buvo atliekami vertinimo tyrimai siekiant išnagrinėti kai kuriuos viešosios intervencijos mokslinių tyrimų srityje vertinimo metodinius sunkumus (žr. I priedą):

—

neseniai buvo užbaigti du su intervencijos logika susiję tyrimai (54),

| — | buvo nustatyti tik trys tyrimai, kurių tikslas – įvertinti Bendrijos finansavimo poveikį mokslinių tyrimų organizacijų būrimuisi į visą Europą apimančius tinklus (55). Ir tai nepaisant prielaidos, kad teigiami tinklų kūrimo rezultatai yra Europos mokslinių tyrimų erdvės koncepcijos pagrindas, |
| --- | --- |

—

buvo nustatyti tik trys tyrimai, kurių tikslas – įvertinti Bendrijos finansavimo poveikį mokslinių tyrimų organizacijų būrimuisi į visą Europą apimančius tinklus (55). Ir tai nepaisant prielaidos, kad teigiami tinklų kūrimo rezultatai yra Europos mokslinių tyrimų erdvės koncepcijos pagrindas,

| — | tik vienu atveju buvo mėginta daryti išvadas dėl programos (ar paprogramės) lygmeniu pasiekto poveikio agreguojant projektams taikomas vertinimo analizes ir kitus vertinimo metodus (56), |
| --- | --- |

—

tik vienu atveju buvo mėginta daryti išvadas dėl programos (ar paprogramės) lygmeniu pasiekto poveikio agreguojant projektams taikomas vertinimo analizes ir kitus vertinimo metodus (56),

| — | nebuvo rasta kitų metodikų, kaip antai kontrafaktinio metodo (ar kontrolinės grupės) naudojimo įrodymų. Šis metodas būtų ypač naudingas iliustruojant programų pridėtinę vertę Bendrijos lygmeniu palyginti su jokio intervencinio metodo nenaudojimu (arba jo naudojimu nacionaliniu arba regioniniu lygmeniu). |
| --- | --- |

—

nebuvo rasta kitų metodikų, kaip antai kontrafaktinio metodo (ar kontrolinės grupės) naudojimo įrodymų. Šis metodas būtų ypač naudingas iliustruojant programų pridėtinę vertę Bendrijos lygmeniu palyginti su jokio intervencinio metodo nenaudojimu (arba jo naudojimu nacionaliniu arba regioniniu lygmeniu).

| 85. | Audito Rūmų apklaustos suinteresuotosios šalys manė, kad Komisijos vertinimų naudingumas ir aktualumas galėtų būti pagerintas. Tai išryškina poreikį toliau plėtoti metodiką, kad vertinimo sistema būtų pritaikyta prie kintančio bendrųjų programų pobūdžio (žr. 7 dalį) (57). |
| --- | --- |

85.

Audito Rūmų apklaustos suinteresuotosios šalys manė, kad Komisijos vertinimų naudingumas ir aktualumas galėtų būti pagerintas. Tai išryškina poreikį toliau plėtoti metodiką, kad vertinimo sistema būtų pritaikyta prie kintančio bendrųjų programų pobūdžio (žr. 7 dalį) (57).

Opūs penkerių metų laikotarpio vertinimų metu iškelti klausimai negalėjo būti nagrinėjami remiantis Komisijos konkrečiais vertinimo tyrimais

| 86. | Tai taip pat patvirtina didelės problemos, su kuriomis susidūrė 2004 m. penkerių metų laikotarpio vertinimo komisija (58), atsakydama į techninėje užduotyje pateiktus vertinimo klausimus. Daug šių opių klausimų apskritai negalėjo būti išnagrinėta todėl, kad prieš tai Komisijos (ar jos vardu) nebuvo atlikti tinkami vertinimo tyrimai ir dėl to, kad komisijos nariai negalėjo laiku pavesti atlikti šių tyrimų (žr. 7 diagramą).
  7 diagrama
  2004 m. atlikto penkerių metų laikotarpio vertinimo klausimų nagrinėjimas | Vertinimo klausimas | Nagrinėta ataskaitoje? |
| --- | --- | --- | --- |
| ĮGYVENDINIMAS | Ar veikla buvo vykdoma veiksmingai? | iš dalies |
| Ar veikla buvo ekonomiškai efektyvi? | iš dalies |
| Ar veikla buvo vykdoma pačiu tinkamiausiu būdu nustatytiems tikslams pasiekti? | ne |
| Ar bendra teisinė sistema (įskaitant dalyvavimo taisykles ir sutartis), politikos instrumentai ir įgyvendinimo tvarka buvo aiškūs, tinkami ir veiksmingi? | ne |
| Ar finansavimo lygis ir kiti esami ištekliai buvo adekvatūs? | ne |
| Ar tikslinės pramonės ir tyrėjų bendruomenės, įskaitant MVĮ, galėjo tinkamai atsakyti? | taip |
| PASIEKIMAI | Ar vykdant veiklą buvo pasiekti jos atitinkami tikslai ir kiek buvo gauta nelauktų rezultatų? | ne |
| Kokie yra pagrindiniai rezultatai mokslo, technologijų, socialinių ir ekonominių bei aplinkosaugos išdirbių prasme, tarptautinio bendradarbiavimo, žinių perdavimo ir naujovių, ikinormatyvinės veiklos, prieinamumo, mokslinių tyrimų sklaidos ir panaudojimo, žmogiškųjų išteklių vystymo, mobilumo ir mokymų, taip pat mokslinių tyrimų veiklos koordinavimo rėmimo ir didinimo srityse? | ne |
| Ar rezultatai ir jų padariniai bei poveikiai buvo iš esmės patenkinami su veikla tiesiogiai ar netiesiogiai susijusiems naudos gavėjams ir suinteresuotosioms šalims? | ne |
| Ar buvo patenkinamai atsižvelgta į atitinkamas pramonės ir tyrėjų bendruomenes, įskaitant MVĮ? | talp |
| Kaip ir kiek veikla prisidėjo prie pagerinto ES mokslinių tyrimų konkurencingumo tarptautiniu lygmeniu? Ar ES moksliniai tyrimai buvo pirmaujantys konkrečiose srityse? | iš dalies |
| Kaip ir kiek veikla prisidėjo prie ES politikos krypčių apskritai ir prie ES tvaraus vystymo strategijos? | ne |
| Ar yra struktūrinių pokyčių, susijusių su Bendrijos mokslinių tyrimų veikla, įrodymų, įskaitant visų pirma mokslinių tyrimų tinklų kūrimą, integravimą ir koordinavimą nacionaliniu ar tarptautiniu lygmeniu? | ne |
| Ar programos buvo vykdomos racionaliai naudojant lėšas? Ar veikla turėjo ilgalaikį poveikį? | ne |
| RAIDA IR ATEITIES PERSPEKTYVOS | Kaip bendrosios programos vystėsi loginio pagrindo, tikslų, teminių prioritetų, balanso tarp „iš apačios į viršų“ ir „iš viršaus į apačią“ prioritetų bei tarp fundamentaliųjų ir taikomųjų mokslinių tyrimų, instrumentų, Europos pridėtinės vertės ir kitų poveikių prasme, visų pirma atsižvelgiant į Europos mokslinių tyrimų erdvės koncepcijos sukūrimą, Lisabonos tikslus ir pagrindines tarptautines ekonomines ir mokslinių tyrimų gaires? | taip |
| Kaip vykdant bendrąją programą buvo sukurta Europos pridėtinė vertė? | taip |
| Ar gali Europos pridėtinė vertė būti sukurta naudojant kitus tarptautinius ar nacionalinius mechanizmus? | ne |
| Ar programų politikos tikslai, prioritetai, instrumentai ir raidos ciklas yra tinkami ateičiai? | taip |

86.

Tai taip pat patvirtina didelės problemos, su kuriomis susidūrė 2004 m. penkerių metų laikotarpio vertinimo komisija (58), atsakydama į techninėje užduotyje pateiktus vertinimo klausimus. Daug šių opių klausimų apskritai negalėjo būti išnagrinėta todėl, kad prieš tai Komisijos (ar jos vardu) nebuvo atlikti tinkami vertinimo tyrimai ir dėl to, kad komisijos nariai negalėjo laiku pavesti atlikti šių tyrimų (žr. 7 diagramą).

7 diagrama

2004 m. atlikto penkerių metų laikotarpio vertinimo klausimų nagrinėjimas

Vertinimo klausimas

Nagrinėta ataskaitoje?

ĮGYVENDINIMAS

Ar veikla buvo vykdoma veiksmingai?

iš dalies

Ar veikla buvo ekonomiškai efektyvi?

iš dalies

Ar veikla buvo vykdoma pačiu tinkamiausiu būdu nustatytiems tikslams pasiekti?

ne

Ar bendra teisinė sistema (įskaitant dalyvavimo taisykles ir sutartis), politikos instrumentai ir įgyvendinimo tvarka buvo aiškūs, tinkami ir veiksmingi?

ne

Ar finansavimo lygis ir kiti esami ištekliai buvo adekvatūs?

ne

Ar tikslinės pramonės ir tyrėjų bendruomenės, įskaitant MVĮ, galėjo tinkamai atsakyti?

taip

PASIEKIMAI

Ar vykdant veiklą buvo pasiekti jos atitinkami tikslai ir kiek buvo gauta nelauktų rezultatų?

ne

Kokie yra pagrindiniai rezultatai mokslo, technologijų, socialinių ir ekonominių bei aplinkosaugos išdirbių prasme, tarptautinio bendradarbiavimo, žinių perdavimo ir naujovių, ikinormatyvinės veiklos, prieinamumo, mokslinių tyrimų sklaidos ir panaudojimo, žmogiškųjų išteklių vystymo, mobilumo ir mokymų, taip pat mokslinių tyrimų veiklos koordinavimo rėmimo ir didinimo srityse?

ne

Ar rezultatai ir jų padariniai bei poveikiai buvo iš esmės patenkinami su veikla tiesiogiai ar netiesiogiai susijusiems naudos gavėjams ir suinteresuotosioms šalims?

ne

Ar buvo patenkinamai atsižvelgta į atitinkamas pramonės ir tyrėjų bendruomenes, įskaitant MVĮ?

talp

Kaip ir kiek veikla prisidėjo prie pagerinto ES mokslinių tyrimų konkurencingumo tarptautiniu lygmeniu? Ar ES moksliniai tyrimai buvo pirmaujantys konkrečiose srityse?

iš dalies

Kaip ir kiek veikla prisidėjo prie ES politikos krypčių apskritai ir prie ES tvaraus vystymo strategijos?

ne

Ar yra struktūrinių pokyčių, susijusių su Bendrijos mokslinių tyrimų veikla, įrodymų, įskaitant visų pirma mokslinių tyrimų tinklų kūrimą, integravimą ir koordinavimą nacionaliniu ar tarptautiniu lygmeniu?

ne

Ar programos buvo vykdomos racionaliai naudojant lėšas? Ar veikla turėjo ilgalaikį poveikį?

ne

RAIDA IR ATEITIES PERSPEKTYVOS

Kaip bendrosios programos vystėsi loginio pagrindo, tikslų, teminių prioritetų, balanso tarp „iš apačios į viršų“ ir „iš viršaus į apačią“ prioritetų bei tarp fundamentaliųjų ir taikomųjų mokslinių tyrimų, instrumentų, Europos pridėtinės vertės ir kitų poveikių prasme, visų pirma atsižvelgiant į Europos mokslinių tyrimų erdvės koncepcijos sukūrimą, Lisabonos tikslus ir pagrindines tarptautines ekonomines ir mokslinių tyrimų gaires?

taip

Kaip vykdant bendrąją programą buvo sukurta Europos pridėtinė vertė?

taip

Ar gali Europos pridėtinė vertė būti sukurta naudojant kitus tarptautinius ar nacionalinius mechanizmus?

ne

Ar programų politikos tikslai, prioritetai, instrumentai ir raidos ciklas yra tinkami ateičiai?

taip

| 87. | Be to, pažymėtina, kad tik tais atvejais, kai buvo apibrėžti aiškūs ir kiekybiškai išmatuojami programų tikslai (pvz., mažų ir vidutinių įmonių dalyvavimo procentas), vertinimo komisijos nariai galėjo atsakyti į techninėje užduotyje nurodytus klausimus. |
| --- | --- |

87.

Be to, pažymėtina, kad tik tais atvejais, kai buvo apibrėžti aiškūs ir kiekybiškai išmatuojami programų tikslai (pvz., mažų ir vidutinių įmonių dalyvavimo procentas), vertinimo komisijos nariai galėjo atsakyti į techninėje užduotyje nurodytus klausimus.

Nacionaliniu lygmeniu atliekami bendrųjų programų vertinimai

| 88. | Kai kurios valstybės narės ir asocijuotos šalys atlieka savo nacionalinius bendrųjų programų vertinimus, kuriuose nagrinėjami jų požiūriu svarbūs ir įdomūs klausimai (59). Per pastaruosius aštuonerius metus buvo atlikta keturiolika tokių tyrimų devyniose valstybėse narėse ir vienoje asocijuotoje šalyje. |
| --- | --- |

88.

Kai kurios valstybės narės ir asocijuotos šalys atlieka savo nacionalinius bendrųjų programų vertinimus, kuriuose nagrinėjami jų požiūriu svarbūs ir įdomūs klausimai (59). Per pastaruosius aštuonerius metus buvo atlikta keturiolika tokių tyrimų devyniose valstybėse narėse ir vienoje asocijuotoje šalyje.

| 89. | Nors Komisija skatino kur įmanoma taikyti standartizuotus metodus, šie nacionalinio poveikio tyrimai yra labai nevienodi (60). Tokiu būdu, kadangi jie nėra atliekami vadovaujantis suderinta metodika, galimybės susumuoti, sujungti ar palyginti rezultatus yra menkos. Be to, atsižvelgiant į jų nacionalinį pobūdį, šie tyrimai gali tik iš dalies atspindėti Europos bendradarbiavimo aspektą. |
| --- | --- |

89.

Nors Komisija skatino kur įmanoma taikyti standartizuotus metodus, šie nacionalinio poveikio tyrimai yra labai nevienodi (60). Tokiu būdu, kadangi jie nėra atliekami vadovaujantis suderinta metodika, galimybės susumuoti, sujungti ar palyginti rezultatus yra menkos. Be to, atsižvelgiant į jų nacionalinį pobūdį, šie tyrimai gali tik iš dalies atspindėti Europos bendradarbiavimo aspektą.

| 90. | 2007 m. Europos mokslinių tyrimų erdvės žaliojoje knygoje Komisija tvirtino, kad svarbu Europos mokslinių tyrimų erdvės lygmeniu turėti tikslias su moksliniais tyrimais ir politika, kurią vykdo tiek valstybės narės, tiek ES, susijusios veiklos poveikio ir veiksmingumo analizes. Joje taip pat buvo pripažinta, kad dabartiniai susitarimai nėra tinkami šiam uždaviniui spręsti, nes kiekviename intervencijos lygmenyje vertinimai yra atliekami atskirai vienas nuo kito (61). |
| --- | --- |

90.

2007 m. Europos mokslinių tyrimų erdvės žaliojoje knygoje Komisija tvirtino, kad svarbu Europos mokslinių tyrimų erdvės lygmeniu turėti tikslias su moksliniais tyrimais ir politika, kurią vykdo tiek valstybės narės, tiek ES, susijusios veiklos poveikio ir veiksmingumo analizes. Joje taip pat buvo pripažinta, kad dabartiniai susitarimai nėra tinkami šiam uždaviniui spręsti, nes kiekviename intervencijos lygmenyje vertinimai yra atliekami atskirai vienas nuo kito (61).

Rekomendacijos

91.

| 91. | Komisija turėtų parengti bendrosiomis programomis finansuojamos veiklos vertinimo vadovą, kuriame būtų pateiktos pagrindinių sąvokų apibrėžtys ir terminologija bei nustatytos tam tikrai vertinimo veiklai skirtos tinkamos metodikos. Šis vadovas turėtų būti pagrįstas esamais vadovais ir priemonių komplektais bei turėtų būti reguliariai atnaujinamas. |
| --- | --- |

Komisija turėtų parengti bendrosiomis programomis finansuojamos veiklos vertinimo vadovą, kuriame būtų pateiktos pagrindinių sąvokų apibrėžtys ir terminologija bei nustatytos tam tikrai vertinimo veiklai skirtos tinkamos metodikos. Šis vadovas turėtų būti pagrįstas esamais vadovais ir priemonių komplektais bei turėtų būti reguliariai atnaujinamas.

| 92. | Komisija turėtų nustatyti savo informacijos reikmes, atsižvelgdama į poreikį apriboti dalyviams tenkančią administracinę naštą. |
| --- | --- |

92.

Komisija turėtų nustatyti savo informacijos reikmes, atsižvelgdama į poreikį apriboti dalyviams tenkančią administracinę naštą.

| 93. | Komisija turėtų laiku teikti stebėsenos informaciją apie bendrųjų programų įgyvendinimą. Kaip to reikalaujama pagal BP7 dalyvavimo taisykles, su Komisijos IT sistemomis, skirtomis informacijai apie programos valdymą ir dalyvius tvarkyti, susijusios problemos turėtų būti skubiai sprendžiamos. |
| --- | --- |

93.

Komisija turėtų laiku teikti stebėsenos informaciją apie bendrųjų programų įgyvendinimą. Kaip to reikalaujama pagal BP7 dalyvavimo taisykles, su Komisijos IT sistemomis, skirtomis informacijai apie programos valdymą ir dalyvius tvarkyti, susijusios problemos turėtų būti skubiai sprendžiamos.

| 94. | Dalyvių ataskaitų teikimo Komisijai prievolės turėtų būti žymiai sumažintos, o tyrimai atliekami tik imties pagrindu. Sutartinį įsipareigojimą teikti rodikliais grindžiamus su kiekvienu projektu susijusius poveikio duomenis turėtų pakeisti trumpas savęs įvertinimas projektui pasibaigus. |
| --- | --- |

94.

Dalyvių ataskaitų teikimo Komisijai prievolės turėtų būti žymiai sumažintos, o tyrimai atliekami tik imties pagrindu. Sutartinį įsipareigojimą teikti rodikliais grindžiamus su kiekvienu projektu susijusius poveikio duomenis turėtų pakeisti trumpas savęs įvertinimas projektui pasibaigus.

| 95. | Komisija, atlikdama vertinimus, turėtų plačiau naudotis esamais papildomais svarbių duomenų šaltiniais (tiek pačioje Komisijoje, tiek valstybėse narėse). |
| --- | --- |

95.

Komisija, atlikdama vertinimus, turėtų plačiau naudotis esamais papildomais svarbių duomenų šaltiniais (tiek pačioje Komisijoje, tiek valstybėse narėse).

| 96. | Komisija turėtų naudotis visais esamais vertinimo metodais. Be to, ji turėtų remti novatoriškų metodų, kurie padėtų įveikti viešosios intervencijos mokslinių tyrimų srityje vertinimo metodinius sunkumus, kūrimą (žr. I priedą) bei naudotis šiais metodais pati atlikdama vertinimus. |
| --- | --- |

96.

Komisija turėtų naudotis visais esamais vertinimo metodais. Be to, ji turėtų remti novatoriškų metodų, kurie padėtų įveikti viešosios intervencijos mokslinių tyrimų srityje vertinimo metodinius sunkumus, kūrimą (žr. I priedą) bei naudotis šiais metodais pati atlikdama vertinimus.

| 97. | Komisija turėtų konsultuotis su valstybėmis narėmis, kaip maksimaliai padidinti nacionaliniu lygmeniu atliekamų bendrųjų programų vertinimų naudą. |
| --- | --- |

97.

Komisija turėtų konsultuotis su valstybėmis narėmis, kaip maksimaliai padidinti nacionaliniu lygmeniu atliekamų bendrųjų programų vertinimų naudą.

Vertinimo metu nustatytų faktų sklaida ir panaudojimas

| 98. | Vertinimas turėtų teikti svarbią informaciją ir galimybę atlikti analizę, kuri būtų veiksmingai panaudojama valdant programas ir formuojant politiką. Visų pirma vertinimas turi sudaryti pagrindą kompetentingiems svarstymams apie viešosios intervencijos privalumus ir trūkumus, o tai mokymuisi yra būtina. Audito Rūmai patikrino, ar vertinimai buvo atliekami laiku, nustatyti faktai buvo perduodami suinteresuotosioms šalims ir skleidžiami už Komisijos ribų, ir ar Komisija atsižvelgė į rekomendacijas tikslindama tebevykdomas programas (mokymosi programas). |
| --- | --- |

98.

Vertinimas turėtų teikti svarbią informaciją ir galimybę atlikti analizę, kuri būtų veiksmingai panaudojama valdant programas ir formuojant politiką. Visų pirma vertinimas turi sudaryti pagrindą kompetentingiems svarstymams apie viešosios intervencijos privalumus ir trūkumus, o tai mokymuisi yra būtina. Audito Rūmai patikrino, ar vertinimai buvo atliekami laiku, nustatyti faktai buvo perduodami suinteresuotosioms šalims ir skleidžiami už Komisijos ribų, ir ar Komisija atsižvelgė į rekomendacijas tikslindama tebevykdomas programas (mokymosi programas).

Pasirenkant vertinimui skirtą laiką nebuvo atsižvelgta į informacijos, kurios iš tikrųjų galima buvo tikėtis, pobūdį

| 99. | Audito Rūmai pripažįsta, kad kai kurios analizės rūšys grindžiamos ilgalaike perspektyva (pvz., išdavų ir socialinių bei ekonominių poveikių vertinimas) ir kad kai kurie aspektai yra susiję su konkrečiu programavimo laikotarpiu (pvz., programos tikslai net ir konkrečioje mokslo srityje), o kai kurie – ne (žr. 8 diagramą). Tačiau Komisija nenustatė savo vertinimo veiklai skirto metodo, kurį taikant būtų atsižvelgiama į šią laiko perspektyvą. |
| --- | --- |

99.

Audito Rūmai pripažįsta, kad kai kurios analizės rūšys grindžiamos ilgalaike perspektyva (pvz., išdavų ir socialinių bei ekonominių poveikių vertinimas) ir kad kai kurie aspektai yra susiję su konkrečiu programavimo laikotarpiu (pvz., programos tikslai net ir konkrečioje mokslo srityje), o kai kurie – ne (žr. 8 diagramą). Tačiau Komisija nenustatė savo vertinimo veiklai skirto metodo, kurį taikant būtų atsižvelgiama į šią laiko perspektyvą.

| 100. | Pagal teisės aktus buvo reikalaujama, kad Komisijai vykdant pagrindinę vertinimo veiklą būtų susitelkta tik ties penkerių metų laikotarpiu prieš atliekant penkerių metų laikotarpio įvertinimą, tokiu būdu apimant dviejų vienas po kito einančių programavimo laikotarpių dalis. Todėl vidutinio laikotarpio ir ilgalaikės išdavos ir poveikiai buvo beveik nenagrinėjami, o atliekant penkerių metų laikotarpio vertinimus paprastai didžiausias dėmesys būdavo skiriamas stebėsenos aspektams, trumpalaikiams programos kūrimo klausimams ir bendroms pastaboms apie bendrųjų programų pobūdį. Audito Rūmai pritaria tam faktui, kad BP7 teisės aktai nebereikalauja atlikti penkerių metų laikotarpio ar bet kokio kito iš anksto nustatyto laikotarpio vertinimus.
  8 diagrama
  Stebėsenos ir vertinimo klausimai pagal skirtingas laiko perspektyvas







  Programos vykdymo stebėsena

  (tebevykdoma) | — | Programos valdymo klausimai (pvz., sutarties sudarymo, mokėjimų atlikimo laikas, įmokos ir sėkmės procentas, biudžeto vykdymas, finansavimo dydis ir t. t.) |
| --- | --- | --- | --- |

100.

Pagal teisės aktus buvo reikalaujama, kad Komisijai vykdant pagrindinę vertinimo veiklą būtų susitelkta tik ties penkerių metų laikotarpiu prieš atliekant penkerių metų laikotarpio įvertinimą, tokiu būdu apimant dviejų vienas po kito einančių programavimo laikotarpių dalis. Todėl vidutinio laikotarpio ir ilgalaikės išdavos ir poveikiai buvo beveik nenagrinėjami, o atliekant penkerių metų laikotarpio vertinimus paprastai didžiausias dėmesys būdavo skiriamas stebėsenos aspektams, trumpalaikiams programos kūrimo klausimams ir bendroms pastaboms apie bendrųjų programų pobūdį. Audito Rūmai pritaria tam faktui, kad BP7 teisės aktai nebereikalauja atlikti penkerių metų laikotarpio ar bet kokio kito iš anksto nustatyto laikotarpio vertinimus.

8 diagrama

Stebėsenos ir vertinimo klausimai pagal skirtingas laiko perspektyvas

Programos vykdymo stebėsena

(tebevykdoma)

—

Programos valdymo klausimai (pvz., sutarties sudarymo, mokėjimų atlikimo laikas, įmokos ir sėkmės procentas, biudžeto vykdymas, finansavimo dydis ir t. t.)

Trumpalaikis

vertinimas

(tarkim, anksčiausiai praėjus 1–2 metams)

| — | Programos valdymo klausimai (pvz., administracinių procedūrų veiksmingumas) |
| --- | --- |

—

Programos valdymo klausimai (pvz., administracinių procedūrų veiksmingumas)

| — | Programos kūrimo klausimai (pvz., galimybė pasinaudoti instrumentais ir lankstumas, dalyvavimo kliūtys, kvietime teikti paraiškas patirtos nesėkmės padariniai ir pan.) |
| --- | --- |

—

Programos kūrimo klausimai (pvz., galimybė pasinaudoti instrumentais ir lankstumas, dalyvavimo kliūtys, kvietime teikti paraiškas patirtos nesėkmės padariniai ir pan.)

| — | Dalyvavimo profilio analizė (šiame etape – daugiausia kiekybinė) |
| --- | --- |

—

Dalyvavimo profilio analizė (šiame etape – daugiausia kiekybinė)

Vidutinio

laikotarpio vertinimas

(tarkim, po 7 metų)

| — | Programos kūrimo klausimai (pvz., instrumentų veiksmingumas) |
| --- | --- |

—

Programos kūrimo klausimai (pvz., instrumentų veiksmingumas)

| — | Dalyvavimo analizė (apimanti kokybinius ir kiekybinius aspektus, pvz., mokslinių tyrimų tinklų analizė, poveikiai tyrėjų elgsenai ir pan.) |
| --- | --- |

—

Dalyvavimo analizė (apimanti kokybinius ir kiekybinius aspektus, pvz., mokslinių tyrimų tinklų analizė, poveikiai tyrėjų elgsenai ir pan.)

| — | Projekto išdirbių analizė
   (62) (pvz., leidiniai, konferencijų dokumentai, patentai, licencijos, prototipai, standartai, apmokyti mokslininkai ir pan.) |
| --- | --- |

—

Projekto išdirbių analizė
   (62) (pvz., leidiniai, konferencijų dokumentai, patentai, licencijos, prototipai, standartai, apmokyti mokslininkai ir pan.)

Ilgalaikis

vertinimas

(tarkim, praėjus daugiau kaip 10 metų)

| — | Išdavų ir poveikių įvertinimas |
| --- | --- |

—

Išdavų ir poveikių įvertinimas

Šaltinis: Europos Audito Rūmai.

| 101. | Trūkumus, su kuriais buvo susidurta penkerių metų laikotarpio vertinimų metu nustatant bendrųjų programų išdavas ir poveikius, taip pat pažymėjo Komisijos ekspertai:






  — | 2004 m. penkerių metų laikotarpio vertinimo komisija pažymėjo, kad „... vertinimas turėtų apimti ir jo metu pakankamas dėmesys turi būti skiriamas tiek ilgalaikiams, tiek trumpalaikiams klausimams“ ir „... galėtų būti skiriami ištekliai [...] siekiant atlikti ambicingesnius ilgalaikius vertinimo tyrimus, sistemingiau nagrinėjančius struktūrinius ir platesnius ekonominius bei socialinius klausimus“ (63)., |
| --- | --- | --- |

101.

Trūkumus, su kuriais buvo susidurta penkerių metų laikotarpio vertinimų metu nustatant bendrųjų programų išdavas ir poveikius, taip pat pažymėjo Komisijos ekspertai:

—

2004 m. penkerių metų laikotarpio vertinimo komisija pažymėjo, kad „... vertinimas turėtų apimti ir jo metu pakankamas dėmesys turi būti skiriamas tiek ilgalaikiams, tiek trumpalaikiams klausimams“ ir „... galėtų būti skiriami ištekliai [...] siekiant atlikti ambicingesnius ilgalaikius vertinimo tyrimus, sistemingiau nagrinėjančius struktūrinius ir platesnius ekonominius bei socialinius klausimus“ (63).,

| — | tyrimo, kurį užsakė atlikti Mokslinių tyrimų generalinis direktoratas, metu buvo nustatyta, kad „...dabartinei ES mokslinių tyrimų ir technologinės plėtros vertinimo (įskaitant nuolatinę stebėseną, penkerių metų laikotarpio ir vidurio laikotarpio vertinimus) praktikai būdingas didelis stebėsenai skiriamas dėmesys palyginti su poveikio vertinimu“ ir „... tam, kad paklausa ir lūkesčiai [...] būtų nukreipti socialinio ir ekonominio poveikio linkme, prireiks naujos vertinimo ir stebėsenos sistemos, kuri reikalautų dėti daugiau pastangų poveikio nustatymui, o ne išdirbių stebėsenai“ (64). |
| --- | --- |

—

tyrimo, kurį užsakė atlikti Mokslinių tyrimų generalinis direktoratas, metu buvo nustatyta, kad „...dabartinei ES mokslinių tyrimų ir technologinės plėtros vertinimo (įskaitant nuolatinę stebėseną, penkerių metų laikotarpio ir vidurio laikotarpio vertinimus) praktikai būdingas didelis stebėsenai skiriamas dėmesys palyginti su poveikio vertinimu“ ir „... tam, kad paklausa ir lūkesčiai [...] būtų nukreipti socialinio ir ekonominio poveikio linkme, prireiks naujos vertinimo ir stebėsenos sistemos, kuri reikalautų dėti daugiau pastangų poveikio nustatymui, o ne išdirbių stebėsenai“ (64).

| 102. | Savalaikiškumo klausimas taip pat turi įtakos pagal teisės aktus turimiems atlikti konkretiems vertinimams. Pavyzdžiui, 2004 m. Marimón ataskaita, kurioje analizuojami BP6 laikotarpiu (2003–2006 m.) sukurti nauji instrumentai, buvo užsakyta per anksti, todėl buvo sukaupta mažai praktinės patirties ir empirinių įrodymų (arba jų visai negauta), kuriais būtų galima grįsti jos išvadas (65). |
| --- | --- |

102.

Savalaikiškumo klausimas taip pat turi įtakos pagal teisės aktus turimiems atlikti konkretiems vertinimams. Pavyzdžiui, 2004 m. Marimón ataskaita, kurioje analizuojami BP6 laikotarpiu (2003–2006 m.) sukurti nauji instrumentai, buvo užsakyta per anksti, todėl buvo sukaupta mažai praktinės patirties ir empirinių įrodymų (arba jų visai negauta), kuriais būtų galima grįsti jos išvadas (65).

Komunikacija ir sklaida

| 103. | Pati Komisija, gavusi atitinkamo programos komiteto pritarimą, gali rengti ir pritaikyti operatyvinės veiklos programas pagal trumpalaikius ciklus. Taip būtų sudaryta galimybė atlikti programos valdymo patikslinimus ir perskirstyti paprogramių biudžetus. Nebuvo rasta įrodymų, kad Komisija naudojasi šia galimybe (žr. 107 dalį). |
| --- | --- |

103.

Pati Komisija, gavusi atitinkamo programos komiteto pritarimą, gali rengti ir pritaikyti operatyvinės veiklos programas pagal trumpalaikius ciklus. Taip būtų sudaryta galimybė atlikti programos valdymo patikslinimus ir perskirstyti paprogramių biudžetus. Nebuvo rasta įrodymų, kad Komisija naudojasi šia galimybe (žr. 107 dalį).

| 104. | Nepaisant to ir atsižvelgiant į bendrųjų programų kūrimo ir patvirtinimo būdą, Komisija praktiškai negali atlikti ženklių pakeitimų, tokių kaip programos tikslų pakeitimai ar paprogramių biudžetų perskirstymai. Tik teisės aktų leidėjas gali priimti tokius daug aprėpiančius pakeitimus bendrųjų programų teisės aktų peržiūros metu (BP7 atveju – 2010 m.) ar tvirtinant paskesnę bendrąją programą. Dėl šios priežasties teisės aktuose būdavo paprastai nustatoma, kad pagrindinių vertinimų atlikimo laikas turi būti gerai apskaičiuotas, kad jų rezultatai būtų kaip galima naudingesni formuojant politiką. |
| --- | --- |

104.

Nepaisant to ir atsižvelgiant į bendrųjų programų kūrimo ir patvirtinimo būdą, Komisija praktiškai negali atlikti ženklių pakeitimų, tokių kaip programos tikslų pakeitimai ar paprogramių biudžetų perskirstymai. Tik teisės aktų leidėjas gali priimti tokius daug aprėpiančius pakeitimus bendrųjų programų teisės aktų peržiūros metu (BP7 atveju – 2010 m.) ar tvirtinant paskesnę bendrąją programą. Dėl šios priežasties teisės aktuose būdavo paprastai nustatoma, kad pagrindinių vertinimų atlikimo laikas turi būti gerai apskaičiuotas, kad jų rezultatai būtų kaip galima naudingesni formuojant politiką.

| 105. | Todėl kai kurie pagrindiniai Komisijos vykdomų vertinimų naudotojai yra patys mokslinių tyrimų generaliniai direktoratai (66). Tačiau bendrąsias programas reglamentuojančiuose teisės aktuose taip pat aiškiai nurodyta, kad apie vertinimų rezultatus turi būti pranešta Europos Parlamentui ir Tarybai. |
| --- | --- |

105.

Todėl kai kurie pagrindiniai Komisijos vykdomų vertinimų naudotojai yra patys mokslinių tyrimų generaliniai direktoratai (66). Tačiau bendrąsias programas reglamentuojančiuose teisės aktuose taip pat aiškiai nurodyta, kad apie vertinimų rezultatus turi būti pranešta Europos Parlamentui ir Tarybai.

| 106. | Tačiau Audito Rūmų atlikto tyrimo, apimančio Europos Parlamento ITRE komitetą ir Tarybos CREST komitetą, metu dauguma respondentų nurodė, kad jie nebuvo pakankamai informuojami apie bendrųjų programų įgyvendinimą ir jų rezultatus (žr. 9 diagramą) (67). |
| --- | --- |

106.

Tačiau Audito Rūmų atlikto tyrimo, apimančio Europos Parlamento ITRE komitetą ir Tarybos CREST komitetą, metu dauguma respondentų nurodė, kad jie nebuvo pakankamai informuojami apie bendrųjų programų įgyvendinimą ir jų rezultatus (žr. 9 diagramą) (67).

Image

Tolesnės priemonės dėl vertinimo metu nustatytų faktų

| 107. | Savo metinėse vertinimo peržiūrose Komisija pateikia nustatytų faktų ir veiksmų, kurių buvo imtasi atlikus vertinimus, santrauką (68). Kai dėl tolesnių veiksmų, Komisija taip pat pateikė formalius atsakymus dėl penkerių metų laikotarpio vertinimų metu nustatytų faktų ir rekomendacijų bei pagal teisės aktus būtinų atlikti konkrečių vertinimų, taip pat, kiek tai įmanoma, ėmėsi tinkamų priemonių su šiais vertinimais susijusiems nustatytiems trūkumams šalinti. Tačiau taip nebuvo padaryta daugelio kitų peržiūrėtų vertinimo ataskaitų atveju ir nebuvo gauta įrodymų, kad atliekant darbo programų pakeitimus buvo atsižvelgta į jose pateiktus nustatytus faktus ir rekomendacijas. Taip pat generalinių direktoratų pagal veiklos sritis sudaromo biudžeto ataskaitose ir jų metinės veiklos ataskaitose nenurodyta, kokių priemonių buvo imtasi siekiant atsižvelgti į vertinimo metu nustatytus faktus. |
| --- | --- |

107.

Savo metinėse vertinimo peržiūrose Komisija pateikia nustatytų faktų ir veiksmų, kurių buvo imtasi atlikus vertinimus, santrauką (68). Kai dėl tolesnių veiksmų, Komisija taip pat pateikė formalius atsakymus dėl penkerių metų laikotarpio vertinimų metu nustatytų faktų ir rekomendacijų bei pagal teisės aktus būtinų atlikti konkrečių vertinimų, taip pat, kiek tai įmanoma, ėmėsi tinkamų priemonių su šiais vertinimais susijusiems nustatytiems trūkumams šalinti. Tačiau taip nebuvo padaryta daugelio kitų peržiūrėtų vertinimo ataskaitų atveju ir nebuvo gauta įrodymų, kad atliekant darbo programų pakeitimus buvo atsižvelgta į jose pateiktus nustatytus faktus ir rekomendacijas. Taip pat generalinių direktoratų pagal veiklos sritis sudaromo biudžeto ataskaitose ir jų metinės veiklos ataskaitose nenurodyta, kokių priemonių buvo imtasi siekiant atsižvelgti į vertinimo metu nustatytus faktus.

Rekomendacijos

108.

| 108. | Komisija turėtų nustatyti vertinimo, kurį pagrįstai galima tikėtis atlikti laikantis teisės aktuose nurodytų terminų (2008 m., 2010 m. ir 2015 m.), rūšį ir apimtį, paaiškinti, kaip vertinimai gali būti panaudoti pritaikant programas (mokymosi programas) ir nurodyti, kaip vertinimais galima būtų prisidėti formuojant politiką. Visų pirma Komisija turėtų paaiškinti, kokio ankstesnių ir dabartinių bendrųjų programų ilgalaikių rezultatų vertinimo metodo ji ketina laikytis, turinti omeny tai, kad gali praeiti 7–10 metų, kol tokie rezultatai pasimatys (žr. 8 diagramą). |
| --- | --- |

Komisija turėtų nustatyti vertinimo, kurį pagrįstai galima tikėtis atlikti laikantis teisės aktuose nurodytų terminų (2008 m., 2010 m. ir 2015 m.), rūšį ir apimtį, paaiškinti, kaip vertinimai gali būti panaudoti pritaikant programas (mokymosi programas) ir nurodyti, kaip vertinimais galima būtų prisidėti formuojant politiką. Visų pirma Komisija turėtų paaiškinti, kokio ankstesnių ir dabartinių bendrųjų programų ilgalaikių rezultatų vertinimo metodo ji ketina laikytis, turinti omeny tai, kad gali praeiti 7–10 metų, kol tokie rezultatai pasimatys (žr. 8 diagramą).

| 109. | Komisija turėtų peržiūrėti savo atliekamų vertinimų metu nustatytų faktų perdavimo ir sklaidos praktiką, siekdama užtikrinti, kad suinteresuotosios šalys gautų reikalingą informaciją. Visų pirma mokslinių tyrimų generaliniai direktoratai turėtų pateikti formalų atsakymą dėl visų vertinimų ir laiku paskelbti šiuos tyrimus kartu su savo atsakymais. Mokslinių tyrimų generaliniai direktoratai taip pat savo pagal veiklos sritis sudaromo biudžeto ataskaitose ir metinės veiklos ataskaitose turėtų nurodyti, kokių jie ėmėsi tolesnių priemonių, bei pasinaudoti rekomendacijomis atnaujinant darbo programas ir kuriant naujas. |
| --- | --- |

109.

Komisija turėtų peržiūrėti savo atliekamų vertinimų metu nustatytų faktų perdavimo ir sklaidos praktiką, siekdama užtikrinti, kad suinteresuotosios šalys gautų reikalingą informaciją. Visų pirma mokslinių tyrimų generaliniai direktoratai turėtų pateikti formalų atsakymą dėl visų vertinimų ir laiku paskelbti šiuos tyrimus kartu su savo atsakymais. Mokslinių tyrimų generaliniai direktoratai taip pat savo pagal veiklos sritis sudaromo biudžeto ataskaitose ir metinės veiklos ataskaitose turėtų nurodyti, kokių jie ėmėsi tolesnių priemonių, bei pasinaudoti rekomendacijomis atnaujinant darbo programas ir kuriant naujas.

BENDRA IŠVADA

| 110. | Audito Rūmai pripažįsta, kad mokslinių tyrimų ir technologinės plėtros programų, visų pirma – jų ilgalaikių rezultatų – vertinimui yra būdingi sunkumai ir nėra lengva nustatyti geriausią praktiką. |
| --- | --- |

110.

Audito Rūmai pripažįsta, kad mokslinių tyrimų ir technologinės plėtros programų, visų pirma – jų ilgalaikių rezultatų – vertinimui yra būdingi sunkumai ir nėra lengva nustatyti geriausią praktiką.

| 111. | Audito Rūmų nuomone, vertinimas yra būtinas valdant programas, planuojant jas ateityje ir formuojant politiką. Vertinimas – taip pat atskaitomybės pagrindas. Jis suteikia vertingos informacijos apie tai, kokių buvo pasiekta planuotų (neplanuotų) rezultatų, kokiu mastu buvo įgyvendinti programos tikslai, ar programos buvo aktualios ir naudingos ir ar programos vykdymas buvo efektyvus ir rezultatyvus. Kadangi dėl bendrųjų gairių, biudžetinių klausimų ir bendrųjų programų kūrimo sprendimus priima Europos Parlamentas ir Taryba, būtina skaidri, patikima ir tvirta vertinimo sistema, kuri šioms institucijoms teiktų atitinkamą informaciją. |
| --- | --- |

111.

Audito Rūmų nuomone, vertinimas yra būtinas valdant programas, planuojant jas ateityje ir formuojant politiką. Vertinimas – taip pat atskaitomybės pagrindas. Jis suteikia vertingos informacijos apie tai, kokių buvo pasiekta planuotų (neplanuotų) rezultatų, kokiu mastu buvo įgyvendinti programos tikslai, ar programos buvo aktualios ir naudingos ir ar programos vykdymas buvo efektyvus ir rezultatyvus. Kadangi dėl bendrųjų gairių, biudžetinių klausimų ir bendrųjų programų kūrimo sprendimus priima Europos Parlamentas ir Taryba, būtina skaidri, patikima ir tvirta vertinimo sistema, kuri šioms institucijoms teiktų atitinkamą informaciją.

| 112. | 2000 m. ir 2002 m. Komisija nustatė bendrą vertinimo sistemą ir 2007 m. ją patobulino. Nors Audito Rūmams atliekant auditą nebuvo pastebėta didelės pažangos planuojant, rengiant ir atliekant bendrųjų programų ir jų sudėtinių programų vertinimus, apskritai mokslinių tyrimų generaliniai direktoratai įvykdė formalius visoje Komisijoje taikomus reikalavimus. |
| --- | --- |

112.

2000 m. ir 2002 m. Komisija nustatė bendrą vertinimo sistemą ir 2007 m. ją patobulino. Nors Audito Rūmams atliekant auditą nebuvo pastebėta didelės pažangos planuojant, rengiant ir atliekant bendrųjų programų ir jų sudėtinių programų vertinimus, apskritai mokslinių tyrimų generaliniai direktoratai įvykdė formalius visoje Komisijoje taikomus reikalavimus.

| 113. | Laikotarpio, kurį apima ši ataskaita, metu, kaip reikalaujama pagal bendrųjų programų teisės aktus, mokslinių tyrimų generaliniai direktoratai turėjo įdiegę vertinimo sistemą ir Komisija gali pažymėti, kad buvo atlikta nemažai vertinimo tyrimų. Nepaisant to, mažai arba nieko nėra žinoma apie programos tikslų pasiekimą ir bendrųjų programų rezultatus. Taip yra todėl, kad atliekant vertinimus daugiausia dėmesio paprastai buvo skiriama trumpalaikiams programos įgyvendinimo klausimams. Tokiu būdu Komisijos atlikti vertinimai buvo mažai naudingi politikos formuotojams, suinteresuotosioms šalims ir net pačiai Komisijai. |
| --- | --- |

113.

Laikotarpio, kurį apima ši ataskaita, metu, kaip reikalaujama pagal bendrųjų programų teisės aktus, mokslinių tyrimų generaliniai direktoratai turėjo įdiegę vertinimo sistemą ir Komisija gali pažymėti, kad buvo atlikta nemažai vertinimo tyrimų. Nepaisant to, mažai arba nieko nėra žinoma apie programos tikslų pasiekimą ir bendrųjų programų rezultatus. Taip yra todėl, kad atliekant vertinimus daugiausia dėmesio paprastai buvo skiriama trumpalaikiams programos įgyvendinimo klausimams. Tokiu būdu Komisijos atlikti vertinimai buvo mažai naudingi politikos formuotojams, suinteresuotosioms šalims ir net pačiai Komisijai.

| 114. | Turint omeny vertinimo svarbą valdant programas ir formuojant politiką bei atsižvelgiant į naujus politinius iššūkius, padidėjusį finansavimą, Bendrijos mokslinių tyrimų politikos krypties išplėtimą ir neseniai Komisijos įvykdytą reformą, turi būti peržiūrėtas metodas, kuriuo Komisija vadovaujasi vertindama bendrąsias programas ir jų sudėtines programas. Tai taip pat rekomendavo EURAB savo 2007 m. ataskaitoje. |
| --- | --- |

114.

Turint omeny vertinimo svarbą valdant programas ir formuojant politiką bei atsižvelgiant į naujus politinius iššūkius, padidėjusį finansavimą, Bendrijos mokslinių tyrimų politikos krypties išplėtimą ir neseniai Komisijos įvykdytą reformą, turi būti peržiūrėtas metodas, kuriuo Komisija vadovaujasi vertindama bendrąsias programas ir jų sudėtines programas. Tai taip pat rekomendavo EURAB savo 2007 m. ataskaitoje.

| 115. | Audito Rūmų nuomone, naudojant aiškią intervencijos logiką kuriant bendrąsias programas ateityje, programos taptų labiau sutelktos į atitinkamus tikslus ir labiau struktūrizuotos. Tai taip pat prisidėtų prie Bendrijos „geresnio reguliavimo“ politikos, kuria siekiama sukurti nesudėtinga koncepcija paremtą paprastesnę, veiksmingesnę ir lengviau suprantamą reguliavimo aplinką (69). |
| --- | --- |

115.

Audito Rūmų nuomone, naudojant aiškią intervencijos logiką kuriant bendrąsias programas ateityje, programos taptų labiau sutelktos į atitinkamus tikslus ir labiau struktūrizuotos. Tai taip pat prisidėtų prie Bendrijos „geresnio reguliavimo“ politikos, kuria siekiama sukurti nesudėtinga koncepcija paremtą paprastesnę, veiksmingesnę ir lengviau suprantamą reguliavimo aplinką (69).

| 116. | Bendrųjų programų ir jų sudėtinių programų vertinimas būtų veiksmingesnis, jei iš pat pradžių būtų nustatyti aiškesni programos tikslai ir rodikliai, bendrąsias programas įgyvendinantys mokslinių tyrimų generaliniai direktoratai susitartų dėl griežtos, bet ne pernelyg suvaržančios vertinimo strategijos ir būtų naudojamos pažangesnės vertinimo metodikos, įskaitant kiekybinius metodus. |
| --- | --- |

116.

Bendrųjų programų ir jų sudėtinių programų vertinimas būtų veiksmingesnis, jei iš pat pradžių būtų nustatyti aiškesni programos tikslai ir rodikliai, bendrąsias programas įgyvendinantys mokslinių tyrimų generaliniai direktoratai susitartų dėl griežtos, bet ne pernelyg suvaržančios vertinimo strategijos ir būtų naudojamos pažangesnės vertinimo metodikos, įskaitant kiekybinius metodus.

| 117. | Audito Rūmai taip pat pažymėjo keletą aspektų, į kuriuos atsižvelgdama Komisija gali iš naujo nagrinėti dabartinę bendrųjų programų vertinimo organizacinę tvarką. Gali būti gauta naudos, jei






  — | vertinimo komisijos į vertinimo procesą būtų anksčiau įtrauktos, tokiu būdu Komisijai teikiant pagalbą viso programavimo laikotarpio metu ir jam pasibaigus, taip pat jei būtų dažniau naudojamas specializacijos aspektas suburiant specialiosioms programoms ir, prireikus, paprogramėms nagrinėti skirtas vertinimo komisijas, |
| --- | --- | --- |

117.

Audito Rūmai taip pat pažymėjo keletą aspektų, į kuriuos atsižvelgdama Komisija gali iš naujo nagrinėti dabartinę bendrųjų programų vertinimo organizacinę tvarką. Gali būti gauta naudos, jei

—

vertinimo komisijos į vertinimo procesą būtų anksčiau įtrauktos, tokiu būdu Komisijai teikiant pagalbą viso programavimo laikotarpio metu ir jam pasibaigus, taip pat jei būtų dažniau naudojamas specializacijos aspektas suburiant specialiosioms programoms ir, prireikus, paprogramėms nagrinėti skirtas vertinimo komisijas,

| — | dabartinius konkrečius generalinių direktoratų vertinimo padalinius papildytų už bendrųjų programų vertinimų koordinavimą atsakinga bendra vertinimo tarnyba. |
| --- | --- |

—

dabartinius konkrečius generalinių direktoratų vertinimo padalinius papildytų už bendrųjų programų vertinimų koordinavimą atsakinga bendra vertinimo tarnyba.

| 118. | Šioje ataskaitoje pateiktos rekomendacijos yra grindžiamos arba Komisijoje naudojamais esamais metodais, arba tarptautine gerąja praktika. Tiesa, siūlomo programos vertinimo metodo įdiegimas pareikalautų didesnių išlaidų ištekliams. Tačiau Audito Rūmų nuomone, labai tikėtina, kad jos atsipirks ir gauta nauda bent jau prilygs patirtoms išlaidoms. |
| --- | --- |

118.

Šioje ataskaitoje pateiktos rekomendacijos yra grindžiamos arba Komisijoje naudojamais esamais metodais, arba tarptautine gerąja praktika. Tiesa, siūlomo programos vertinimo metodo įdiegimas pareikalautų didesnių išlaidų ištekliams. Tačiau Audito Rūmų nuomone, labai tikėtina, kad jos atsipirks ir gauta nauda bent jau prilygs patirtoms išlaidoms.

Šią ataskaitą Audito Rūmai priėmė Liuksemburge 2007 m. lapkričio 22 d. įvykusiame Audito Rūmų posėdyje.

Audito Rūmų vardu

Pirmininkas

Hubert WEBER

---

(1)  Pagal EBPO, mokslinius tyrimus ir plėtrą galima būtų apibrėžti kaip „... sistemingai atliekamą kūrybinį darbą, kuriuo siekiama pagilinti žinojimą, įskaitant žmogaus, kultūros ir visuomenės pažinimą, ir naudoti šias žinias kuriant naujus jų pritaikymo būdus“ (žr. EBPO Frascati vadovą – Siūlomas mokslinių tyrimų ir eksperimentinės plėtros tyrinėjimo standartas – Paryžius, 2002 m., p. 30). Bendrijos kontekste naudojamas RTD akronimas, apimantis technologijas, taip pat mokslinius tyrimus ir plėtrą.

1

Frascati

(2)  Mokslinių tyrimų generalinis direktoratas yra pagrindinis bendrąsias programas administruojantis ir koordinuojantis generalinis direktoratas. Iš kitų penkių generalinių direktoratų, kurie taip pat administruoja specialiąsias programas (jų dalis) svarbiausias yra Informacinės visuomenės ir žiniasklaidos generalinis direktoratas (kiti – Energetikos ir transporto generalinis direktoratas, Įmonių ir pramonės generalinis direktoratas, Žuvininkystės generalinis direktoratas ir Komisijos jungtinis tyrimų centras).

2

(3)  2000 m. Lisabonos Europos Vadovų Taryba apsibrėžė tikslą iki 2010 m. paversti ES dinamiškiausia, konkurencingiausia ir tvariausia žinių ekonomika pasaulyje, užtikrinančia visišką užimtumą ir didesnę ekonominę bei socialinę sanglaudą.

3

(4)  2002 m. Europos Vadovų Taryba sutarė, kad bendras moksliniams tyrimams, technologinei plėtrai ir naujovėms Europos Sąjungoje skiriamų lėšų lygis iki 2010 m. turėtų būti padidintas iki 3 % BVP. Ji taip pat nurodė, kad du šios naujos investicijos trečdalius turėtų padengti privatus sektorius (žr. Komisijos komunikatą Tarybai, Europos Parlamentui, Europos ekonomikos ir socialinių reikalų komitetui bei Regionų komitetui „Investavimas į mokslinius tyrimus: veiksmų planas Europai“, COM(2003) 226 galutinis, p. 7).

4

(5)  Tiesioginio valdymo atveju Komisija atlieka būtinas su savo biudžeto vykdymo veikla susijusias operacijas, jose nedalyvaujant valstybėms narėms ar trečiosioms šalims, kuriose gyvena pagalbos gavėjai.

5

(6)  2006 m. vien tik BP6 dalyvavo daugiau nei 22 000 viešųjų ir privačių juridinių asmenų, daugiausia susibūrusių į kelių partnerių konsorciumus.

6

(7)  Tai savanoriško tarpvyriausybinio bendradarbiavimo principu grindžiamas bendradarbiavimo metodas. Visų pirma, jis paremtas abipusiu mokymusi, lyginamąja analize ir dalijimusi geriausia praktika.

7

(8)  2002 m. birželio 25 d. Tarybos reglamento (EB, Euratomas) Nr. 1605/2002 (OL L 248, 2002 9 16, p. 1) 27, 48, 59 ir 60 straipsniai.

8

(9)  Europos Komisija, Biudžeto generalinis direktoratas, D. Grybauskaitės Komisijai pateiktas komunikatas, parengtas jį derinant su Pirmininku: „Reagavimas į strateginius poreikius – dažnesnis vertinimo metodo panaudojimas“, SEC(2007) 213, 2007 m. vasario 21 d.; Europos Komisija, Biudžeto generalinis direktoratas, p. Schreyer Komisijai pateiktas komunikatas „Rezultatams skiriamas dėmesys: Komisijos veiklos vertinimo proceso stiprinimas“, SEC (2000) 1051, 2000 m. liepos 26 d.

9

(10)  2006 m. gruodžio 18 d. Europos Parlamento ir Tarybos sprendimo Nr. 1982/2006/EB dėl Europos bendrijos mokslinių tyrimų, technologinės plėtros ir demonstracinės veiklos septintosios bendrosios programos (2007–2013 m.) (OL L 412, 2006 12 30, p. 1) 7 straipsnio 1 dalis; Programų komitetams Komisijos turima suteikti stebėsenos informacija yra apibrėžta spendimuose dėl specialiųjų programų (žr., pvz., 2006 m. gruodžio 19 d. Tarybos sprendimo 2006/971/EB dėl specialiosios programos Bendradarbiavimas, įgyvendinančios Europos bendrijos mokslinių tyrimų, technologinės plėtros ir demonstracinės veiklos septintąją bendrąją programą (2007–2013 m.) (OL L 400, 2006 12 30, p. 86), 8 straipsnio 4 dalį ir V priedą).

10

(11)  Europos Komisijos komunikatas Tarybai dėl su 1987–1991 m. Bendrijos mokslinių tyrimų ir technologinės plėtros įvertinimu susijusio Bendrijos veiksmų plano, COM(86) 660 galutinis, 1986 m. lapkričio 20 d., atsakant į 1983 m. birželio 28 d. Tarybos rezoliuciją.

11

(12)  Europos Komisija, Europos Sąjungos mokslinių tyrimų ir technologinės plėtros programų penkerių metų laikotarpio įvertinimas, 1992–1996 m.; Nepriklausomų ekspertų komisijos, kuriai pirmininkavo Viscount Davignon, ataskaita (1997 m.); Europos Komisija, Europos Sąjungos mokslinių tyrimų ir technologinės plėtros programų penkerių metų laikotarpio įvertinimas, 1995–1999 m.; Nepriklausomų ekspertų komisijos, kuriai pirmininkavo Joan Majó, ataskaita (2000 m. liepos mėn.); Europos Komisija, Europos Sąjungos mokslinių tyrimų bendrųjų programų penkerių metų laikotarpio įvertinimas, 1999–2003 m.; Nepriklausomų ekspertų komisijos, kuriai pirmininkavo Erkki Ormala, ataskaita (2004 m. gruodžio 15 d.).

12

Viscount Davignon

Joan Majó

Erkki Ormala

(13)  Europos Komisija, Šeštosios pagrindinės programos naujų instrumentų veiksmingumo įvertinimas, 2004 m. birželio 21 d.; Aukštos kvalifikacijos ekspertų komisijos, kuriai pirmininkavo profesorius Ramon Marimón, ataskaita.

13

Ramon Marimón

(14)  Europos Komisija, Biudžeto generalinis direktoratas, p. Schreyer Komisijai pateiktas komunikatas „Rezultatams skiriamas dėmesys: Komisijos veiklos vertinimo proceso stiprinimas“, SEC(2000) 1051, 2000 m. liepos mėn.; Europos Komisija, Biudžeto generalinis direktoratas, Pirmininko ir p. Schreyer Komisijai pateiktas komunikatas „Vertinimo standartai ir geroji praktika“, C(2002) 5267, 2002 12 23.

14

(15)  Europos Komisija, Biudžeto generalinis direktoratas, D. Grybauskaitės Komisijai pateiktas komunikatas, parengtas jį derinant su Pirmininku: „Reagavimas į strateginius poreikius – dažnesnis vertinimo metodo panaudojimas“, SEC(2007) 213, 2007 m. vasario 21 d.

15

(16)  Europos Komisijos tarnybų darbo dokumentas „Poveikio ir ex ante įvertinimai“, SEC(2005) 430.

16

ex ante

(17)  Europos Parlamento pramonės, mokslinių tyrimų ir energetikos (ITRE) komitetas yra (visų pirma) atsakingas už pramonės politiką, mokslinių tyrimų politiką (įskaitant mokslinių tyrimų išvadų sklaidą ir panaudojimą), kosmoso politiką, Jungtinio tyrimų centro veiklą, Euratomo sutartį bei informacinę visuomenę ir informacines technologijas.

17

(18)  CREST (pranc. Comité de la Recherche Scientifique et Technique, Mokslinių ir techninių tyrimų komitetas) įsteigtas 1974 m. sausio 14 d. Tarybos rezoliucija. Jį sudaro nacionalinių valdžios institucijų atstovai, atsakingi už valstybių narių mokslo ir technologijų politiką. CREST atlieka patariamąją funkciją, t. y. informuoja Komisiją ir Tarybą temomis, susijusiomis su nacionalinių mokslinių tyrimų ir technologijų plėtros politikų koordinavimu bei bendrųjų programų stebėsena ir vertinimu.

18

Comité de la Recherche Scientifique et Technique

(19)  Loginiai modeliai, rodantys, kaip indėliai skirtingose veiklos srityse duoda laukiamų rezultatų, yra pats tinkamiausias būdas intervencijos logikai apibūdinti. Pasitelkus šiuos modelius galima suprantamai paaiškinti prielaidas, kaip programa yra parengta ir kaip bendrieji tikslai yra skirstomi į veiklos tikslus.

19

(20)  Europos Komisija, Biudžeto generalinio direktorato parengtas dokumentas „ES veiklos vertinimas: Komisijos tarnyboms skirtas praktinis vadovas“, 2004 m. liepos mėn., p. 87 ir 106.

20

(21)  Europos Sąjungos mokslinių tyrimų bendrųjų programų penkerių metų laikotarpio įvertinimas, 1999–2003 m.: Nepriklausomų ekspertų komisijos, kuriai pirmininkavo Erkki Ormala, ataskaitos (2004 m. gruodžio 15 d.) 6 skirsnio „Bendrosios programos įvertinimas“ p. 19.

21

Erkki Ormala

(22)  Išorės pagalbą gaunančios šalys privalo pateikti loginius modelius, kad gautų Bendrijos finansavimą (Europos Komisija, Pagalbos teikimo metodai, 1 tomas, Projekto ciklo valdymo gairės, 2004 m. kovo mėn., 5 skirsnis „Loginės sistemos metodas“).

22

(23)  Reglamento (EB, Euratomas) Nr. 1605/2002 27 straipsnio 3 dalis.

23

(24)  2006 m. politikos srities „Moksliniai tyrimai 08“ struktūra buvo sudaryta remiantis dabartinio BP6 programavimo laikotarpio specialiosiomis programomis (ir paprogramėmis), o 2007 m. jos struktūra buvo pakeista. Tuo tarpu „Informacinė visuomenė 09“ politikos srityje dabartinė ir ankstesnioji specialiosios programos buvo sujungtos į vieną biudžeto sudarymo pagal veiklos sritis veiklą (Europos Komisija, Mokslinių tyrimų generalinis direktoratas, A direktoratas: Bendrijos veiklos koordinavimas, planavimas, programavimas, vertinimas, 2006 m. metinis valdymo planas, 2005 12 20; Europos Komisija, Informacinės visuomenės ir žiniasklaidos generalinis direktoratas, 2006 m. metinis valdymo planas, 2005 12 23).

24

(25)  Mokslinių tyrimų generalinio direktorato atveju veikla pagrįsto valdymo tikslai (ir rodikliai, naudojami jų pasiektiems tikslams įvertinti) kiekvienais metais vis keitėsi. Kita vertus, Informacinės visuomenės generalinis direktoratas naudojo daugiamečius tikslus, kurie nesutapo su programos tikslais (arba su tais, kurie buvo nurodyti darbo programoje).

25

(26)  Europos Komisija, Vidaus audito tarnyba, Strateginio planavimo ir programavimo (veikla pagrįsto valdymo) ciklo efektyvumo ir rezultatyvumo peržiūra – SG ir Biudžeto GD, 2005 m.: 4.1 dalis, p. 31.

26

(27)  Europos Komisija, Komisijos komunikatas Tarybai dėl Bendrijos veiksmų plano, susijusio su Bendrijos mokslinių tyrimų ir plėtros programų įvertinimu COM(83) 1 galutinis, 1983 m. sausio 19 d.

27

(28)  Komisijos komunikatas Tarybai ir Europos Parlamentui dėl mokslinių tyrimų ir technologinės plėtros srityje Bendrijos vykdomos veiklos nepriklausomos išorės stebėsenos ir vertinimo, 1996 5 22 (COM(1996) 220 galutinis).

28

(29)  Kiekvienas bendrąsias programas įgyvendinantis generalinis direktoratas savo planuojamus atlikti įvertinimus dokumentuoja metiniuose (ir daugiamečiuose) vertinimo planuose. Tačiau šie planavimo dokumentai negali būti laikomi vertinimo strategija kaip tokia.

29

(30)  Reglamento (EB, Euratomas) Nr. 1605/2002 27 straipsnio 4 dalis.

30

(31)  Loi de programme pour la recherche no 2006–450, 2006 m. balandžio 18 d. ir Décret no 2006–1334 relatif à l'organisation et au fonctionnement de l'Agence d'évaluation de la recherche et de l'enseignement supérieur (AERES), 2006 m. lapkričio 3 d.

31

Loi de programme pour la recherche no

Décret no

(32)  Agencia Nacional de Evaluación y Prospectiva under the Ministerio de Educación y Ciencia: 2005 m. gegužės 4 d. įsakymas ECI/1252/2005, kuriuo įsteigiama Comisión Asesora de Evaluación y Prospectiva (Patariamoji vertinimo ir prognozavimo komisija).

32

Agencia Nacional de Evaluación y Prospectiva under the Ministerio de Educación y Ciencia

Comisión Asesora de Evaluación y Prospectiva

(33)  2004 m. Deutsche Forschungsgemeinschaft (DFG) įsteigė specializuotą institutą, Institut für Forschungsinformation und Qualitätssicherung (IFQ) ir suteikė jam įgaliojimus rengti ir standartizuoti vertinimo metodikas, vykdyti kokybės užtikrinimą ir atlikti DFG finansuojamos su moksliniais tyrimais ir technologine plėtra susijusios veiklos vertinimus.

33

Deutsche Forschungsgemeinschaft

Institut für Forschungsinformation und Qualitätssicherung

(34)  BP7 programos atveju Komisija buvo sukūrusi 15 ekspertų patariamųjų grupių, BP6–12 ekspertų patariamųjų grupių, o BP5–17 ekspertų patariamųjų grupių. Šios ekspertų patariamosios grupės konsultuoja Komisiją dėl politikos ir programos klausimų, susijusių su bendrosiomis programomis. Tačiau pažymėtina, kad šios ekspertų patariamosios grupės negali visiškai aprėpti bendrųjų programų programinės struktūros. Kitais žodžiais tariant, ne kiekvienai specialiajai programai (ar paprogramei) yra sukurta ekspertų patariamoji grupė.

34

(35)  Kanadoje beveik visi federalinės vyriausybės departamentai yra įsteigę nuolatinius vertinimo komitetus, kuriuos sudaro vyresnieji departamentų pareigūnai ir dažnai išorės suinteresuotosios šalys, siekiant prižiūrėti vertinimo sistemos veikimą (Kanados socialinių mokslų ir humanitarinių mokslų mokslinių tyrimų taryba: Nuolatinis vertinimo komitetas – įgaliojimai ir narystė).

35

(36)  Europos Komisija, 2004 m. priežiūros ataskaita „Veiklos vykdymas pagal EB ir Euratomo pagrindines ir atitinkamas specialiąsias programas“, 2005 m. rugpjūčio mėn., p. 5.

36

(37)  Europos Komisija, „Komisijos žmogiškųjų išteklių planavimas ir optimizavimas siekiant atitikti ES prioritetus“, SEC(2007) 530, 2007 m. balandžio 24 d.

37

(38)  Europos Komisija, Pirmininko ir p. Schreyer Komisijai pateiktas komunikatas „Vertinimo standartai ir geroji praktika“, C(2002) 5267, 2002 12 23; Europos Komisijos tarnybų darbo dokumentas „Poveikio ir ex ante įvertinimai“, SEC(2005) 430, 2005 m. balandžio 6 d., 1 priedas, išnaša Nr. 209.

38

ex ante

(39)  2007 m. Europos tyrimų patariamasis komitetas (EURAB) taip pat rekomendavo padidinti bendrųjų programų vertinimui skiriamus išteklius (EURAB, „Rekomendacijos dėl ex post poveikio įvertinimo“, 2007 m. liepos mėn.).

39

ex post

(40)  Specialiosios ataskaitos Nr. 1/2004 dėl netiesioginių mokslinių tyrimų ir technologinės plėtros veiksmų valdymo pagal mokslinių tyrimų ir technologinės plėtros penktąją bendrąją programą (BP5) (1998–2002 m.) (OL C 99, 2004 4 23), 116 ir 122 dalys.

40

(41)  Europos Komisija, Biudžeto generalinis direktoratas, D. Grybauskaitės Komisijai pateiktas komunikatas, parengtas jį derinant su Pirmininku: „Reagavimas į strateginius poreikius – dažnesnis vertinimo metodo panaudojimas“, SEC(2007) 213, 2007 m. vasario 21 d.; Europos Komisija, Pirmininko ir p. Schreyer Komisijai pateiktas komunikatas „Vertinimo standartai ir geroji praktika“, COM(2002) 5267, 2002 12 23.

41

(42)  14 generalinių direktoratų turi tokius politikos sričių ir programų, už kurias jie yra atsakingi, vertinimo vadovus (Europos Komisija, Biudžeto generalinis direktoratas – Vertinimo padalinys, „Komisijoje naudojamų vertinimo vadovų apžvalga“, 2004 m. spalio mėn.).

42

(43)  Fahrenkrog, G. et al, RTD Evaluation Toolbox – Assessing the Socio-Economic Impact of RTD-Policies, IPTS-JRC, 2002; PREST et al.; „Assessing the Socio-economic Impacts of the Framework Programme“; Mančesterio universitetas; 2002.

43

RTD Evaluation Toolbox

Assessing the Socio-Economic Impact of RTD-Policies

Assessing the Socio-economic Impacts of the Framework Programme

(44)  Nors Komisija paprastai turi tokią informaciją apie dalyvius, ja dažnai negalima lengvai pasinaudoti siekiant atlikti išsamią analizę, nes duomenys apie tam tikrą dalyvį nėra kaupiami vienoje vietoje arba jie yra nebūtinai registruojami pasitelkiant formatus, kurie būtų vienas su kitu suderinti. Dėl to sunku sekti, kaip su laiku dalyvis įsitraukia į procesą, pavyzdžiui, įvertinti nedalyvavimo priežastis, nustatyti santykius tarp dalyvių, pvz., tirti tinklų kūrimo rezultatus (žr. 84 dalį).

44

(45)  2006 finansinių metų metinės ataskaitos 2.3 lentelė; 2005 finansinių metų metinės ataskaitos 7.13 dalis; 2004 finansinių metų metinės ataskaitos 6.8 ir 6.10 dalys; 2003 finansinių metų metinės ataskaitos 6.9 ir 6.70 dalys; Specialiosios ataskaitos Nr. 1/2004 105–108 dalys; Nuomonės Nr. 1/2006 dėl Europos Parlamento ir Tarybos reglamento, nustatančio įmonių, mokslinių tyrimų centrų ir universitetų dalyvavimo Septintosios pagrindų programos veiksmuose ir mokslinių tyrimų rezultatų sklaidos taisykles (2007–2013 m.), pasiūlymo (OL C 203, 2006 8 25) 57 dalis.

45

(46)  Europos bendrijos steigimo sutarties 173 straipsnis: „Kiekvienų metų pradžioje Komisija siunčia Europos Parlamentui ir Tarybai pranešimą. Pranešime pateikiama informacija apie mokslo tiriamuosius darbus ir technologijų plėtrą bei jos rezultatų skleidimą praėjusiais metais ir einamųjų metų darbo programa“.

46

(47)  Nebuvo sistemingai stengiamasi rinkti duomenis iš dalyvių pasibaigus projektui, išskyrus konkrečias apklausas atliekant vertinimus. Pasinaudoti apklausos būdu sutrukdė tas faktas, kad dalyviai, priešingai nei daugelio nacionalinių mokslinių tyrimų ir technologinės plėtros programų (pvz., Vokietijoje) atveju, nėra teisiškai įpareigoti teikti tokius analitinius duomenis.

47

(48)  Specialiosios ataskaitos Nr. 1/2004 94 dalis; Nuomonės Nr. 1/2006 56 dalis.

48

(49)  2006 finansinių metų metinės ataskaitos 7.33 dalis; 2005 finansinių metų metinės ataskaitos 7.8 ir 7.29 dalys; Nuomonės Nr. 1/2006 58–61 dalys.

49

(50)  CORDIS – tai vienintelė visai bendrajai programai taikoma ir kelis programavimo laikotarpius apimanti duomenų bazė, teikianti informaciją apie pasiūlymus, projektus ir rezultatus, kuri yra prieinama ne Komisijos darbuotojams. Tačiau atrinkus pasiūlymą CORDIS bazėje įvesti atskirų projektų duomenys dažnai nėra atnaujinami. Tačiau ankstesnių ir BP6 programos metu bendrosiose programose dalyvaujantys privataus ir viešojo sektoriaus subjektai neprivalėjo skelbti savo rezultatų (Europos tyrimų patariamasis komitetas (EURAB), „Mokslinių rezultatų skelbimas: atviros prieigos politika“, 2006 m. gruodžio mėn.).

50

(51)  Hanne Foss Hansen, „Choosing evaluation models: A discussion on evaluation design,“ Vertinimas, 11 tomas Nr. 4, 2005, p. 447–462.

51

Choosing evaluation models: A discussion on evaluation design

(52)  Ankstesnių ir BP6 programos metu bendrosiose programose dalyvaujantys privataus ir viešojo sektoriaus subjektai neprivalėjo skelbti savo mokslinių rezultatų. 2006 m. gruodžio mėn. EURAB rekomendavo padaryti skelbimą būtiną, kad visuomenė galėtų laisvai susipažinti su Bendrijos finansuojamais moksliniais tyrimais. Taip pat buvo pasiūlyta Komisijai sukurti internetinę paskelbtų projektų rezultatų saugyklą (žr. EURAB, „Mokslinių rezultatų skelbimas: atviros prieigos politika“, 2006 m. gruodžio mėn.).

52

(53)  Pažymima, kad tokiais modeliais buvo naudojamasi planuojamos BP7 programos mikro ir makroekonominiams padariniams numatyti (žr. Europos Komisijos 2004 m. priežiūros ataskaitą „Veiklos vykdymas pagal EB ir Euratomo pagrindines ir atitinkamas specialiąsias programas“, 2005 m. rugpjūčio mėn., p. 23–25). Tačiau nėra jokių įrodymų, kad šis galimo bendrųjų programų ekonominio poveikio įvertinimas yra susijęs su kokiu nors ex post vertinimo planu.

53

ex post

(54)  Informacinės visuomenės ir žiniasklaidos generalinis direktoratas, „Informacinės visuomenės technologijų (IST) bei mokslinių tyrimų ir technologinės plėtros stebėsena ir vertinimas: rezultatai ir poveikio rodikliai (2003–2004 m.)“, 2005 m.; „Naujovių tinklų informacinėje visuomenėje plėtojimas ir panaudojimas Europoje“, 2006 m.

54

(55)  Informacinės visuomenės ir žiniasklaidos generalinis direktoratas „Europos mokslinių tyrimų erdvės tinklai – bendradarbiavimo tarp dalyvių informacinės visuomenės technologijų mokslinių tyrimų srityje bei tinklų plėtotės prisidedant prie bendradarbiavimo Europos mokslinių tyrimų erdvėje įvertinimas“ (galutinė ataskaita), 2005 m.; „Pažangos kuriant informacinės visuomenės technologijų Europos mokslinių tyrimų erdvę įvertinimas“, 2005 m.; „Naujovių tinklų informacinėje visuomenėje plėtojimas ir panaudojimas Europoje“, 2006 m.

55

(56)  Informacinės visuomenės ir žiniasklaidos generalinis direktoratas, Mokslinių tyrimų poveikio vertinimų informacinės visuomenės technologijų srityje bendroji sutartis.

56

(57)  EURAB, „Rekomendacijos dėl ex post poveikio įvertinimo“, 2007 m. liepos mėn.

57

ex post

(58)  Europos Komisija, Europos Sąjungos mokslinių tyrimų bendrųjų programų penkerių metų laikotarpio įvertinimas, 1999–2003 m. Nepriklausomų ekspertų komisijos, kuriai pirmininkavo Erkki Ormala, ataskaitos (2004 m. gruodžio 15 d.) 1 priedas.

58

Erkki Ormala

(59)  Europos Komisija, „EB mokslinių tyrimų ir plėtros politikos poveikis Europos mokslo ir technologijų bendrijai; Nacionalinių poveikio tyrimų galutinė suvestinė ataskaita“ (1995 m.).

59

(60)  Europos Komisija, „Suderintos ES mokslinių tyrimų ir plėtros bendrosioms programoms skirtos poveikio tyrimų metodikos planas“, 1992 m.

60

(61)  Europos Komisijos tarnybų darbo dokumento „Europos mokslinių tyrimų erdvė: naujos perspektyvos“, SEC(2007) 412/2, 2007 m. balandžio 4 d., 3.3.3 skirsnio „Europos mokslinių tyrimų erdvė ir poveikis įrodymais grindžiamai stebėsenai ir vertinimui“ p. 93.

61

(62)  Pažymėtina, kad projektų susitarimai dėl dotacijų yra pasirašomi viso programavimo laikotarpio metu; pirmieji susitarimai paprastai įsigalioja pasibaigus pirmiesiems programos metams. Šie susitarimai daugiausiai trunka nuo trejų iki penkerių metų, todėl galutinių išdirbių galima tikėtis anksčiausiai po ketverių–šešerių metų.

62

Šaltinis: Europos Audito Rūmai.

Šaltinis:

(63)  Europos Komisija, Europos Sąjungos mokslinių tyrimų bendrųjų programų penkerių metų laikotarpio įvertinimas, 1999–2003 m.: Nepriklausomų ekspertų komisijos, kuriai pirmininkavo Erkki Ormala, ataskaitos (2004 m. gruodžio 15 d.) 6 skirsnio „Bendrosios programos įvertinimas“ p. 19.

63

Erkki Ormala

(64)  Europos Komisija, „Vertinimo priemonių komplektas – mokslinių tyrimų ir technologinės plėtros politikos socialinio ir ekonominio poveikio vertinimas“, vadinamasis „EPUB priemonių komplektas“, kurį išleido Jungtinis tyrimų centras – Naujų technologijų tyrimų institutas (NTTI) ir Joanneum Research (2002 m. rugpjūčio mėn.), Santrauka, p. 9 ir 12.

64

Joanneum Research

(65)  Europos Komisija, Šeštosios pagrindinės programos naujųjų priemonių veiksmingumo įvertinimas, 2004 m. birželio 21 d., aukštos kvalifikacijos ekspertų komisijos, kuriai pirmininkavo profesorius Ramon Marimón, ataskaitos p. 20.

65

Ramon Marimón

(66)  Europos politikos vertinimo konsorciumas, Technopolis France, „Vertinimo rezultatų naudojimo Komisijoje tyrimas: galutinė ataskaita“, dokumentų paketas Nr.1, suvestinė ataskaita ir priedai, 2005 m. gegužės mėn.

66

Technopolis France

(67)  CREST respondentai, kurie dažnai taip pat yra ir programos komitetų nariai, nurodė, kad jie buvo labiau patenkinti tuo, kaip jie yra informuojami. Taip gali būti dėl to, kad jie atlieka formalų vaidmenį prižiūrint programos įgyvendinimą.

67

(68)  Europos Komisijos tarnybų darbo dokumentas, 2004 m. metinė vertinimo peržiūra – Komisijos vertinimo metu nustatytų faktų ir veiklos apžvalga, SEC(2005) 587, 2005 m. balandžio 28 d.

68

(69)  Europos Komisija, Biudžeto generalinis direktoratas, D. Grybauskaitės Komisijai pateiktas komunikatas, parengtas jį derinant su Pirmininku: „Reagavimas į strateginius poreikius – dažnesnis vertinimo metodo panaudojimas“, SEC(2007) 213, 2007 m. vasario 21 d. p. 4.

69

---

I PRIEDAS

VIEŠOSIOS INTERVENCIJOS MOKSLINIŲ TYRIMŲ IR TECHNOLOGINĖS PLĖTROS SRITYJE POVEIKIO IR REZULTATŲ ĮVERTINIMAS

Kai kurie pagrindiniai metodiniai sunkumai vertinant viešosios intervencijos mokslinių tyrimų ir technologinės plėtros srityje poveikį ir rezultatus yra šie.

| — | Priskyrimo problemos. Priskyrimo problemos iškyla atliekant vertinimus ir nustatant veiklos rezultatus. Jos glaudžiai susijusios su „papildomumo“ klausimu, kuriuo klausiama, ar pokyčiai nebūtų vis vien įvykę. Rezultatų priskyrimo konkrečiai viešajai intervencijai sudėtingumą taip pat sąlygoja daugelis išorės veiksnių (pvz., kitų politikos krypčių ar programų padariniai, teisinės sistemos pakeitimai, pokyčiai visuomenėje ir t. t.). Be to, mokslinių tyrimų srityje nepasiekti laukiamų rezultatų taip pat gali reikšti sėkmę. Viską dar labiau komplikuoja akivaizdus sunkumas aiškiai priskirti mokslinių tyrimų išdirbius, o ką jau kalbėti apie išdavas ir poveikius, konkretiems mokslinių tyrimų ir technologinės plėtros proceso aspektams ar net individualiems su mokslinių tyrimų veikla susijusiems subjektams. |
| --- | --- |

—

Priskyrimo problemos. Priskyrimo problemos iškyla atliekant vertinimus ir nustatant veiklos rezultatus. Jos glaudžiai susijusios su „papildomumo“ klausimu, kuriuo klausiama, ar pokyčiai nebūtų vis vien įvykę. Rezultatų priskyrimo konkrečiai viešajai intervencijai sudėtingumą taip pat sąlygoja daugelis išorės veiksnių (pvz., kitų politikos krypčių ar programų padariniai, teisinės sistemos pakeitimai, pokyčiai visuomenėje ir t. t.). Be to, mokslinių tyrimų srityje nepasiekti laukiamų rezultatų taip pat gali reikšti sėkmę. Viską dar labiau komplikuoja akivaizdus sunkumas aiškiai priskirti mokslinių tyrimų išdirbius, o ką jau kalbėti apie išdavas ir poveikius, konkretiems mokslinių tyrimų ir technologinės plėtros proceso aspektams ar net individualiems su mokslinių tyrimų veikla susijusiems subjektams.

| — | Vertinimo problemos







  — | Galimybė pasinaudoti duomenimis. Apskritai kalbant, dauguma duomenų, kuriais galima pasinaudoti, visų pirma duomenų, kurie buvo surinkti pasitelkus stebėsenos sistemas, yra susiję su mokslinių tyrimų ir technologinės plėtros sąnaudomis ir išdirbiais, o ne su išdavomis ar poveikiais. |
| --- | --- | --- |

—

Vertinimo problemos

—

Galimybė pasinaudoti duomenimis. Apskritai kalbant, dauguma duomenų, kuriais galima pasinaudoti, visų pirma duomenų, kurie buvo surinkti pasitelkus stebėsenos sistemas, yra susiję su mokslinių tyrimų ir technologinės plėtros sąnaudomis ir išdirbiais, o ne su išdavomis ar poveikiais.

| — | Dinamikos supratimas. Dėl to, kad akivaizdžiai sudėtinga sudaryti sąnaudų ir išdirbių priežastinių ryšių modelius, neaišku, koks yra vidinis mokslinių tyrimų proceso mechanizmas. Jei nėra akivaizdžios intervencijos logikos, pats procesas dažniausiai laikomas „juodąja dėže“. |
| --- | --- |

—

Dinamikos supratimas. Dėl to, kad akivaizdžiai sudėtinga sudaryti sąnaudų ir išdirbių priežastinių ryšių modelius, neaišku, koks yra vidinis mokslinių tyrimų proceso mechanizmas. Jei nėra akivaizdžios intervencijos logikos, pats procesas dažniausiai laikomas „juodąja dėže“.

| — | Rezultatų palyginamumas. Skirtingų mokslo sričių rezultatų lyginimas yra ribotas, todėl paprastai jie turėtų būti aiškinami specialiųjų programų ir paprogramių kontekste. Be to, sunkiau vertinti fundamentaliųjų mokslinių tyrimų nei taikomųjų tyrimų ar technologinės plėtros rezultatus. Pagrindinė priežastis yra ta, kad fundamentaliuosius tyrimus paprastai sudaro unikalios procedūros, kurių neįmanoma atlikti dar kartą. Net taikomųjų mokslinių tyrimų srityje rezultatai labai skiriasi ir todėl jų negalima lengvai palyginti. |
| --- | --- |

—

Rezultatų palyginamumas. Skirtingų mokslo sričių rezultatų lyginimas yra ribotas, todėl paprastai jie turėtų būti aiškinami specialiųjų programų ir paprogramių kontekste. Be to, sunkiau vertinti fundamentaliųjų mokslinių tyrimų nei taikomųjų tyrimų ar technologinės plėtros rezultatus. Pagrindinė priežastis yra ta, kad fundamentaliuosius tyrimus paprastai sudaro unikalios procedūros, kurių neįmanoma atlikti dar kartą. Net taikomųjų mokslinių tyrimų srityje rezultatai labai skiriasi ir todėl jų negalima lengvai palyginti.

| — | Agregavimas. iškyla sunkumų darant sekančio aukštesnio lygio išvadas dėl žemesniame lygyje gautų vertinimo rezultatų išdirbių, išdavų ir poveikių prasme (pavyzdžiui, sujungiant į visumą projektų rezultatus, visų pirma projektų grupių, tada programos sričių ir galiausiai pačios programos lygmenyje). |
| --- | --- |

—

Agregavimas. iškyla sunkumų darant sekančio aukštesnio lygio išvadas dėl žemesniame lygyje gautų vertinimo rezultatų išdirbių, išdavų ir poveikių prasme (pavyzdžiui, sujungiant į visumą projektų rezultatus, visų pirma projektų grupių, tada programos sričių ir galiausiai pačios programos lygmenyje).

| — | Rodiklių adekvatumas. Kitas klausimas yra tai, ar vertintojai vertina tai, ką reikia vertinti. Matų sistema turi būti paprasta vertinti, sudėtinga manipuliuoti, be to, ji turi veikti teisingai. Tačiau „išmatuojamas“ išdirbių rodiklis nebūtinai leidžia daryti išvadas dėl išdavų ir poveikių. |
| --- | --- |

—

Rodiklių adekvatumas. Kitas klausimas yra tai, ar vertintojai vertina tai, ką reikia vertinti. Matų sistema turi būti paprasta vertinti, sudėtinga manipuliuoti, be to, ji turi veikti teisingai. Tačiau „išmatuojamas“ išdirbių rodiklis nebūtinai leidžia daryti išvadas dėl išdavų ir poveikių.

| — | Laiko apskaičiavimo problemos. Kita kliūtis – didelis laiko skirtumas nuo mokslinių tyrimų veiklos iki išdirbių ir išdavų susiformavimo siekiant įvertinti poveikį. Duomenys turi būti renkami ilgą laiką, kad būtų galima daryti prasmingas ir solidžias išvadas. Tokie vertinimui skirti laikotarpiai dažnai neatitinka politikos formuotojų lūkesčių ir poreikių, todėl reikia suderinti ankstyvą politikos formuotojų informavimą ir tinkamą laikotarpį, per kurį gaunami rezultatai. |
| --- | --- |

—

Laiko apskaičiavimo problemos. Kita kliūtis – didelis laiko skirtumas nuo mokslinių tyrimų veiklos iki išdirbių ir išdavų susiformavimo siekiant įvertinti poveikį. Duomenys turi būti renkami ilgą laiką, kad būtų galima daryti prasmingas ir solidžias išvadas. Tokie vertinimui skirti laikotarpiai dažnai neatitinka politikos formuotojų lūkesčių ir poreikių, todėl reikia suderinti ankstyvą politikos formuotojų informavimą ir tinkamą laikotarpį, per kurį gaunami rezultatai.

| — | Projekto apgaulingumas. Vertinant atskirų tam tikros programos projektų išdavas ir poveikius, reikia atsižvelgti į faktą, kad technologiniai ir moksliniai rezultatai dažniausiai gaunami pasinaudojus anksčiau atlikto darbo rezultatais. Prieš paskelbiant ir panaudojant mokslinius rezultatus, dalyvis taip pat gali panaudoti projektų rezultatus kitam darbui. Todėl pats projektas nebūtinai yra tinkama vertinimo sistema, ypač vertinant ilgalaikes išdavas ir poveikius. |
| --- | --- |

—

Projekto apgaulingumas. Vertinant atskirų tam tikros programos projektų išdavas ir poveikius, reikia atsižvelgti į faktą, kad technologiniai ir moksliniai rezultatai dažniausiai gaunami pasinaudojus anksčiau atlikto darbo rezultatais. Prieš paskelbiant ir panaudojant mokslinius rezultatus, dalyvis taip pat gali panaudoti projektų rezultatus kitam darbui. Todėl pats projektas nebūtinai yra tinkama vertinimo sistema, ypač vertinant ilgalaikes išdavas ir poveikius.

| — | Patikimumas, vientisumas ir nepriklausomumas. Vertinimo kokybė didžia dalimi priklauso nuo to, kiek vertintojai yra susidomėję nagrinėjamu dalyku, sudarant balansą tarp, viena vertus, supratimo ir profesinės patirties, kita vertus, – nepriklausomumo ir objektyvumo. Tai taip pat priklauso nuo politikos formuotojų prielaidų ir interesų bei vertinimo loginio pagrindo ir tikslų. |
| --- | --- |

—

Patikimumas, vientisumas ir nepriklausomumas. Vertinimo kokybė didžia dalimi priklauso nuo to, kiek vertintojai yra susidomėję nagrinėjamu dalyku, sudarant balansą tarp, viena vertus, supratimo ir profesinės patirties, kita vertus, – nepriklausomumo ir objektyvumo. Tai taip pat priklauso nuo politikos formuotojų prielaidų ir interesų bei vertinimo loginio pagrindo ir tikslų.

---

II PRIEDAS

BP4–BP7 TEISĖKŪROS SPRENDIMŲ NUOSTATOS DĖL STEBĖSENOS IR VERTINIMO

| BP4 (1995–1998 m.)
   (1) | BP5 (1999–2002 m.)
   (2) | BP6 (2003–2006 m.)
   (3) | BP7 (2007–2013 m.)
   (4) |
| --- | --- | --- | --- |
| Sprendimas dėl bendrosios programos – Taryba ir EP |
| 1994 m. balandžio 26 d. Europos Parlamento ir Tarybos sprendimo Nr. 1110/94/EB dėl mokslinių tyrimų, technologinės plėtros ir demonstracinės veiklos ketvirtosios bendrosios programos (1994–1998 m.) 4 straipsnis | 1998 m. gruodžio 22 d. Europos Parlamento ir Tarybos sprendimo Nr. 182/1999/EB dėl Europos bendrijos mokslinių tyrimų, technologinės plėtros ir demonstracinės veiklos penktosios bendrosios programos (1998–2002 m.) 5 ir 6 straipsniai | 2002 m. birželio 27 d. Europos Parlamento ir Tarybos sprendimo 1513/2002/EB dėl Europos bendrijos šeštosios pamatinės mokslinių tyrimų, technologijų plėtros ir demonstravimo veiklos programos, prisidedančios prie Europos mokslinių tyrimų srities kūrimo ir naujovių (2002–2006 m.) 20-oji konstatuojamoji dalis, 4 ir 6 straipsniai, III priedas | 2006 m. gruodžio 18 d. Europos Parlamento ir Tarybos sprendimo Nr. 1982/2006/EB dėl Europos bendrijos mokslinių tyrimų, technologinės plėtros ir demonstracinės veiklos septintosios bendrosios programos (2007–2013 m.) 7 straipsnis |
| Stebėsena |
| — | pasitelkus nepriklausomus išorės ekspertus, nuolat ir sistemingai stebėti, kokios pažangos yra pasiekta lyginant su pradiniais tikslais (4 straipsnio 1 dalis) |

BP4 (1995–1998 m.)
   (1)

BP5 (1999–2002 m.)
   (2)

BP6 (2003–2006 m.)
   (3)

BP7 (2007–2013 m.)
   (4)

Sprendimas dėl bendrosios programos – Taryba ir EP

1994 m. balandžio 26 d. Europos Parlamento ir Tarybos sprendimo Nr. 1110/94/EB dėl mokslinių tyrimų, technologinės plėtros ir demonstracinės veiklos ketvirtosios bendrosios programos (1994–1998 m.) 4 straipsnis

1998 m. gruodžio 22 d. Europos Parlamento ir Tarybos sprendimo Nr. 182/1999/EB dėl Europos bendrijos mokslinių tyrimų, technologinės plėtros ir demonstracinės veiklos penktosios bendrosios programos (1998–2002 m.) 5 ir 6 straipsniai

2002 m. birželio 27 d. Europos Parlamento ir Tarybos sprendimo 1513/2002/EB dėl Europos bendrijos šeštosios pamatinės mokslinių tyrimų, technologijų plėtros ir demonstravimo veiklos programos, prisidedančios prie Europos mokslinių tyrimų srities kūrimo ir naujovių (2002–2006 m.) 20-oji konstatuojamoji dalis, 4 ir 6 straipsniai, III priedas

2006 m. gruodžio 18 d. Europos Parlamento ir Tarybos sprendimo Nr. 1982/2006/EB dėl Europos bendrijos mokslinių tyrimų, technologinės plėtros ir demonstracinės veiklos septintosios bendrosios programos (2007–2013 m.) 7 straipsnis

Stebėsena

—

pasitelkus nepriklausomus išorės ekspertus, nuolat ir sistemingai stebėti, kokios pažangos yra pasiekta lyginant su pradiniais tikslais (4 straipsnio 1 dalis)

| — | pasitelkus nepriklausomus kvalifikuotus ekspertus, kasmet nuolat ir sistemingai stebėti bendrosios programos ir jos specialiųjų programų įgyvendinimą, vadovaujantis kriterijais, nurodytais I priede ir mokslo bei technologijų tikslais, išdėstytais II priede (5 straipsnio 1 dalis) |
| --- | --- |

—

pasitelkus nepriklausomus kvalifikuotus ekspertus, kasmet nuolat ir sistemingai stebėti bendrosios programos ir jos specialiųjų programų įgyvendinimą, vadovaujantis kriterijais, nurodytais I priede ir mokslo bei technologijų tikslais, išdėstytais II priede (5 straipsnio 1 dalis)

| — | nuolat ir sistemingai stebėti, padedant nepriklausomiems kvalifikuotiems ekspertams, [kiekvienais metais] pamatinės programos ir jos konkrečių programų įgyvendinimą (4 straipsnis ir 6 straipsnio 1 dalis) |
| --- | --- |

—

nuolat ir sistemingai stebėti, padedant nepriklausomiems kvalifikuotiems ekspertams, [kiekvienais metais] pamatinės programos ir jos konkrečių programų įgyvendinimą (4 straipsnis ir 6 straipsnio 1 dalis)

| — | nuolat ir sistemingai stebėti, kaip įgyvendinama bendroji programa ir jos specialiosios programos (7 straipsnio 1 dalis) |
| --- | --- |

—

nuolat ir sistemingai stebėti, kaip įgyvendinama bendroji programa ir jos specialiosios programos (7 straipsnio 1 dalis)

| — | vertinti, ar tikslai, prioritetai ir finansiniai ištekliai vis dar atitinka besikeičiančią situaciją, o jei taip nėra, – teikti pasiūlymus, kaip pakeisti ar papildyti bendrąją programą ir (arba) specialiąsias programas (5 straipsnio 1 dalis) |
| --- | --- |

—

vertinti, ar tikslai, prioritetai ir finansiniai ištekliai vis dar atitinka besikeičiančią situaciją, o jei taip nėra, – teikti pasiūlymus, kaip pakeisti ar papildyti bendrąją programą ir (arba) specialiąsias programas (5 straipsnio 1 dalis)

| — | reguliariai tikrinti visą mokslinių tyrimų veiklą, visų pirma apimant mokslinės kompetencijos kontrolę (III priedas, 1. Instrumentai) |
| --- | --- |

—

reguliariai tikrinti visą mokslinių tyrimų veiklą, visų pirma apimant mokslinės kompetencijos kontrolę (III priedas, 1. Instrumentai)

| — | reguliariai pranešti apie šios stebėsenos rezultatus ir juos platinti (7 straipsnio 1 dalis) |
| --- | --- |

—

reguliariai pranešti apie šios stebėsenos rezultatus ir juos platinti (7 straipsnio 1 dalis)

173 straipsnis – Metinė ataskaita

| — | pateikti išsamią ataskaitą apie pasiekimus įgyvendinant pamatinę programą, ypač siekiant jos tikslų ir patenkinant prioritetus, kaip išdėstyta kiekvienoje I priedo antraštinėje dalyje, įskaitant informaciją apie finansinius aspektus ir instrumentų naudojimą metininio Komisijos pranešimo, pateikiamo pagal Sutarties 173 straipsnį, kontekste (4 straipsnis) |
| --- | --- |

—

pateikti išsamią ataskaitą apie pasiekimus įgyvendinant pamatinę programą, ypač siekiant jos tikslų ir patenkinant prioritetus, kaip išdėstyta kiekvienoje I priedo antraštinėje dalyje, įskaitant informaciją apie finansinius aspektus ir instrumentų naudojimą metininio Komisijos pranešimo, pateikiamo pagal Sutarties 173 straipsnį, kontekste (4 straipsnis)

Tarpinis įvertinimas

| — | peržiūrėti programos įgyvendinimą praėjus pusei bendrajai programai įgyvendinti skirto laiko (6 straipsnis) |
| --- | --- |

—

peržiūrėti programos įgyvendinimą praėjus pusei bendrajai programai įgyvendinti skirto laiko (6 straipsnis)

| — | pateikti Europos Parlamentui ir Tarybai pranešimą, paremtą įvairių specialiųjų programų įvertinimu, ir, jei reikia, pasiūlymą dėl šio sprendimo pritaikymo (6 straipsnis) |
| --- | --- |

—

pateikti Europos Parlamentui ir Tarybai pranešimą, paremtą įvairių specialiųjų programų įvertinimu, ir, jei reikia, pasiūlymą dėl šio sprendimo pritaikymo (6 straipsnis)

| — | ne vėliau kaip 2010 m., padedant išorės ekspertams, atlikti įrodymais pagrįstą tarpinį šios bendrosios programos ir jos specialiųjų programų įvertinimą, remiantis ankstesnės bendrosios programos ex-post vertinimu. Visų pirma šiame įvertinime nagrinėjama vykdomos mokslinių tyrimų veiklos kokybė, taip pat įgyvendinimo ir valdymo kokybė bei pažanga siekiant nustatytų tikslų (7 straipsnio 2 dalis) |
| --- | --- |

—

ne vėliau kaip 2010 m., padedant išorės ekspertams, atlikti įrodymais pagrįstą tarpinį šios bendrosios programos ir jos specialiųjų programų įvertinimą, remiantis ankstesnės bendrosios programos ex-post vertinimu. Visų pirma šiame įvertinime nagrinėjama vykdomos mokslinių tyrimų veiklos kokybė, taip pat įgyvendinimo ir valdymo kokybė bei pažanga siekiant nustatytų tikslų (7 straipsnio 2 dalis)

| — | įvertinimo išvadas ir savo pastabas, taip pat, prireikus, pasiūlymus dėl šios bendrosios programos patikslinimo pateikti Europos Parlamentui, Tarybai, Europos ekonomikos ir socialinių reikalų komitetui bei Regionų komitetui (7 straipsnio 2 dalis) |
| --- | --- |

—

įvertinimo išvadas ir savo pastabas, taip pat, prireikus, pasiūlymus dėl šios bendrosios programos patikslinimo pateikti Europos Parlamentui, Tarybai, Europos ekonomikos ir socialinių reikalų komitetui bei Regionų komitetui (7 straipsnio 2 dalis)

| — | reguliariai informuoti Europos Parlamentą ir Tarybą apie bendrą pažangą, pasiektą įgyvendinant bendrąją programą ir specialiąsias programas (5 straipsnio 4 dalis) |
| --- | --- |

—

reguliariai informuoti Europos Parlamentą ir Tarybą apie bendrą pažangą, pasiektą įgyvendinant bendrąją programą ir specialiąsias programas (5 straipsnio 4 dalis)

| — | pateikti Europos Parlamentui ir Tarybai nuolatines pažangos ataskaitas dėl pamatinės programos įgyvendinimo (20-oji konstatuojamoji dalis) |
| --- | --- |

—

pateikti Europos Parlamentui ir Tarybai nuolatines pažangos ataskaitas dėl pamatinės programos įgyvendinimo (20-oji konstatuojamoji dalis)

| — | (prieš tarpinį įvertinimą), kai tik gaunama pakankamai duomenų, pateikti pažangos ataskaitą, kurioje išdėstomi pirminiai duomenys apie pagal Septintąją bendrąją programą inicijuotų naujų veiksmų veiksmingumą ir supaprastinimui skirtas pastangas (7 straipsnio 2 dalis) |
| --- | --- |

—

(prieš tarpinį įvertinimą), kai tik gaunama pakankamai duomenų, pateikti pažangos ataskaitą, kurioje išdėstomi pirminiai duomenys apie pagal Septintąją bendrąją programą inicijuotų naujų veiksmų veiksmingumą ir supaprastinimui skirtas pastangas (7 straipsnio 2 dalis)

| — | pasitelkus nepriklausomus ekspertus 2004 metais
  atlikti kiekvieno iš šių trijų instrumentų veiksmingumo vykdant šią programą įvertinimą (III priedas, 1. Instrumentai) |
| --- | --- |

—

pasitelkus nepriklausomus ekspertus 2004 metais
  atlikti kiekvieno iš šių trijų instrumentų veiksmingumo vykdant šią programą įvertinimą (III priedas, 1. Instrumentai)

Penkerių metų laikotarpio įvertinimas

| — | pasitelkus nepriklausomus kvalifikuotus ekspertus, atlikti išorinį programos valdymo ir praėjusių penkerių metų Bendrijos veiklos bei pažangos įvertinimą (4 straipsnio 2 dalis) |
| --- | --- |

—

pasitelkus nepriklausomus kvalifikuotus ekspertus, atlikti išorinį programos valdymo ir praėjusių penkerių metų Bendrijos veiklos bei pažangos įvertinimą (4 straipsnio 2 dalis)

| — | pasitelkus nepriklausomus aukštos kvalifikacijos ekspertus, atlikti išorinį programos įgyvendinimo ir praėjusių penkerių metų Bendrijos veiklos bei pasiekimų įvertinimą pagal kriterijus, išdėstytus I priede ir atsižvelgiant į mokslo ir technologijų tikslus, numatytus II priede (5 straipsnio 2 dalis) |
| --- | --- |

—

pasitelkus nepriklausomus aukštos kvalifikacijos ekspertus, atlikti išorinį programos įgyvendinimo ir praėjusių penkerių metų Bendrijos veiklos bei pasiekimų įvertinimą pagal kriterijus, išdėstytus I priede ir atsižvelgiant į mokslo ir technologijų tikslus, numatytus II priede (5 straipsnio 2 dalis)

| — | pasitelkus nepriklausomus aukštos kvalifikacijos ekspertus, atlikti išorinį programos įgyvendinimo ir praėjusių penkerių metų Bendrijos veiklos bei pasiekimų įvertinimą (6 straipsnio 2 dalis) (ir, atitinkamai, veiklos įgyvendinimo įvertinimą, turint omenyje šeštosios pamatinės programos indėlį į Europos mokslinių tyrimų srities kūrimą (20-oji konstatuojamoji dalis)) |
| --- | --- |

—

pasitelkus nepriklausomus aukštos kvalifikacijos ekspertus, atlikti išorinį programos įgyvendinimo ir praėjusių penkerių metų Bendrijos veiklos bei pasiekimų įvertinimą (6 straipsnio 2 dalis) (ir, atitinkamai, veiklos įgyvendinimo įvertinimą, turint omenyje šeštosios pamatinės programos indėlį į Europos mokslinių tyrimų srities kūrimą (20-oji konstatuojamoji dalis))

| — | įvertinimą, kartu su Komisijos pastabomis, pateikti Europos Parlamentui, Tarybai, Ekonomikos ir socialinių reikalų komitetui prieš pateikiant pasiūlymą kitai bendrajai programai (4 straipsnio 2 dalis) |
| --- | --- |

—

įvertinimą, kartu su Komisijos pastabomis, pateikti Europos Parlamentui, Tarybai, Ekonomikos ir socialinių reikalų komitetui prieš pateikiant pasiūlymą kitai bendrajai programai (4 straipsnio 2 dalis)

| — | įvertinimą, kartu su Komisijos pastabomis, pateikti Europos Parlamentui, Tarybai, Ekonomikos ir socialinių reikalų bei Regionų komitetams prieš pateikiant pasiūlymą kitai bendrajai programai (5 straipsnio 2 dalis) |
| --- | --- |

—

įvertinimą, kartu su Komisijos pastabomis, pateikti Europos Parlamentui, Tarybai, Ekonomikos ir socialinių reikalų bei Regionų komitetams prieš pateikiant pasiūlymą kitai bendrajai programai (5 straipsnio 2 dalis)

| — | šio įvertinimo išvadas, kartu su Komisijos pastabomis, pateikti Europos Parlamentui, Tarybai, Ekonomikos ir socialinių reikalų bei Regionų komitetams (6 straipsnio 2 dalis) tinkamu laiku ir prieš pateikiant savo pasiūlymą kitai pamatinei programai (20-oji konstatuojamoji dalis) |
| --- | --- |

—

šio įvertinimo išvadas, kartu su Komisijos pastabomis, pateikti Europos Parlamentui, Tarybai, Ekonomikos ir socialinių reikalų bei Regionų komitetams (6 straipsnio 2 dalis) tinkamu laiku ir prieš pateikiant savo pasiūlymą kitai pamatinei programai (20-oji konstatuojamoji dalis)

Galutinis įvertinimas

(žr. Sprendimą dėl konkrečios programos)

| — | praėjus dvejiems metams po BP7 programos užbaigimo (t. y. 2015 m.), pasitelkus nepriklausomus ekspertus atlikti jos loginio pagrindo, įgyvendinimo ir pasiekimų išorinį vertinimą (7 straipsnio 3 dalis) |
| --- | --- |

—

praėjus dvejiems metams po BP7 programos užbaigimo (t. y. 2015 m.), pasitelkus nepriklausomus ekspertus atlikti jos loginio pagrindo, įgyvendinimo ir pasiekimų išorinį vertinimą (7 straipsnio 3 dalis)

| — | įvertinimo išvadas ir savo pastabas pateikti Europos Parlamentui, Tarybai, Europos ekonomikos ir socialinių reikalų komitetui bei Regionų komitetui (7 straipsnio 3 dalis) |
| --- | --- |

—

įvertinimo išvadas ir savo pastabas pateikti Europos Parlamentui, Tarybai, Europos ekonomikos ir socialinių reikalų komitetui bei Regionų komitetui (7 straipsnio 3 dalis)

Nepriklausomi ekspertai

| — | užtikrinti, kad atrenkant nepriklausomus ekspertus, būtų proporcingai atsižvelgta į skirtingas mokslo, pramonės ir vartotojų bendruomenes, ir kad ekspertų pavardės ir atitinkamos kvalifikacijos būtų paskelbtos po jų paskyrimo (5 straipsnio 3 dalis)
  [kai dėl papildomų nuostatų, susijusių su nepriklausomais ekspertais, žr. Tarybos sprendimo 1999/65/EB 9 straipsnį] |
| --- | --- |

—

užtikrinti, kad atrenkant nepriklausomus ekspertus, būtų proporcingai atsižvelgta į skirtingas mokslo, pramonės ir vartotojų bendruomenes, ir kad ekspertų pavardės ir atitinkamos kvalifikacijos būtų paskelbtos po jų paskyrimo (5 straipsnio 3 dalis)

[kai dėl papildomų nuostatų, susijusių su nepriklausomais ekspertais, žr. Tarybos sprendimo 1999/65/EB 9 straipsnį]

| — | Komisija paskiria nepriklausomus ekspertus, kurie padėtų atlikti pagal šeštąją pamatinę programą ir konkrečias programas būtiną vertinimą, taip pat kurie suteiktų 10 straipsnio 6 dalyje ir 18 straipsnio 1 dalies antroje pastraipoje nurodytą pagalbą. |
| --- | --- |

—

Komisija paskiria nepriklausomus ekspertus, kurie padėtų atlikti pagal šeštąją pamatinę programą ir konkrečias programas būtiną vertinimą, taip pat kurie suteiktų 10 straipsnio 6 dalyje ir 18 straipsnio 1 dalies antroje pastraipoje nurodytą pagalbą.

| — | Be to, ji gali kurti nepriklausomų ekspertų, kurie teiktų patarimus dėl Bendrijos mokslinių tyrimų politikos įgyvendinimo, grupes. |
| --- | --- |

—

Be to, ji gali kurti nepriklausomų ekspertų, kurie teiktų patarimus dėl Bendrijos mokslinių tyrimų politikos įgyvendinimo, grupes.

| — | (kai dėl nuostatų, susijusių su nepriklausomais ekspertais, žr. Reglamento (EB) Nr. 2321/2002 11 straipsnį) |
| --- | --- |

—

(kai dėl nuostatų, susijusių su nepriklausomais ekspertais, žr. Reglamento (EB) Nr. 2321/2002 11 straipsnį)

Vieno sprendimo dėl konkrečios programos pavyzdys – Taryba

1994 m. lapkričio 23 d.Tarybos sprendimo 94/801/EB
  4 straipsnis

1999 m. sausio 25 d.Tarybos sprendimo 1999/168/EB
  4 ir 6 straipsniai

2002 m. rugsėjo 30 d.Tarybos sprendimų 2002/834/EB ir 2002/835/EB
  8 straipsnis

2006 m. gruodžio 19 d.Tarybos sprendimo
  2006/971/EB dėl specialiosios programos „Bendradarbiavimas“8 straipsnis

Stebėsena

| — | pasitelkus nepriklausomų išorės ekspertų pagalbą nuolat ir sistemingai stebėti, kokios pažangos yra pasiekta vykdant programą (4 straipsnio 1 dalis) |
| --- | --- |

—

pasitelkus nepriklausomų išorės ekspertų pagalbą nuolat ir sistemingai stebėti, kokios pažangos yra pasiekta vykdant programą (4 straipsnio 1 dalis)

| — | pasitelkus nepriklausomų išorės ekspertų pagalbą stebėti specialiosios programos įgyvendinimą ir, prireikus, teikti pasiūlymus Tarybai dėl jos patikslinimo pagal BP5 Sprendimo 5 straipsnio 1 dalį (4 straipsnio a punktas) |
| --- | --- |

—

pasitelkus nepriklausomų išorės ekspertų pagalbą stebėti specialiosios programos įgyvendinimą ir, prireikus, teikti pasiūlymus Tarybai dėl jos patikslinimo pagal BP5 Sprendimo 5 straipsnio 1 dalį (4 straipsnio a punktas)

| — | imtis priemonių, kad būtų atlikta nepriklausoma veiklos, kurią apima konkreti programa, kontrolė ir įvertinimas, nurodyti šeštosios pagrindų programos 6 straipsnyje (8 straipsnio 2 dalis) |
| --- | --- |

—

imtis priemonių, kad būtų atlikta nepriklausoma veiklos, kurią apima konkreti programa, kontrolė ir įvertinimas, nurodyti šeštosios pagrindų programos 6 straipsnyje (8 straipsnio 2 dalis)

| — | pasirūpinti Bendrosios programos 7 straipsnyje numatyta nepriklausoma specialiosios programos srityse vykdomos veiklos stebėsena, įvertinimu ir peržiūra. (9 straipsnis) |
| --- | --- |

—

pasirūpinti Bendrosios programos 7 straipsnyje numatyta nepriklausoma specialiosios programos srityse vykdomos veiklos stebėsena, įvertinimu ir peržiūra. (9 straipsnis)

| — | Komisijos Programos komitetui pagal 8 straipsnio 4 dalį turima pateikti stebėsenos informacija yra nurodyta V priede. |
| --- | --- |

—

Komisijos Programos komitetui pagal 8 straipsnio 4 dalį turima pateikti stebėsenos informacija yra nurodyta V priede.

173 straipsnis – Metinė ataskaita

| — | pagal BP6 Sprendimo 4 straipsnį reguliariai pranešti apie konkrečios programos įgyvendinimą, įskaitant informaciją apie finansinius aspektus ir instrumentų naudojimą (8 straipsnio 1 dalis) |
| --- | --- |

—

pagal BP6 Sprendimo 4 straipsnį reguliariai pranešti apie konkrečios programos įgyvendinimą, įskaitant informaciją apie finansinius aspektus ir instrumentų naudojimą (8 straipsnio 1 dalis)

| — | svarbiausius [su rizikos pasidalijimo finansine priemone susijusius] įvertinimo rezultatus įtraukti į metinį mokslinių tyrimų ir technologinės plėtros veiklos pranešimą, kurį ji pateiks Europos Parlamentui ir Tarybai pagal Sutarties 173 straipsnį (III priedas). |
| --- | --- |

—

svarbiausius [su rizikos pasidalijimo finansine priemone susijusius] įvertinimo rezultatus įtraukti į metinį mokslinių tyrimų ir technologinės plėtros veiklos pranešimą, kurį ji pateiks Europos Parlamentui ir Tarybai pagal Sutarties 173 straipsnį (III priedas).

Penkerių metų laikotarpio įvertinimas

| — | pasitelkus nepriklausomus kvalifikuotus ekspertus, atlikti išorinį programos srityse vykdomos veiklos praėjusių penkerių metų valdymo įvertinimą (4 straipsnio 2 dalis) |
| --- | --- |

—

pasitelkus nepriklausomus kvalifikuotus ekspertus, atlikti išorinį programos srityse vykdomos veiklos praėjusių penkerių metų valdymo įvertinimą (4 straipsnio 2 dalis)

| — | pasirūpinti BP5 Sprendimo 5 straipsnio 2 dalyje numatytu specialiosios programos srityse vykdomos veiklos išoriniu vertinimu (4 straipsnio b punktas) |
| --- | --- |

—

pasirūpinti BP5 Sprendimo 5 straipsnio 2 dalyje numatytu specialiosios programos srityse vykdomos veiklos išoriniu vertinimu (4 straipsnio b punktas)

Galutinis įvertinimas

| — | užbaigus kiekvieną konkrečią programą pateikti nepriklausomą rezultatų, pasiektų lyginant su tikslais, galutinį įvertinimą (4 straipsnio 3 dalis) |
| --- | --- |

—

užbaigus kiekvieną konkrečią programą pateikti nepriklausomą rezultatų, pasiektų lyginant su tikslais, galutinį įvertinimą (4 straipsnio 3 dalis)

| — | pateikti šį įvertinimą Europos Parlamentui, Tarybai bei Ekonomikos ir socialinių reikalų komitetui (4 straipsnio 3 dalis) |
| --- | --- |

—

pateikti šį įvertinimą Europos Parlamentui, Tarybai bei Ekonomikos ir socialinių reikalų komitetui (4 straipsnio 3 dalis)

Nepriklausomi ekspertai

| — | sudaryti BP5 Sprendimo 5 straipsnio 2 dalyje numatyto išorinio vertinimo technines užduotis (6 straipsnio 2 dalis) |
| --- | --- |

—

sudaryti BP5 Sprendimo 5 straipsnio 2 dalyje numatyto išorinio vertinimo technines užduotis (6 straipsnio 2 dalis)

Svarbiausia informacija apie bendrosios programos struktūrą

| — | BP4 (EB): 7 konkrečios programos, kurias sudaro 17 paprogramių, taip pat dvi veiklos rūšys |
| --- | --- |

—

BP4 (EB): 7 konkrečios programos, kurias sudaro 17 paprogramių, taip pat dvi veiklos rūšys

| — | BP5 (EB): 7 specialiosios programos, iš kurių 4 yra teminės programos, o 3 – horizontalios programos |
| --- | --- |

—

BP5 (EB): 7 specialiosios programos, iš kurių 4 yra teminės programos, o 3 – horizontalios programos

| — | BP6 (EB): 20 programų, iš kurių 10 yra pergrupuotos pagal 7 teminius prioritetus, ir 4 programos, susijusios su horizontaliomis mokslinių tyrimų veiklos sritimis, specialiojoje programoje „Bendrijos mokslinių tyrimų integravimas ir stiprinimas“. Specialiąją programą „Europos mokslinių tyrimų srities formavimas“ sudaro 4 programos, o specialiąją programą „Europos mokslinių tyrimų srities pagrindų stiprinimas“ – 2 konkrečios programos |
| --- | --- |

—

BP6 (EB): 20 programų, iš kurių 10 yra pergrupuotos pagal 7 teminius prioritetus, ir 4 programos, susijusios su horizontaliomis mokslinių tyrimų veiklos sritimis, specialiojoje programoje „Bendrijos mokslinių tyrimų integravimas ir stiprinimas“. Specialiąją programą „Europos mokslinių tyrimų srities formavimas“ sudaro 4 programos, o specialiąją programą „Europos mokslinių tyrimų srities pagrindų stiprinimas“ – 2 konkrečios programos

| — | BP7 (EB): 24 specialiosios paprogramės, iš kurių 10 yra pergrupuotos į specialiąją programą „Bendradarbiavimas“, viena yra susijusi su specialiąja programa „Idėjos“, 5 paprogramės susijusios su specialiąja programa „Žmonės“, o 8 paprogramės – su specialiąja programa „Pajėgumai“ (viena jų yra skirta Jungtinio tyrimų centro nebranduolinei veiklai) |
| --- | --- |

—

BP7 (EB): 24 specialiosios paprogramės, iš kurių 10 yra pergrupuotos į specialiąją programą „Bendradarbiavimas“, viena yra susijusi su specialiąja programa „Idėjos“, 5 paprogramės susijusios su specialiąja programa „Žmonės“, o 8 paprogramės – su specialiąja programa „Pajėgumai“ (viena jų yra skirta Jungtinio tyrimų centro nebranduolinei veiklai)

| — | Bendras biudžetas (EB): 11 046 milijonų eurų (t. y. 2 761 milijonų eurų kasmet) |
| --- | --- |

—

Bendras biudžetas (EB): 11 046 milijonų eurų (t. y. 2 761 milijonų eurų kasmet)

| — | Bendras biudžetas (EB): 13 700 milijonų eurų (t. y. 3 425 milijonų eurų kasmet; +24 %) |
| --- | --- |

—

Bendras biudžetas (EB): 13 700 milijonų eurų (t. y. 3 425 milijonų eurų kasmet; +24 %)

| — | Bendras biudžetas (EB): 16 270 milijonų eurų (t. y. 4 061 milijonų eurų kasmet; +19 %), kuris Europos Sąjungai išsiplėtus iki 25 valstybių narių padidėjo |
| --- | --- |

—

Bendras biudžetas (EB): 16 270 milijonų eurų (t. y. 4 061 milijonų eurų kasmet; +19 %), kuris Europos Sąjungai išsiplėtus iki 25 valstybių narių padidėjo

| — | Bendras biudžetas (EB): 17 883 milijonų eurų (t. y. 4 447 milijonų eurų kasmet; +10 %) |
| --- | --- |

—

Bendras biudžetas (EB): 17 883 milijonų eurų (t. y. 4 447 milijonų eurų kasmet; +10 %)

| — | Bendras biudžetas (EB): 50 521 milijonų eurų (t. y. 7 217 milijonų eurų kasmet.; +62 %) |
| --- | --- |

—

Bendras biudžetas (EB): 50 521 milijonų eurų (t. y. 7 217 milijonų eurų kasmet.; +62 %)

| — | 7 generaliniai direktoratai: Mokslinių tyrimų, Informacinės visuomenės ir žiniasklaidos, Energetikos ir transporto, Žuvininkystės, Žemės ūkio ir Įmonių generaliniai direktoratai |
| --- | --- |

—

7 generaliniai direktoratai: Mokslinių tyrimų, Informacinės visuomenės ir žiniasklaidos, Energetikos ir transporto, Žuvininkystės, Žemės ūkio ir Įmonių generaliniai direktoratai

| — | 5 generaliniai direktoratai: Mokslinių tyrimų, Informacinės visuomenės ir žiniasklaidos, Energetikos ir transporto, Žuvininkystės, Įmonių generaliniai direktoratai |
| --- | --- |

—

5 generaliniai direktoratai: Mokslinių tyrimų, Informacinės visuomenės ir žiniasklaidos, Energetikos ir transporto, Žuvininkystės, Įmonių generaliniai direktoratai

| — | 4 generaliniai direktoratai: Mokslinių tyrimų, Informacinės visuomenės ir žiniasklaidos, Energetikos ir transporto, Įmonių generaliniai direktoratai |
| --- | --- |

—

4 generaliniai direktoratai: Mokslinių tyrimų, Informacinės visuomenės ir žiniasklaidos, Energetikos ir transporto, Įmonių generaliniai direktoratai

| — | 5 generaliniai direktoratai: Mokslinių tyrimų, Informacinės visuomenės ir žiniasklaidos, Energetikos ir transporto, Įmonių ir pramonės generaliniai direktoratai, Jungtinis tyrimų centras, be to, Europos mokslinių tyrimų taryba (EMTT) ir vykdomosios įstaigos |
| --- | --- |

—

5 generaliniai direktoratai: Mokslinių tyrimų, Informacinės visuomenės ir žiniasklaidos, Energetikos ir transporto, Įmonių ir pramonės generaliniai direktoratai, Jungtinis tyrimų centras, be to, Europos mokslinių tyrimų taryba (EMTT) ir vykdomosios įstaigos

---

(1)  BP4: Informacijos ir ryšių technologijos (Pažangios ryšių technologijos ir paslaugos (ACTS); Informacijos technologijos (ESPRIT); Telematikos priemonės); Pramonės technologijos (Pramonės ir medžiagų technologijos (BRITE/EURAM); Standartai, matavimai ir tyrimai (SMT)); Aplinka (Aplinka ir klimatas, Jūrų mokslai ir technologijos(MAST III)); Gyvosios gamtos mokslai ir technologijos (Biotechnologija BIOTECH 2), Biomedicina ir sveikata (BIOMED 2), Žemės ūkis ir žuvininkystė (FAIR), Etiniai, teisiniai ir socialiniai aspektai (ELSA)); Energetika (Moksliniai tyrimai ir plėtra (JOULE), Demonstracinė veikla (THERMIE)); Transportas (Transporto mokslinių tyrimų programa), Tiksliniai socialiniai ir ekonominiai moksliniai tyrimai (Targeted Socio-Economic Research (TSER), Europos technologijų vertinimo tinklas (ETAN)); Bendradarbiavimas su trečiosiomis šalimis ir tarptautinėmis organizacijomis (International Cooperation (INCO)); Rezultatų sklaida ir panaudojimas (Naujovių programa); Tyrėjų mokymų ir mobilumo skatinimas (Training and Mobility of Researchers (TMR), Marie Curie mokslinių bendradarbių asociacija).

(2)  BP5: 4 teminės programos (Gyvenimo kokybė ir gyvųjų išteklių valdymas (Quality of Life), (Vartotojui patogi informacinė visuomenė (IST), (Konkurencinis ir tvarus augimas (GROWTH), Energetika, aplinka ir tvarus vystymas (EESD)); 3 horizontalios programos (Bendrijos mokslinių tyrimų tarptautinio vaidmens patvirtinimas (INCO 2), Naujovių rėmimas ir MVĮ dalyvavimo programose skatinimas (Innovation/SMEs), Žmogiškųjų tyrimų potencialo ir socialinės bei ekonominės žinių bazės gerinimas (Improving)).

(3)  BP6:„Bendrijos mokslinių tyrimų integravimas ir stiprinimas“

| — | 7 teminiai prioritetai, apimantys 10 programų: gyvosios gamtos mokslai, genomika ir biotechnologija sveikatai (įskaitant šiuolaikinę genomiką ir jos pritaikymą sveikatos apsaugai, kovą su pagrindinėmis ligomis), informacinės visuomenės technologijos, nanotechnologijos ir nanomokslai, naujų galimybių daugiafunkcinės medžiagos, nauji gamybos procesai ir prietaisai, aeronautika ir kosmosas, maisto kokybė ir sauga, tvarus vystymas, visuotiniai pokyčiai ir ekosistemos (įskaitant subalansuotas energijos sistemas, patikimą sausumos transportą, visuotinį pasikeitimą ir ekosistemas), piliečiai ir valdymas žinių visuomenėje, |
| --- | --- |

—

7 teminiai prioritetai, apimantys 10 programų: gyvosios gamtos mokslai, genomika ir biotechnologija sveikatai (įskaitant šiuolaikinę genomiką ir jos pritaikymą sveikatos apsaugai, kovą su pagrindinėmis ligomis), informacinės visuomenės technologijos, nanotechnologijos ir nanomokslai, naujų galimybių daugiafunkcinės medžiagos, nauji gamybos procesai ir prietaisai, aeronautika ir kosmosas, maisto kokybė ir sauga, tvarus vystymas, visuotiniai pokyčiai ir ekosistemos (įskaitant subalansuotas energijos sistemas, patikimą sausumos transportą, visuotinį pasikeitimą ir ekosistemas), piliečiai ir valdymas žinių visuomenėje,

| — | horizontali mokslinių tyrimų veikla, apimanti platesnę mokslinių tyrimų sritį, kurią sudaro 4 programos: parama politikai ir mokslinių bei technologinių poreikių numatymas, horizontalioji mokslinių tyrimų veikla, apimanti MVĮ, konkrečios priemonės tarptautiniam bendradarbiavimui remti; nebranduolinė Jungtinio tyrimų centro veikla; „Europos mokslinių tyrimų srities formavimas“ – 4 programos: moksliniai tyrimai ir naujovės, žmogiškieji ištekliai, mokslinių tyrimų infrastruktūra, mokslas ir visuomenė „Europos mokslinių tyrimų srities pagrindų stiprinimas“ – 2 programos: parama veiklos koordinavimui, nuoseklaus politikos plėtojimo rėmimas. |
| --- | --- |

—

horizontali mokslinių tyrimų veikla, apimanti platesnę mokslinių tyrimų sritį, kurią sudaro 4 programos: parama politikai ir mokslinių bei technologinių poreikių numatymas, horizontalioji mokslinių tyrimų veikla, apimanti MVĮ, konkrečios priemonės tarptautiniam bendradarbiavimui remti; nebranduolinė Jungtinio tyrimų centro veikla; „Europos mokslinių tyrimų srities formavimas“ – 4 programos: moksliniai tyrimai ir naujovės, žmogiškieji ištekliai, mokslinių tyrimų infrastruktūra, mokslas ir visuomenė „Europos mokslinių tyrimų srities pagrindų stiprinimas“ – 2 programos: parama veiklos koordinavimui, nuoseklaus politikos plėtojimo rėmimas.

(4)  BP7: specialioji programa „Bendradarbiavimas“, apimanti 10 paprogramių (sveikata; maistas, žemės ūkis ir biotechnologijos; informacinės ir ryšių technologijos; nanomokslai, nanotechnologijos, medžiagos ir naujos gamybos technologijos; energetika; aplinka (įskaitant klimato kaitą); transportas (įskaitant aeronautiką); socialiniai bei ekonomikos mokslai ir humanitariniai mokslai; kosminė erdvė; saugumas), specialioji programa „Idėjos“ apimanti vieną paprogramę (Europos mokslinių tyrimų taryba), specialioji programa „Žmonės“, apimanti 5 paprogrames (pradinis mokymas; mokymasis visą gyvenimą; pramonės ir mokslo įstaigų sąsajos; tarptautinis matmuo; konkretūs veiksmai), specialioji programa „Pajėgumai“, apimanti 8 paprogrames (mokslinių tyrimų infrastruktūra; MVĮ skirti moksliniai tyrimai; žinių regionai; mokslinių tyrimų potencialas; mokslas visuomenėje; nuoseklus mokslinių tyrimų politikos plėtojimas; tarptautinis bendradarbiavimas; JTC nebranduolinė veikla).

---

III PRIEDAS

PAGRINDINIAI MOKSLINIŲ TYRIMŲ EX-POST VERTINIMO ES (BP4–BP6), JAV IR KANADOJE SKIRTUMAI

| | ES (BP4–BP6) | JAV | Kanada |
| --- | --- | --- | --- |
| Sisteminiai klausimai |
| Intervencijos logika | neaiški | dažniausiai yra įdiegta, o to yra netiesiogiai reikalaujama pagal PART (1) | privaloma pagal RMAF (2) (programos pasiūlymo dalis) |
| Vertinimo strategija | neintegruota | privaloma pagal PART (1) | privaloma pagal RMAF (2) (programos pasiūlymo dalis) |
| Laukiamų rezultatų įvardijimas | ne | privaloma pagal PART (1) (įskaitant kiekybiškai įvertinamų rodiklių panaudojimą) | privaloma pagal RMAF (2) (programos pasiūlymo dalis) |
| Vertinimo klausimai, užduoti | Komisijos, kaip programos vadovės | agentūros, kaip programos vadovės (vertinama OMB kontekste) | agentūros, kaip programos vadovės
  (vertinama TBS kontekste) |
| Organizaciniai klausimai |
| Kūrimo etapas | programavimo laikotarpio metu | programavimo laikotarpio metu | užbaigiamas prieš prasidedant programai |
| Pasinaudojimas vertinimo komisijų paslaugomis | Ad hoc komisijos konkretiems vertinimams atlikti | priklausomai nuo agentūros (programos) | nuolatinės komisijos kaip nuolatiniai komitetai |
| Periodiškumas | nustatytos datos (susijusios su programavimo laikotarpiu, apimant praėjusius penkerius metus) | 2–3 metų ciklas
  (susijęs su biudžeto patvirtinimu) | iš naujo pradėjus vykdyti programą |

ES (BP4–BP6)

JAV

Kanada

Sisteminiai klausimai

Intervencijos logika

neaiški

dažniausiai yra įdiegta, o to yra netiesiogiai reikalaujama pagal PART (1)

privaloma pagal RMAF (2) (programos pasiūlymo dalis)

Vertinimo strategija

neintegruota

privaloma pagal PART (1)

privaloma pagal RMAF (2) (programos pasiūlymo dalis)

Laukiamų rezultatų įvardijimas

ne

privaloma pagal PART (1) (įskaitant kiekybiškai įvertinamų rodiklių panaudojimą)

privaloma pagal RMAF (2) (programos pasiūlymo dalis)

Vertinimo klausimai, užduoti

Komisijos, kaip programos vadovės

agentūros, kaip programos vadovės (vertinama OMB kontekste)

agentūros, kaip programos vadovės

(vertinama TBS kontekste)

Organizaciniai klausimai

Kūrimo etapas

programavimo laikotarpio metu

programavimo laikotarpio metu

užbaigiamas prieš prasidedant programai

Pasinaudojimas vertinimo komisijų paslaugomis

Ad hoc komisijos konkretiems vertinimams atlikti

priklausomai nuo agentūros (programos)

nuolatinės komisijos kaip nuolatiniai komitetai

Periodiškumas

nustatytos datos (susijusios su programavimo laikotarpiu, apimant praėjusius penkerius metus)

2–3 metų ciklas

(susijęs su biudžeto patvirtinimu)

iš naujo pradėjus vykdyti programą

---

(1)  Nuo 2002 m. taikoma Programos vertinimo priemonė (PART): žr. Valdymo ir biudžeto tarnybą (OMB), Prezidentūros vykdomąją tarnybą, JAV.

(2)  Rezultatais grindžiama valdymo ir atskaitomybės sistema (RMAF): žr. Kanados sekretoriato iždo valdybą (TBS).

---

IV PRIEDAS

GALIMA BP7 VERTINIMO KOMISIJOS STRUKTŪRA

Image

---

KOMISIJOS ATSAKYMAI

| I. | Per pastaruosius dešimtmečius Bendrijos mokslinių tyrimų ir technologinės plėtros (MTTP) bendrosios programos (BP) išsivystė į labai plataus masto, tačiau nuoseklią 27 ES valstybėse narėse, asocijuotose šalyse ir kitur dirbantiems tyrėjams teikiamos paramos mechanizmų sistemą.
  Bendrosios programos šiandien yra didžiausia daugiašalė mokslinių tyrimų viešojo finansavimo sistema pasaulyje.
  Pagal bendrąsias programas šiuo metu skiriama maždaug 5 % viso ES viešojo mokslinių tyrimų finansavimo. Vertinant pagal metinį Bendrijos finansinį dalyvavimą, BP7 bus skirta maždaug 60 % daugiau lėšų nei BP6.
  Tokią unikalią struktūrą vertinti yra ypatingai sunki užduotis visoms dalyvaujančioms šalims. Per pastaruosius metus buvo padaryta nemažai stebėsenos ir vertinimo priemonių pakeitimų; naujausi padaryti 2007 m. pradėjus įgyvendinti BP7.
  Šiuo metu Komisijos taikoma vertinimo ir stebėsenos sistema grindžiama tiesiogine Komisijos įgyvendinančių tarnybų atsakomybe. Kaip tik šiose tarnybose sukaupta daugiausia techninės patirties.
  Vertinimas bendrosios programos lygmeniu atliekamas koordinuojant visų generalinių direktoratų (GD) pastangas. |
| --- | --- |

I.

Per pastaruosius dešimtmečius Bendrijos mokslinių tyrimų ir technologinės plėtros (MTTP) bendrosios programos (BP) išsivystė į labai plataus masto, tačiau nuoseklią 27 ES valstybėse narėse, asocijuotose šalyse ir kitur dirbantiems tyrėjams teikiamos paramos mechanizmų sistemą.

Bendrosios programos šiandien yra didžiausia daugiašalė mokslinių tyrimų viešojo finansavimo sistema pasaulyje.

Pagal bendrąsias programas šiuo metu skiriama maždaug 5 % viso ES viešojo mokslinių tyrimų finansavimo. Vertinant pagal metinį Bendrijos finansinį dalyvavimą, BP7 bus skirta maždaug 60 % daugiau lėšų nei BP6.

Tokią unikalią struktūrą vertinti yra ypatingai sunki užduotis visoms dalyvaujančioms šalims. Per pastaruosius metus buvo padaryta nemažai stebėsenos ir vertinimo priemonių pakeitimų; naujausi padaryti 2007 m. pradėjus įgyvendinti BP7.

Šiuo metu Komisijos taikoma vertinimo ir stebėsenos sistema grindžiama tiesiogine Komisijos įgyvendinančių tarnybų atsakomybe. Kaip tik šiose tarnybose sukaupta daugiausia techninės patirties.

Vertinimas bendrosios programos lygmeniu atliekamas koordinuojant visų generalinių direktoratų (GD) pastangas.

| IV. | Komisija palankiai įvertino Audito Rūmų pastabą, kad bendrąsias programas įgyvendinantys generaliniai direktoratai (mokslinių tyrimų generaliniai direktoratai) atitiko Komisijos reikalavimus, įskaitant reikalavimus, išdėstytus 2000 ir 2002 m. komunikatuose dėl vertinimo.
  Padaryti svarbūs bendrųjų programų vertinimo tvarkos pakeitimai, įskaitant esminį pertvarkymą, skirtą BP7.
  Komisija taip pat mano, kad:






  i) | bendrosios programos visada buvo pagrįstos aiškia intervencijos logika. BP7 tai išdėstyta dar aiškiau ir tai dar labiau sustiprins Komisijos taikomą vertinimo ir stebėsenos sistemą; |
| --- | --- | --- |

IV.

Komisija palankiai įvertino Audito Rūmų pastabą, kad bendrąsias programas įgyvendinantys generaliniai direktoratai (mokslinių tyrimų generaliniai direktoratai) atitiko Komisijos reikalavimus, įskaitant reikalavimus, išdėstytus 2000 ir 2002 m. komunikatuose dėl vertinimo.

Padaryti svarbūs bendrųjų programų vertinimo tvarkos pakeitimai, įskaitant esminį pertvarkymą, skirtą BP7.

Komisija taip pat mano, kad:

i)

bendrosios programos visada buvo pagrįstos aiškia intervencijos logika. BP7 tai išdėstyta dar aiškiau ir tai dar labiau sustiprins Komisijos taikomą vertinimo ir stebėsenos sistemą;

| ii) | pagrindiniai Komisijos vertinimo ir stebėsenos metodo strateginiai aspektai išdėstyti nuo praėjusio amžiaus dešimtojo dešimtmečio vidurio vienas po kito skelbtuose su bendrosiomis programomis susijusiuose teisės aktuose.
  Nuo to laiko, kai 1996 m. Komisija priėmė savo paskutinį komunikatą dėl mokslinių tyrimų vertinimo, metodas, kuriuo Komisija vadovaujasi vertindama bendrąsias programas, buvo nuolat tobulinamas, taip pat padaryta reikšmingų vertinimo praktikos pakeitimų.
  Per Audito Rūmų tikrintą laikotarpį kas ketverius metus buvo atliekami vadinamieji bendrųjų programų veiklos penkerių metų laikotarpio įvertinimai; |
| --- | --- |

ii)

pagrindiniai Komisijos vertinimo ir stebėsenos metodo strateginiai aspektai išdėstyti nuo praėjusio amžiaus dešimtojo dešimtmečio vidurio vienas po kito skelbtuose su bendrosiomis programomis susijusiuose teisės aktuose.

Nuo to laiko, kai 1996 m. Komisija priėmė savo paskutinį komunikatą dėl mokslinių tyrimų vertinimo, metodas, kuriuo Komisija vadovaujasi vertindama bendrąsias programas, buvo nuolat tobulinamas, taip pat padaryta reikšmingų vertinimo praktikos pakeitimų.

Per Audito Rūmų tikrintą laikotarpį kas ketverius metus buvo atliekami vadinamieji bendrųjų programų veiklos penkerių metų laikotarpio įvertinimai;

| iii) | bendrąsias programas bendrai įgyvendina mokslinių tyrimų generaliniai direktoratai, kurie veikia nepriklausomai ir prireikus bendradarbiauja. Komisijos centrinės tarnybos, visų pirma Biudžeto GD, aktyviai dalyvauja įvairiuose bendrųjų programų vertinimo proceso etapuose.
  Atsižvelgiant į decentralizuotą Komisijos organizaciją ir kiekvienos mokslo srities ypatumus, vertinimams turi vadovauti atsakingos veiklos tarnybos.
  Komisijos vidinis MTTP vertinimo tinklas yra labai naudinga koordinavimo priemonė.
  Komisija pritaria nuomonei, kad vertinimo komisijos turėtų vaidinti svarbų vaidmenį atliekant vertinimus ir teigiamai vertina audito išvadą, jog per audito tikrintą laikotarpį suinteresuotosios institucijos penkerių metų ir kitus svarbiausius vertinimus atliekančias vertinimo komisijas laikė Komisijos taikomo metodo nepriklausomumo garantu; |
| --- | --- |

iii)

bendrąsias programas bendrai įgyvendina mokslinių tyrimų generaliniai direktoratai, kurie veikia nepriklausomai ir prireikus bendradarbiauja. Komisijos centrinės tarnybos, visų pirma Biudžeto GD, aktyviai dalyvauja įvairiuose bendrųjų programų vertinimo proceso etapuose.

Atsižvelgiant į decentralizuotą Komisijos organizaciją ir kiekvienos mokslo srities ypatumus, vertinimams turi vadovauti atsakingos veiklos tarnybos.

Komisijos vidinis MTTP vertinimo tinklas yra labai naudinga koordinavimo priemonė.

Komisija pritaria nuomonei, kad vertinimo komisijos turėtų vaidinti svarbų vaidmenį atliekant vertinimus ir teigiamai vertina audito išvadą, jog per audito tikrintą laikotarpį suinteresuotosios institucijos penkerių metų ir kitus svarbiausius vertinimus atliekančias vertinimo komisijas laikė Komisijos taikomo metodo nepriklausomumo garantu;

| iv) | galimybes teikti tiesiogines metodikos gaires dėl vertinimo atlikimo riboja įsipareigojimas užtikrinti vertintojų nepriklausomumą. Komisija pripažįsta anksčiau pasitaikiusius sunkumus renkant duomenis ir sutinka, kad dar mažiau yra žinoma apie ilgalaikius bendrųjų programų rezultatus ir poveikį; tą patį galima pasakyti apie daugumą mokslinių tyrimų ir kitų sričių viešojo finansavimo vertinimų; |
| --- | --- |

iv)

galimybes teikti tiesiogines metodikos gaires dėl vertinimo atlikimo riboja įsipareigojimas užtikrinti vertintojų nepriklausomumą. Komisija pripažįsta anksčiau pasitaikiusius sunkumus renkant duomenis ir sutinka, kad dar mažiau yra žinoma apie ilgalaikius bendrųjų programų rezultatus ir poveikį; tą patį galima pasakyti apie daugumą mokslinių tyrimų ir kitų sričių viešojo finansavimo vertinimų;

| v) | daugumos vertinimų atlikimo laikas apibrėžtas Europos Parlamento ir Tarybos priimtuose bendrąsias programas reglamentuojančiuose teisės aktuose. Apskritai Komisija laiko savo bendrųjų programų vertinimo ir stebėsenos sistemą veiksminga. Šiai nuomonei pritarė Europos Parlamentas ir Taryba 2006 m. priimdami naujausius Komisijos teisės aktų pasiūlymus dėl BP7. |
| --- | --- |

v)

daugumos vertinimų atlikimo laikas apibrėžtas Europos Parlamento ir Tarybos priimtuose bendrąsias programas reglamentuojančiuose teisės aktuose. Apskritai Komisija laiko savo bendrųjų programų vertinimo ir stebėsenos sistemą veiksminga. Šiai nuomonei pritarė Europos Parlamentas ir Taryba 2006 m. priimdami naujausius Komisijos teisės aktų pasiūlymus dėl BP7.

| V. | Atsižvelgdama į Audito Rūmų rekomendacijas, Komisija:






  i) | nurodo dar aiškesnę intervencijos logiką, įtvirtintą BP7 teisės aktuose (Europos Parlamento ir Tarybos priimtuose 2006 m.), ir ateityje teikdama teisės aktų projektus intervencijos logiką pagrįs dar aiškiau. Be to, Komisija ketina paaiškinti savo veiklos tikslus, nustatytus BP7 darbo programų lygmeniu, ir patikslinti savo požiūrį dėl veiklos vertinimo; |
| --- | --- | --- |

V.

Atsižvelgdama į Audito Rūmų rekomendacijas, Komisija:

i)

nurodo dar aiškesnę intervencijos logiką, įtvirtintą BP7 teisės aktuose (Europos Parlamento ir Tarybos priimtuose 2006 m.), ir ateityje teikdama teisės aktų projektus intervencijos logiką pagrįs dar aiškiau. Be to, Komisija ketina paaiškinti savo veiklos tikslus, nustatytus BP7 darbo programų lygmeniu, ir patikslinti savo požiūrį dėl veiklos vertinimo;

| ii) | toliau plėtos savo BP7 vertinimo strategiją, remdamasi BP7 poveikio vertinime pateiktais pasiūlymais. Bus siekiama užtikrinti reikiamą lankstumo lygį, kad kiekviena veiklos tarnyba galėtų apibrėžti savo konkrečius vertinimo poreikius; |
| --- | --- |

ii)

toliau plėtos savo BP7 vertinimo strategiją, remdamasi BP7 poveikio vertinime pateiktais pasiūlymais. Bus siekiama užtikrinti reikiamą lankstumo lygį, kad kiekviena veiklos tarnyba galėtų apibrėžti savo konkrečius vertinimo poreikius;

| iii) | nemano, kad yra būtina steigti jungtinę vertinimo tarnybą, tačiau sutinka apsvarstyti kitas koordinavimo gerinimo galimybes.
  Vertinimo komisijos turėtų būti sudaromos kuo anksčiau, kad galėtų padėti atlikti konkretų vertinimą. Tačiau specialiosios vertinimo komisijos, sudaromos konkretiems tikslams, tikriausiai galėtų padėti užtikrinti didesnį aiškumą ir tikslingumą; |
| --- | --- |

iii)

nemano, kad yra būtina steigti jungtinę vertinimo tarnybą, tačiau sutinka apsvarstyti kitas koordinavimo gerinimo galimybes.

Vertinimo komisijos turėtų būti sudaromos kuo anksčiau, kad galėtų padėti atlikti konkretų vertinimą. Tačiau specialiosios vertinimo komisijos, sudaromos konkretiems tikslams, tikriausiai galėtų padėti užtikrinti didesnį aiškumą ir tikslingumą;

| iv) | jau ėmėsi priemonių, kad atliekant vertinimus būtų geriau naudojami esami ir nauji duomenų šaltiniai.
  BP7 ataskaitų teikimo reikalavimai jau iš dalies peržiūrėti atsižvelgus į vertinimo ir stebėsenos poreikius.
  Be to, Komisija šiuo metu kuria naują BP7 skirtą IT sistemą, kuri turėtų tapti patikimu pagrindu renkant duomenis apie projektus.
  Komisija apsvarstys galimybę parengti naują bendrųjų programų vertinimo vadovą, atsižvelgdama į neseniai parengtus pavyzdžius; |
| --- | --- |

iv)

jau ėmėsi priemonių, kad atliekant vertinimus būtų geriau naudojami esami ir nauji duomenų šaltiniai.

BP7 ataskaitų teikimo reikalavimai jau iš dalies peržiūrėti atsižvelgus į vertinimo ir stebėsenos poreikius.

Be to, Komisija šiuo metu kuria naują BP7 skirtą IT sistemą, kuri turėtų tapti patikimu pagrindu renkant duomenis apie projektus.

Komisija apsvarstys galimybę parengti naują bendrųjų programų vertinimo vadovą, atsižvelgdama į neseniai parengtus pavyzdžius;

| v) | Komisija ketina parengti ir plačiau taikyti išankstinius vertinimo pagal BP7 planus, kuriuose bus parodyta, kokių pranašumų gal suteikti nuoseklumas, ir kuriuose bus deramai atsižvelgta į nustatytus faktus. |
| --- | --- |

v)

Komisija ketina parengti ir plačiau taikyti išankstinius vertinimo pagal BP7 planus, kuriuose bus parodyta, kokių pranašumų gal suteikti nuoseklumas, ir kuriuose bus deramai atsižvelgta į nustatytus faktus.

| 1–13. | Per pastaruosius dešimtmečius Bendrijos mokslinių tyrimų ir technologinės plėtros (MTTP) bendrosios programos išsivystė į labai plataus masto, tačiau nuoseklią 27 ES valstybėse narėse, asocijuotose šalyse ir kitur dirbantiems tyrėjams teikiamos paramos mechanizmų sistemą.
  Šiandien bendrosios programos – didžiausia daugiašalė mokslinių tyrimų viešojo finansavimo sistema pasaulyje (žr. Audito Rūmų ataskaitos 6 dalį). Vertinant pagal metinį Bendrijos finansinį dalyvavimą, BP7 bus skirta maždaug 60 % daugiau lėšų nei BP6 (žr. Audito Rūmų ataskaitos 1 diagramą).
  Tokią unikalią struktūrą vertinti yra ypatingai sunki užduotis visoms dalyvaujančioms šalims. Pastaraisiais metais buvo gerokai pakeista vertinimo metodika (žr. Audito Rūmų ataskaitos 2 diagramą), patys naujausi pakeitimai padaryti 2007 m. pradėjus įgyvendinti BP7 (žr., pvz., pastabas dėl 23, 30, 41, 46, 72, 76–78 ir 93 dalių). |
| --- | --- |

1–13.

Per pastaruosius dešimtmečius Bendrijos mokslinių tyrimų ir technologinės plėtros (MTTP) bendrosios programos išsivystė į labai plataus masto, tačiau nuoseklią 27 ES valstybėse narėse, asocijuotose šalyse ir kitur dirbantiems tyrėjams teikiamos paramos mechanizmų sistemą.

Šiandien bendrosios programos – didžiausia daugiašalė mokslinių tyrimų viešojo finansavimo sistema pasaulyje (žr. Audito Rūmų ataskaitos 6 dalį). Vertinant pagal metinį Bendrijos finansinį dalyvavimą, BP7 bus skirta maždaug 60 % daugiau lėšų nei BP6 (žr. Audito Rūmų ataskaitos 1 diagramą).

Tokią unikalią struktūrą vertinti yra ypatingai sunki užduotis visoms dalyvaujančioms šalims. Pastaraisiais metais buvo gerokai pakeista vertinimo metodika (žr. Audito Rūmų ataskaitos 2 diagramą), patys naujausi pakeitimai padaryti 2007 m. pradėjus įgyvendinti BP7 (žr., pvz., pastabas dėl 23, 30, 41, 46, 72, 76–78 ir 93 dalių).

| 14. | Oficialiai MTTP bendrąsias programas įgyvendinantys generaliniai direktoratai (mokslinių tyrimų generaliniai direktoratai) atitiko Komisijos nustatytus vertinimo reikalavimus, įskaitant 2000 ir 2002 m. komunikatuose dėl vertinimo nurodytus reikalavimus (žr. Audito Rūmų ataskaitos 54 dalį). |
| --- | --- |

14.

Oficialiai MTTP bendrąsias programas įgyvendinantys generaliniai direktoratai (mokslinių tyrimų generaliniai direktoratai) atitiko Komisijos nustatytus vertinimo reikalavimus, įskaitant 2000 ir 2002 m. komunikatuose dėl vertinimo nurodytus reikalavimus (žr. Audito Rūmų ataskaitos 54 dalį).

| 22. | Komisija pripažįsta aiškios intervencijos logikos svarbą programos struktūrai ir pritaria nuomonei, kad pagal Sutarties 163 straipsnį suteikti įgaliojimai šiuo atžvilgiu yra esminis elementas. Be to, labai svarbus Bendrijos finansuojamos MTTP veiklos indėlis įgyvendinant kitų krypčių Bendrijos politiką ir tikslus. Neseniai Komisijos pozicija dėl ES investicijų į MTTP buvo išsamiai išdėstyta atnaujintose Lisabonos ir tvaraus vystymosi strategijose (1). |
| --- | --- |

22.

Komisija pripažįsta aiškios intervencijos logikos svarbą programos struktūrai ir pritaria nuomonei, kad pagal Sutarties 163 straipsnį suteikti įgaliojimai šiuo atžvilgiu yra esminis elementas. Be to, labai svarbus Bendrijos finansuojamos MTTP veiklos indėlis įgyvendinant kitų krypčių Bendrijos politiką ir tikslus. Neseniai Komisijos pozicija dėl ES investicijų į MTTP buvo išsamiai išdėstyta atnaujintose Lisabonos ir tvaraus vystymosi strategijose (1).

| 23. | Bendrosios programos visada buvo pagrįstos aiškia intervencijos logika. BP7 (2) tai išdėstyta dar aiškiau ir tai dar labiau sustiprins Komisijos taikomą vertinimo ir stebėsenos sistemą. |
| --- | --- |

23.

Bendrosios programos visada buvo pagrįstos aiškia intervencijos logika. BP7 (2) tai išdėstyta dar aiškiau ir tai dar labiau sustiprins Komisijos taikomą vertinimo ir stebėsenos sistemą.

| 25. | Šį metodą kuria kelios šalys, įskaitant kai kurias valstybes nares, tačiau tai jokiu būdu nereiškia, kad tai yra vienodas metodas. Pasinaudoti JAV ir Kanados patirtimi gali būti sunkiau nei ES valstybių narių sukaupta patirtimi. |
| --- | --- |

25.

Šį metodą kuria kelios šalys, įskaitant kai kurias valstybes nares, tačiau tai jokiu būdu nereiškia, kad tai yra vienodas metodas. Pasinaudoti JAV ir Kanados patirtimi gali būti sunkiau nei ES valstybių narių sukaupta patirtimi.

| 26. | Komisijos nuomone, per Audito Rūmų tikrintą laikotarpį Komisija taikė veiksmingą vertinimo ir stebėsenos sistemą (taip pat žr. pastabą dėl 23 dalies). |
| --- | --- |

26.

Komisijos nuomone, per Audito Rūmų tikrintą laikotarpį Komisija taikė veiksmingą vertinimo ir stebėsenos sistemą (taip pat žr. pastabą dėl 23 dalies).

| 28. | Atsižvelgiant į su moksliniais tyrimais susijusius neaiškumus, užtikrinti, kad visi tikslai tiksliai atitiktų griežtas SMART kriterijų apibrėžtis yra sunki užduotis. Visose BP7 darbo programose pateikiami numatomo poveikio aprašymai, kurie atitinka specialiosiose programose išdėstytus tikslus, loginį pagrindimą ir veiklos kryptis. |
| --- | --- |

28.

Atsižvelgiant į su moksliniais tyrimais susijusius neaiškumus, užtikrinti, kad visi tikslai tiksliai atitiktų griežtas SMART kriterijų apibrėžtis yra sunki užduotis. Visose BP7 darbo programose pateikiami numatomo poveikio aprašymai, kurie atitinka specialiosiose programose išdėstytus tikslus, loginį pagrindimą ir veiklos kryptis.

| 29. | Per Audito Rūmų tikrintą laikotarpį daugiau dėmesio buvo skiriama trumpojo laikotarpio pasiekimams; dar galima atlikti ilgesnį laikotarpį apimančias analizes. |
| --- | --- |

29.

Per Audito Rūmų tikrintą laikotarpį daugiau dėmesio buvo skiriama trumpojo laikotarpio pasiekimams; dar galima atlikti ilgesnį laikotarpį apimančias analizes.

| 30. | Šiuo metu Komisija rengia bendrųjų programų lygmens BP7 skirtą stebėsenos sistemą, siekdama nuosekliau ir sistemingiau naudoti veiklos rodiklius. Kelios atskiros BP7 įgyvendinančios tarnybos taip pat ėmėsi iniciatyvos parengti veiklos rodiklius. |
| --- | --- |

30.

Šiuo metu Komisija rengia bendrųjų programų lygmens BP7 skirtą stebėsenos sistemą, siekdama nuosekliau ir sistemingiau naudoti veiklos rodiklius. Kelios atskiros BP7 įgyvendinančios tarnybos taip pat ėmėsi iniciatyvos parengti veiklos rodiklius.

| 34. | Komisija jau yra įsipareigojusi užtikrinti aiškesnę programų intervencijos logiką, remdamasi BP7 teisės aktuose įtvirtintais laimėjimais bei poveikio vertinimu ir atsižvelgs į Audito Rūmų rekomendacijas dėl būsimų teisės aktų pasiūlymų. |
| --- | --- |

34.

Komisija jau yra įsipareigojusi užtikrinti aiškesnę programų intervencijos logiką, remdamasi BP7 teisės aktuose įtvirtintais laimėjimais bei poveikio vertinimu ir atsižvelgs į Audito Rūmų rekomendacijas dėl būsimų teisės aktų pasiūlymų.

| 35. | Komisija pritaria Audito Rūmų rekomendacijai aiškiau apibrėžti BP7 programos tikslus ir, atsižvelgdama į atitinkamuose pagrindiniuose Europos Parlamento ir Tarybos priimtuose teisės aktuose nustatytus apribojimus, sieks, kad tai būtų padaryta. |
| --- | --- |

35.

Komisija pritaria Audito Rūmų rekomendacijai aiškiau apibrėžti BP7 programos tikslus ir, atsižvelgdama į atitinkamuose pagrindiniuose Europos Parlamento ir Tarybos priimtuose teisės aktuose nustatytus apribojimus, sieks, kad tai būtų padaryta.

| 36–37. | Komisija pritaria Audito Rūmų rekomendacijoms ir imasi iniciatyvų toliau tobulinti veiklos vertinimo rodiklius ir keisti veikla pagrįsto valdymo ir biudžeto sudarymo pagal veiklos sritis nomenklatūrą. |
| --- | --- |

36–37.

Komisija pritaria Audito Rūmų rekomendacijoms ir imasi iniciatyvų toliau tobulinti veiklos vertinimo rodiklius ir keisti veikla pagrįsto valdymo ir biudžeto sudarymo pagal veiklos sritis nomenklatūrą.

| 38–39. | Komisijos nuomone, jos taikomoje bendrųjų programų vertinimo strategijoje turėtų būti išdėstyti bendrieji bendrųjų programų vertinimo ir stebėsenos organizavimo ir plėtros principai. Strategijoje turėtų būti apibrėžtas tikslas, pagrindinės sistemos sudedamosios dalys, įskaitant pagrindines priemones, išsamiai paaiškinta ateities vizija. Didžiausias dėmesys ir toliau turėtų būti skiriamas strateginiam lygmeniui, atsižvelgiant į Komisijos taikomą decentralizuotą bendrųjų programų vertinimo sistemą. |
| --- | --- |

38–39.

Komisijos nuomone, jos taikomoje bendrųjų programų vertinimo strategijoje turėtų būti išdėstyti bendrieji bendrųjų programų vertinimo ir stebėsenos organizavimo ir plėtros principai. Strategijoje turėtų būti apibrėžtas tikslas, pagrindinės sistemos sudedamosios dalys, įskaitant pagrindines priemones, išsamiai paaiškinta ateities vizija. Didžiausias dėmesys ir toliau turėtų būti skiriamas strateginiam lygmeniui, atsižvelgiant į Komisijos taikomą decentralizuotą bendrųjų programų vertinimo sistemą.

| 41. | Pagrindiniai Komisijos vertinimo ir stebėsenos metodo strateginiai aspektai išdėstyti nuo praėjusio amžiaus dešimtojo dešimtmečio vidurio vienas po kito skelbtuose su bendrosiomis programomis susijusiuose teisės aktuose (žr. II priedą).
  Nuo to laiko, kai 1996 m. Komisija priėmė savo komunikatą dėl mokslinių tyrimų vertinimo, metodas, kurį Komisija taiko vertindama bendrąsias programas, buvo nuolat tobulinamas, taip pat padaryti svarbūs vertinimo tvarkos pakeitimai (žr. Audito Rūmų ataskaitos 2 diagramą).
  Šiuo programavimo laikotarpiu Komisijos planuojama taikyti vertinimo strategija išsamiau išdėstyta BP7 ex ante poveikio vertinime (SEC(2005) 430). Jame išdėstyta vertinimo sistemos struktūra, aprašoma, kaip ji bus įgyvendinama, ir pateikiamas išsamus planuojamų vertinimų bendrųjų programų lygmeniu tvarkaraštis.
  Reikės dar daug padirbėti, kad ši strategija virstų konkrečiais planais ir šiuo tikslu Komisija pasitelks specialiąsias koordinavimo struktūras. |
| --- | --- |

41.

Pagrindiniai Komisijos vertinimo ir stebėsenos metodo strateginiai aspektai išdėstyti nuo praėjusio amžiaus dešimtojo dešimtmečio vidurio vienas po kito skelbtuose su bendrosiomis programomis susijusiuose teisės aktuose (žr. II priedą).

Nuo to laiko, kai 1996 m. Komisija priėmė savo komunikatą dėl mokslinių tyrimų vertinimo, metodas, kurį Komisija taiko vertindama bendrąsias programas, buvo nuolat tobulinamas, taip pat padaryti svarbūs vertinimo tvarkos pakeitimai (žr. Audito Rūmų ataskaitos 2 diagramą).

Šiuo programavimo laikotarpiu Komisijos planuojama taikyti vertinimo strategija išsamiau išdėstyta BP7 ex ante poveikio vertinime (SEC(2005) 430). Jame išdėstyta vertinimo sistemos struktūra, aprašoma, kaip ji bus įgyvendinama, ir pateikiamas išsamus planuojamų vertinimų bendrųjų programų lygmeniu tvarkaraštis.

Reikės dar daug padirbėti, kad ši strategija virstų konkrečiais planais ir šiuo tikslu Komisija pasitelks specialiąsias koordinavimo struktūras.

| 43. | Komisija pripažįsta Audito Rūmų pastabą, tačiau atkreipia dėmesį, kad padėtis JAV ir Kanadoje turi daug daugiau niuansų, todėl jos negalima apibendrinti vienoje vertinimo strategijoje. |
| --- | --- |

43.

Komisija pripažįsta Audito Rūmų pastabą, tačiau atkreipia dėmesį, kad padėtis JAV ir Kanadoje turi daug daugiau niuansų, todėl jos negalima apibendrinti vienoje vertinimo strategijoje.

| 44. | Skirtingi atskiroms bendrosioms programoms taikomi vertinimo metodai ir nevienodas požiūris į vertinimo procesą rodo, kad Komisijos taikoma sistema nėra centralizuota ir pagal ją vertinimas siejamas su sprendimų priėmimo procesu. |
| --- | --- |

44.

Skirtingi atskiroms bendrosioms programoms taikomi vertinimo metodai ir nevienodas požiūris į vertinimo procesą rodo, kad Komisijos taikoma sistema nėra centralizuota ir pagal ją vertinimas siejamas su sprendimų priėmimo procesu.

| 46. | Atsižvelgiant į decentralizuotą Komisijos organizaciją, atitinkamos atsakingosios veiklos tarnybos turi priimti sprendimą dėl priimtino vertinimo veiklos lygmens (tai pat žr. pastabas dėl 41 ir 49 dalių).






  — | (antra įtrauka) 2004 m. atliktas penkerių metų laikotarpio (1999–2003) vertinimas, kurį koordinavo Mokslinių tyrimų GD pateikė vertinimą bendru bendrųjų programų lygmeniu. Sprendimas dėl atskirų programų vertinimo buvo priimtas atsižvelgus į konkrečių susijusių tarnybų poreikius ir skirtingas aplinkybes bei veiklos mastą. |
| --- | --- | --- |

46.

Atsižvelgiant į decentralizuotą Komisijos organizaciją, atitinkamos atsakingosios veiklos tarnybos turi priimti sprendimą dėl priimtino vertinimo veiklos lygmens (tai pat žr. pastabas dėl 41 ir 49 dalių).

—

(antra įtrauka) 2004 m. atliktas penkerių metų laikotarpio (1999–2003) vertinimas, kurį koordinavo Mokslinių tyrimų GD pateikė vertinimą bendru bendrųjų programų lygmeniu. Sprendimas dėl atskirų programų vertinimo buvo priimtas atsižvelgus į konkrečių susijusių tarnybų poreikius ir skirtingas aplinkybes bei veiklos mastą.

| 47. | 2004 m. penkerių metų laikotarpio vertinime pateiktas suderintas, išsamus ir tinkamu laiku atliktas vertinimas bendruoju bendrųjų programų lygmeniu, atitinkantis Finansinio reglamento reikalavimus. Šį vertinimą atliko gerai žinomi išorės ekspertai, o jo rezultatai buvo plačiai išplatinti. |
| --- | --- |

47.

2004 m. penkerių metų laikotarpio vertinime pateiktas suderintas, išsamus ir tinkamu laiku atliktas vertinimas bendruoju bendrųjų programų lygmeniu, atitinkantis Finansinio reglamento reikalavimus. Šį vertinimą atliko gerai žinomi išorės ekspertai, o jo rezultatai buvo plačiai išplatinti.

| 48. | Žr. pastabas dėl 41 ir 46 dalių. |
| --- | --- |

48.

Žr. pastabas dėl 41 ir 46 dalių.

| 49. | Šiuo programavimo laikotarpiu Komisijos planuojama taikyti vertinimo strategija išsamiau išdėstyta BP7 ex ante poveikio vertinime (SEC(2005) 430). Jame išdėstyta vertinimo sistemos struktūra, aprašoma, kaip ji bus įgyvendinama, ir pateikiamas išsamus planuojamų vertinimų bendrųjų programų lygmeniu tvarkaraštis.
  Komisija pripažįsta, kad reikės dar daug padirbėti, kad ši strategija virstų konkrečiais planais ir šiuo tikslu ji pasitelks specialiąsias koordinavimo struktūras.
  Tačiau Komisija mano, kad ne visada galima nustatyti minimalų išsamaus vertinimo lygį, nes būtina palikti galimybę vadovybei lanksčiai apibrėžti atitinkamus vertinimo poreikius. |
| --- | --- |

49.

Šiuo programavimo laikotarpiu Komisijos planuojama taikyti vertinimo strategija išsamiau išdėstyta BP7 ex ante poveikio vertinime (SEC(2005) 430). Jame išdėstyta vertinimo sistemos struktūra, aprašoma, kaip ji bus įgyvendinama, ir pateikiamas išsamus planuojamų vertinimų bendrųjų programų lygmeniu tvarkaraštis.

Komisija pripažįsta, kad reikės dar daug padirbėti, kad ši strategija virstų konkrečiais planais ir šiuo tikslu ji pasitelks specialiąsias koordinavimo struktūras.

Tačiau Komisija mano, kad ne visada galima nustatyti minimalų išsamaus vertinimo lygį, nes būtina palikti galimybę vadovybei lanksčiai apibrėžti atitinkamus vertinimo poreikius.

| 51. | Bendrąsias programas bendrai įgyvendina mokslinių tyrimų generaliniai direktoratai, kurie veikia savarankiškai ir prireikus bendradarbiauja. |
| --- | --- |

51.

Bendrąsias programas bendrai įgyvendina mokslinių tyrimų generaliniai direktoratai, kurie veikia savarankiškai ir prireikus bendradarbiauja.

| 52. | EuropeAid yra atsakingas už veiklą ir valdymą; šiuos įsipareigojimus jis vykdo bendradarbiaudamas su trečiosiose šalyse veikiančiomis Komisijos delegacijomis ir įgyvendinančiomis institucijomis. Dėl šios priežasties šias Komisijos struktūras sunku laikyti pavyzdžiu, nes jų negalima palyginti su decentralizuota pareigų ir funkcijų sistema mokslinių tyrimų srityje. |
| --- | --- |

52.

EuropeAid yra atsakingas už veiklą ir valdymą; šiuos įsipareigojimus jis vykdo bendradarbiaudamas su trečiosiose šalyse veikiančiomis Komisijos delegacijomis ir įgyvendinančiomis institucijomis. Dėl šios priežasties šias Komisijos struktūras sunku laikyti pavyzdžiu, nes jų negalima palyginti su decentralizuota pareigų ir funkcijų sistema mokslinių tyrimų srityje.

| 53. | Komisijos vidinis MTTP vertinimo tinklas yra neoficiali vertinimo strategijos plėtros ir vertinimų bendrųjų programų lygmeniu koordinavimo priemonė. Šis lankstus mechanizmas yra labai naudingas. |
| --- | --- |

53.

Komisijos vidinis MTTP vertinimo tinklas yra neoficiali vertinimo strategijos plėtros ir vertinimų bendrųjų programų lygmeniu koordinavimo priemonė. Šis lankstus mechanizmas yra labai naudingas.

| 55. | Naujausi Komisijos vidaus kontrolės standartų pakeitimai, priimti 2007 m. spalio 16 d. (SEC(2007) 1341), apima 21 vertinimo standartą, todėl klausimas apie atitiktį šiems standartams bus įtrauktas į generalinių direktoratų metines veiklos ataskaitas.
  Komisijos centrinės tarnybos, visų pirma Biudžeto GD, aktyviai dalyvauja vykdant įvairius su vertinimo procesu susijusius veiksmus.
  Tarnybų vykdomą vertinimo veiklą gali tikrinti vidaus auditoriai ir Komisijos vidaus audito tarnyba.
  Ateityje vertinant minimalius kokybės reikalavimus bus remiamasi neseniai Komisijos parengta Kokybės vertinimo sistema (3). Nuo 2007 m. būsimų poveikio vertinimų kokybės kontrolę vykdyti padeda Komisijos poveikio vertinimo valdyba. |
| --- | --- |

55.

Naujausi Komisijos vidaus kontrolės standartų pakeitimai, priimti 2007 m. spalio 16 d. (SEC(2007) 1341), apima 21 vertinimo standartą, todėl klausimas apie atitiktį šiems standartams bus įtrauktas į generalinių direktoratų metines veiklos ataskaitas.

Komisijos centrinės tarnybos, visų pirma Biudžeto GD, aktyviai dalyvauja vykdant įvairius su vertinimo procesu susijusius veiksmus.

Tarnybų vykdomą vertinimo veiklą gali tikrinti vidaus auditoriai ir Komisijos vidaus audito tarnyba.

Ateityje vertinant minimalius kokybės reikalavimus bus remiamasi neseniai Komisijos parengta Kokybės vertinimo sistema (3). Nuo 2007 m. būsimų poveikio vertinimų kokybės kontrolę vykdyti padeda Komisijos poveikio vertinimo valdyba.

| 56. | III priede pateiktas palyginimas apima Audito Rūmų tikrintą laikotarpį. Todėl jį rengiant nebuvo atsižvelgta į svarbius BP7 numatytus patobulinimus, ypač susijusius su naująja vertinimo strategija, aiškesne intervencijos logika ir darbo programose aiškiai nurodytais laukiamais rezultatais.
  Audito Rūmai nurodė kai kurias valstybes nares, kuriose atsakomybė už vertinimą ir finansavimą yra atskirta. Tačiau yra ir kitokių pavyzdžių (tokių kaip JK), kur vertinimas yra sudedamoji programos valdymo dalis (kaip ir Komisijoje). Audito Rūmų atliktas auditas parodė, kad išorės suinteresuotosios šalys yra patenkintos tuo, kaip Komisija užtikrina nepriklausomumą (žr. Audito Rūmų ataskaitos 58 dalį ir 4 diagramą). |
| --- | --- |

56.

III priede pateiktas palyginimas apima Audito Rūmų tikrintą laikotarpį. Todėl jį rengiant nebuvo atsižvelgta į svarbius BP7 numatytus patobulinimus, ypač susijusius su naująja vertinimo strategija, aiškesne intervencijos logika ir darbo programose aiškiai nurodytais laukiamais rezultatais.

Audito Rūmai nurodė kai kurias valstybes nares, kuriose atsakomybė už vertinimą ir finansavimą yra atskirta. Tačiau yra ir kitokių pavyzdžių (tokių kaip JK), kur vertinimas yra sudedamoji programos valdymo dalis (kaip ir Komisijoje). Audito Rūmų atliktas auditas parodė, kad išorės suinteresuotosios šalys yra patenkintos tuo, kaip Komisija užtikrina nepriklausomumą (žr. Audito Rūmų ataskaitos 58 dalį ir 4 diagramą).

| 59. | — | (pirma įtrauka) Sunku užtikrinti pakankamą aukšto lygio narių dalyvavimą ilgesniam laikotarpiui sudaromose vertinimo komisijose, |
| --- | --- | --- |

59.

—

(pirma įtrauka) Sunku užtikrinti pakankamą aukšto lygio narių dalyvavimą ilgesniam laikotarpiui sudaromose vertinimo komisijose,

| — | (antra įtrauka) Bendrosios programos lygmens vertinimo komisijos techninės užduotys nustatomos Komisijos sprendimu po intensyvių neoficialių konsultacijų su suinteresuotosiomis šalimis ir atsižvelgiant į oficialią nuomonę, kurią pareiškia iš valstybių narių ir asocijuotų šalių atstovų sudarytas BP7 programos komitetas. Tokia pati tvarka bus taikoma ir 2008 m. BP6 atliekant ex post vertinimą. |
| --- | --- |

—

(antra įtrauka) Bendrosios programos lygmens vertinimo komisijos techninės užduotys nustatomos Komisijos sprendimu po intensyvių neoficialių konsultacijų su suinteresuotosiomis šalimis ir atsižvelgiant į oficialią nuomonę, kurią pareiškia iš valstybių narių ir asocijuotų šalių atstovų sudarytas BP7 programos komitetas. Tokia pati tvarka bus taikoma ir 2008 m. BP6 atliekant ex post vertinimą.

| 62. | Komisija rekomenduoja vidutiniškai 0,5 % programos biudžeto skirti vertinimo veiklai. Faktiškai skiriamų išteklių dydis labai dideliu mastu priklauso nuo programos pobūdžio. |
| --- | --- |

62.

Komisija rekomenduoja vidutiniškai 0,5 % programos biudžeto skirti vertinimo veiklai. Faktiškai skiriamų išteklių dydis labai dideliu mastu priklauso nuo programos pobūdžio.

| 66. | Nors Komisija nemano, kad būtina steigti jungtinę vertinimo tarnybą, ji sutinka apsvarstyti kitas galimybes geresniam koordinavimui užtikrinti.
  Sąsają tarp vertinimo ir vadovybės sprendimų priėmimo proceso geriausiai gali būti užtikrinta, jeigu kiekvienas GD atliks vertinimo funkciją ir jeigu Komisijoje jau veikiančiam vidiniam MTTP vertinimo tinklui bus suteiktas naujas akstinas pasitelkiant centrines tarnybas. Tai atitinka teisės aktų kūrimo ir biudžeto sudarymo procesų reikalavimus pagal Finansinį reglamentą, 2007 m. Komisijos komunikatą dėl vertinimo ir procedūras įgyvendinant veikla pagrįstą valdymą. |
| --- | --- |

66.

Nors Komisija nemano, kad būtina steigti jungtinę vertinimo tarnybą, ji sutinka apsvarstyti kitas galimybes geresniam koordinavimui užtikrinti.

Sąsają tarp vertinimo ir vadovybės sprendimų priėmimo proceso geriausiai gali būti užtikrinta, jeigu kiekvienas GD atliks vertinimo funkciją ir jeigu Komisijoje jau veikiančiam vidiniam MTTP vertinimo tinklui bus suteiktas naujas akstinas pasitelkiant centrines tarnybas. Tai atitinka teisės aktų kūrimo ir biudžeto sudarymo procesų reikalavimus pagal Finansinį reglamentą, 2007 m. Komisijos komunikatą dėl vertinimo ir procedūras įgyvendinant veikla pagrįstą valdymą.

| 67. | Komisija sutinka, kad vertinimo komisijos gali vaidinti labai svarbų vaidmenį atliekant vertinimą. Nors ji taip pat sutinka, kad tokios komisijos turi būti sudaromos kuo anksčiau, kad galėtų prisidėti prie konkretaus vertinimo atlikimo, Komisija nemano, kad būtų tikslinga sudaryti nuolatines komisijas visam programavimo laikotarpiui.
  Labiau tikėtina, kad speciali konkrečiam tikslui sudaryta vertinimo komisija užtikrintų didesnį aiškumą ir veiklos tikslingumą. |
| --- | --- |

67.

Komisija sutinka, kad vertinimo komisijos gali vaidinti labai svarbų vaidmenį atliekant vertinimą. Nors ji taip pat sutinka, kad tokios komisijos turi būti sudaromos kuo anksčiau, kad galėtų prisidėti prie konkretaus vertinimo atlikimo, Komisija nemano, kad būtų tikslinga sudaryti nuolatines komisijas visam programavimo laikotarpiui.

Labiau tikėtina, kad speciali konkrečiam tikslui sudaryta vertinimo komisija užtikrintų didesnį aiškumą ir veiklos tikslingumą.

| 68. | Komisija atidžiai įvertins bendrųjų programų vertinimui per ateinančius metus reikalingų išteklių poreikius. |
| --- | --- |

68.

Komisija atidžiai įvertins bendrųjų programų vertinimui per ateinančius metus reikalingų išteklių poreikius.

| 70–71. | Metodinės vertinimo gairės, galimos naudoti priemonės ir specialių terminų žodynėlis yra pateikti Biudžeto GD vadove (4), kurį šiuo metu atnaujina įvairios tarnybos, įskaitant mokslinių tyrimų generalinius direktoratus.
  Be to, 2002 m. Įmonių GD parengė specialias vertinimo gaires, kuriose apibrėžtos visos veiklos sritys, už kurias yra atsakingas GD, įskaitant bendrąsias programas.
  Bus svarstomos naujos iniciatyvos, kurios turėtų padėti iš naujo pradėjusiam veikti Europos MTTP vertinimo tinklui (jį sudaro valstybių narių ir asocijuotų šalių ekspertai) ir Komisijos vidiniam MTTP vertinimo tinklui. Komisija ir toliau rems savarankiškas vertinimo metodikos tyrimus ir šia tema rengiamus seminarus. |
| --- | --- |

70–71.

Metodinės vertinimo gairės, galimos naudoti priemonės ir specialių terminų žodynėlis yra pateikti Biudžeto GD vadove (4), kurį šiuo metu atnaujina įvairios tarnybos, įskaitant mokslinių tyrimų generalinius direktoratus.

Be to, 2002 m. Įmonių GD parengė specialias vertinimo gaires, kuriose apibrėžtos visos veiklos sritys, už kurias yra atsakingas GD, įskaitant bendrąsias programas.

Bus svarstomos naujos iniciatyvos, kurios turėtų padėti iš naujo pradėjusiam veikti Europos MTTP vertinimo tinklui (jį sudaro valstybių narių ir asocijuotų šalių ekspertai) ir Komisijos vidiniam MTTP vertinimo tinklui. Komisija ir toliau rems savarankiškas vertinimo metodikos tyrimus ir šia tema rengiamus seminarus.

| 72. | Komisija sutinka, kad įprasto duomenų rinkimo iš konkrečių projektų procesas iki šiol buvo tik iš dalies veiksmingas. Projekto ataskaitų teikimo procedūros buvo peržiūrėtos dar įgyvendinant BP6; jos bus toliau tobulinamos įgyvendinant BP7 (pvz., periodinių ataskaitų teikimo reikalavimai bus supaprastinti; tarpinių klausimynų buvo atsisakyta; galutinių ataskaitų rengimas pasidarys naudingesnis, ypač kiek tai susiję su duomenų apie projektų įgyvendinimą ir rezultatus rinkimu). |
| --- | --- |

72.

Komisija sutinka, kad įprasto duomenų rinkimo iš konkrečių projektų procesas iki šiol buvo tik iš dalies veiksmingas. Projekto ataskaitų teikimo procedūros buvo peržiūrėtos dar įgyvendinant BP6; jos bus toliau tobulinamos įgyvendinant BP7 (pvz., periodinių ataskaitų teikimo reikalavimai bus supaprastinti; tarpinių klausimynų buvo atsisakyta; galutinių ataskaitų rengimas pasidarys naudingesnis, ypač kiek tai susiję su duomenų apie projektų įgyvendinimą ir rezultatus rinkimu).

| 74. | Mokslinių tyrimų generaliniai direktoratai kartu su Informatikos GD šiuo metu rengia naują BP7 skirtą IT sistemą. Tokia tobulesnė IT sistema užtikrins tvirtesnį vertinimo ir stebėsenos pagrindą. |
| --- | --- |

74.

Mokslinių tyrimų generaliniai direktoratai kartu su Informatikos GD šiuo metu rengia naują BP7 skirtą IT sistemą. Tokia tobulesnė IT sistema užtikrins tvirtesnį vertinimo ir stebėsenos pagrindą.

| 76–78. | Per audito laikotarpį vertinimo duomenų rinkimas buvo tik iš dalies veiksmingas. Įgyvendindama BP7 Komisija numato atlikti tam tikrus patobulinimus (žr. pastabą dėl 72 dalies). |
| --- | --- |

76–78.

Per audito laikotarpį vertinimo duomenų rinkimas buvo tik iš dalies veiksmingas. Įgyvendindama BP7 Komisija numato atlikti tam tikrus patobulinimus (žr. pastabą dėl 72 dalies).

| 79. | Komisija siekia skatinti vykdyti Audito Rūmų siūlomų rūšių kiekybinius tyrimus. |
| --- | --- |

79.

Komisija siekia skatinti vykdyti Audito Rūmų siūlomų rūšių kiekybinius tyrimus.

| 81. | Komisijos nuomone, pastaruoju metu buvo atlikta nemažai metodikos požiūriu įdomesnių vertinimų (žr. 84 dalį), bet būtina atskirti plataus masto ir labiau įprastus vertinimus. |
| --- | --- |

81.

Komisijos nuomone, pastaruoju metu buvo atlikta nemažai metodikos požiūriu įdomesnių vertinimų (žr. 84 dalį), bet būtina atskirti plataus masto ir labiau įprastus vertinimus.

| 82. | Komisija pripažįsta, kad apskritai atliekant vertinimus didesnis dėmesys buvo skirtas trumpesnio laikotarpio rezultatams, ir sutinka, kad dar yra neišnaudotų galimybių analizuoti išdavas ir poveikius. Tačiau šį požiūrį būtina pagrįsti ilgalaikėmis perspektyvomis, todėl Komisijos atliekami vertinimai paprastai yra panašūs į vertinimus kitose srityse. |
| --- | --- |

82.

Komisija pripažįsta, kad apskritai atliekant vertinimus didesnis dėmesys buvo skirtas trumpesnio laikotarpio rezultatams, ir sutinka, kad dar yra neišnaudotų galimybių analizuoti išdavas ir poveikius. Tačiau šį požiūrį būtina pagrįsti ilgalaikėmis perspektyvomis, todėl Komisijos atliekami vertinimai paprastai yra panašūs į vertinimus kitose srityse.

| 83. | Komisija siekia užtikrinti vertinimo ekspertų nepriklausomumą, ypač kiek tai susiję su atitinkamos metodikos pasirinkimu.
  Siūloma 2008 m. atliekant BP6 ex post vertinimą atlikti elgsenos papildomumo studijas, tinklo analizę ir mokslometrinių metodų taikymo studijas. |
| --- | --- |

83.

Komisija siekia užtikrinti vertinimo ekspertų nepriklausomumą, ypač kiek tai susiję su atitinkamos metodikos pasirinkimu.

Siūloma 2008 m. atliekant BP6 ex post vertinimą atlikti elgsenos papildomumo studijas, tinklo analizę ir mokslometrinių metodų taikymo studijas.

| 84. | Nepriklausomas ekspertas atliko ankstesnių vertinimų pagal 2004 m. penkerių metų vertinimą (1999–2003) (5) tyrimų metaanalizę.






  — | (antra įtrauka) Be Audito Rūmų minėtų tyrimų, 2007 m (6). buvo pradėti ir kiti svarbūs tyrimai. |
| --- | --- | --- |

84.

Nepriklausomas ekspertas atliko ankstesnių vertinimų pagal 2004 m. penkerių metų vertinimą (1999–2003) (5) tyrimų metaanalizę.

—

(antra įtrauka) Be Audito Rūmų minėtų tyrimų, 2007 m (6). buvo pradėti ir kiti svarbūs tyrimai.

| 85. | Komisija sutinka, kad būtina ir toliau kurti naujus metodus, atsižvelgiant į besikeičiantį bendrųjų programų pobūdį. Komisija visada rėmė ir toliau rems šį metodinį darbą. |
| --- | --- |

85.

Komisija sutinka, kad būtina ir toliau kurti naujus metodus, atsižvelgiant į besikeičiantį bendrųjų programų pobūdį. Komisija visada rėmė ir toliau rems šį metodinį darbą.

| 86. | Kadangi 2004 m. penkerių metų laikotarpio (1999–2003) vertinimo techninėje užduotyje išvardyti klausimai buvo tik orientaciniai, vertinimo komisija galėjo savo nuožiūra pasirinkti sritis, kurioms galėjo skirti daugiau dėmesio ir nustatyti savo darbo ypatumus. Vertinimo komisijos nariai yra pateikę savo pastabų dėl šio proceso tobulinimo (7). |
| --- | --- |

86.

Kadangi 2004 m. penkerių metų laikotarpio (1999–2003) vertinimo techninėje užduotyje išvardyti klausimai buvo tik orientaciniai, vertinimo komisija galėjo savo nuožiūra pasirinkti sritis, kurioms galėjo skirti daugiau dėmesio ir nustatyti savo darbo ypatumus. Vertinimo komisijos nariai yra pateikę savo pastabų dėl šio proceso tobulinimo (7).

| 87. | Mokslinių tyrimų programos pobūdis dėl savo didelio neapibrėžtumo lemia tai, kad kiekybiškai išmatuojami tikslai gali būti apibrėžti tik labai ribotu mastu. |
| --- | --- |

87.

Mokslinių tyrimų programos pobūdis dėl savo didelio neapibrėžtumo lemia tai, kad kiekybiškai išmatuojami tikslai gali būti apibrėžti tik labai ribotu mastu.

| 90. | 2007 m. Komisija vėl pradėjo naudotis savo Europos MTTP vertinimo tinklu, kurį sudaro valstybių narių vertinimo pareigūnai ir ekspertai ir dabar ketina panaudoti šį tinklą, kad pasiektų didesnę ES atliekamų mokslinių tyrimų darbų vertinimų darną, ypač valstybių narių lygmeniu vykdomų poveikio tyrimų atžvilgiu. |
| --- | --- |

90.

2007 m. Komisija vėl pradėjo naudotis savo Europos MTTP vertinimo tinklu, kurį sudaro valstybių narių vertinimo pareigūnai ir ekspertai ir dabar ketina panaudoti šį tinklą, kad pasiektų didesnę ES atliekamų mokslinių tyrimų darbų vertinimų darną, ypač valstybių narių lygmeniu vykdomų poveikio tyrimų atžvilgiu.

| 91. | Komisija įvertins galimybę parengti naują bendrųjų programų vertinimo vadovą, atsižvelgiant į neseniai parengtus pavyzdžius (8). |
| --- | --- |

91.

Komisija įvertins galimybę parengti naują bendrųjų programų vertinimo vadovą, atsižvelgiant į neseniai parengtus pavyzdžius (8).

| 92. | Projekto ataskaitų teikimo tvarka buvo peržiūrėta įgyvendinant BP6, ji bus tobulinama įgyvendinant BP7 (žr. pastabą dėl 72 dalies). |
| --- | --- |

92.

Projekto ataskaitų teikimo tvarka buvo peržiūrėta įgyvendinant BP6, ji bus tobulinama įgyvendinant BP7 (žr. pastabą dėl 72 dalies).

| 93. | Šiuo metu Komisija rengia stebėsenos bendrųjų programų lygmeniu sistemą, kuri bus taikoma BP7 ir kuri užtikrins nuoseklesnį ir labiau sistemingą veiklos rodiklių naudojimą (žr. pastabą dėl 30 dalies).
  Mokslinių tyrimų generaliniai direktoratai kartu su Informatikos GD šiuo metu rengia naują BP7 skirtą IT sistemą. Tobulesnė IT sistema užtikrins tvirtesnį vertinimo ir stebėsenos pagrindą. |
| --- | --- |

93.

Šiuo metu Komisija rengia stebėsenos bendrųjų programų lygmeniu sistemą, kuri bus taikoma BP7 ir kuri užtikrins nuoseklesnį ir labiau sistemingą veiklos rodiklių naudojimą (žr. pastabą dėl 30 dalies).

Mokslinių tyrimų generaliniai direktoratai kartu su Informatikos GD šiuo metu rengia naują BP7 skirtą IT sistemą. Tobulesnė IT sistema užtikrins tvirtesnį vertinimo ir stebėsenos pagrindą.

| 94. | Komisija pritaria Audito Rūmų išreikštam susirūpinimui dėl ataskaitų teikimo naštos ir į tai atsižvelgė apibrėždama ataskaitų teikimo reikalavimus pagal BP7 (žr. pastabą dėl 72 dalies). |
| --- | --- |

94.

Komisija pritaria Audito Rūmų išreikštam susirūpinimui dėl ataskaitų teikimo naštos ir į tai atsižvelgė apibrėždama ataskaitų teikimo reikalavimus pagal BP7 (žr. pastabą dėl 72 dalies).

| 95. | Šiuo metu Komisija deda nemažai pastangų siekdama įvertinti esamus ir naujus vertinimui ir stebėsenai reikalingų duomenų šaltinius (žr. pastabą dėl 72 dalies). |
| --- | --- |

95.

Šiuo metu Komisija deda nemažai pastangų siekdama įvertinti esamus ir naujus vertinimui ir stebėsenai reikalingų duomenų šaltinius (žr. pastabą dėl 72 dalies).

| 96. | Pagal BP7 numatytas atskiras veiksmų planas pagal 8 temą (socialiniai ir humanitariniai mokslai), pagal kurį bus nagrinėjamos naujoviškos vertinimo ir stebėsenos metodikos. |
| --- | --- |

96.

Pagal BP7 numatytas atskiras veiksmų planas pagal 8 temą (socialiniai ir humanitariniai mokslai), pagal kurį bus nagrinėjamos naujoviškos vertinimo ir stebėsenos metodikos.

| 97. | 2007 m. Komisija vėl pradėjo naudotis savo Europos MTTP vertinimo tinklu (žr. pastabas dėl 70–71 ir 90 dalių), kurį ketina panaudoti, kad pasiektų didesnę ES atliekamų mokslinių tyrimų darbų vertinimų darną, ypač valstybių narių lygmeniu vykdomų poveikio tyrimų atžvilgiu.
  Komisija taip pat ketina išlaikyti pirmaujančią poziciją teikiant paramą tarptautinių tinklų kūrimui ir keitimuisi mokslinių tyrimų vertinimo patirtimi per seminarus ir kitus renginius. |
| --- | --- |

97.

2007 m. Komisija vėl pradėjo naudotis savo Europos MTTP vertinimo tinklu (žr. pastabas dėl 70–71 ir 90 dalių), kurį ketina panaudoti, kad pasiektų didesnę ES atliekamų mokslinių tyrimų darbų vertinimų darną, ypač valstybių narių lygmeniu vykdomų poveikio tyrimų atžvilgiu.

Komisija taip pat ketina išlaikyti pirmaujančią poziciją teikiant paramą tarptautinių tinklų kūrimui ir keitimuisi mokslinių tyrimų vertinimo patirtimi per seminarus ir kitus renginius.

| 99. | Vertinimo laikas nustatomas atsižvelgiant į pagrindiniuose Europos Parlamento ir Tarybos priimtuose teisės aktuose nustatytus reikalavimus. Komisija pripažįsta, kad dar mažai žinoma ilgalaikį poveikį ir sutinka, kad šioje srityje galima padaryti daugiau. |
| --- | --- |

99.

Vertinimo laikas nustatomas atsižvelgiant į pagrindiniuose Europos Parlamento ir Tarybos priimtuose teisės aktuose nustatytus reikalavimus. Komisija pripažįsta, kad dar mažai žinoma ilgalaikį poveikį ir sutinka, kad šioje srityje galima padaryti daugiau.

| 100. | Komisija sutinka, kad atliekant penkerių metų laikotarpio vertinimus daugiau dėmesio buvo skiriama trumpalaikiam, o ne ilgesnio laikotarpio vertinimui. Tai galima paaiškinti keliomis aplinkybėmis, įskaitant išorės suinteresuotųjų šalių, tokių kaip Europos Parlamentas ir Taryba, norą kuo greičiau gauti informacijos apie bendrųjų programų veiklos rezultatus, sunkumus vertinant mokslinių tyrimų poveikį ilguoju laikotarpiu ir vertinimą atliekančių nepriklausomų vertinimo komisijų pasirinktą poziciją. Tačiau Komisija pripažįsta, kad būtina didesnį dėmesį skirti ilgalaikio poveikio vertinimui. |
| --- | --- |

100.

Komisija sutinka, kad atliekant penkerių metų laikotarpio vertinimus daugiau dėmesio buvo skiriama trumpalaikiam, o ne ilgesnio laikotarpio vertinimui. Tai galima paaiškinti keliomis aplinkybėmis, įskaitant išorės suinteresuotųjų šalių, tokių kaip Europos Parlamentas ir Taryba, norą kuo greičiau gauti informacijos apie bendrųjų programų veiklos rezultatus, sunkumus vertinant mokslinių tyrimų poveikį ilguoju laikotarpiu ir vertinimą atliekančių nepriklausomų vertinimo komisijų pasirinktą poziciją. Tačiau Komisija pripažįsta, kad būtina didesnį dėmesį skirti ilgalaikio poveikio vertinimui.

| 108. | Komisija šiuo metu planuoja pagrindinius vertinimus pagal BP7 ir atidžiai atsižvelgs į Audito Rūmų rekomendaciją. Komisija pripažįsta, kad dar mažai žinoma apie ilgalaikį poveikį, ir sutinka, kad šioje srityje galima padaryti daugiau. |
| --- | --- |

108.

Komisija šiuo metu planuoja pagrindinius vertinimus pagal BP7 ir atidžiai atsižvelgs į Audito Rūmų rekomendaciją. Komisija pripažįsta, kad dar mažai žinoma apie ilgalaikį poveikį, ir sutinka, kad šioje srityje galima padaryti daugiau.

| 109. | Kaip Audito Rūmų nurodyta 107 dalyje, Komisija pateikia visų nustatytų faktų ir priemonių, kurių imtasi mokslinių tyrimų vertinimo srityje, santrauką savo metinėje vertinimų apžvalgoje. Komisija yra įsipareigojusi užtikrinti visišką jos atliekamo vertinimo darbo skaidrumą ir atsižvelgs į Audito Rūmų rekomendaciją peržiūrėti išvadų perdavimo ir sklaidos praktiką. |
| --- | --- |

109.

Kaip Audito Rūmų nurodyta 107 dalyje, Komisija pateikia visų nustatytų faktų ir priemonių, kurių imtasi mokslinių tyrimų vertinimo srityje, santrauką savo metinėje vertinimų apžvalgoje. Komisija yra įsipareigojusi užtikrinti visišką jos atliekamo vertinimo darbo skaidrumą ir atsižvelgs į Audito Rūmų rekomendaciją peržiūrėti išvadų perdavimo ir sklaidos praktiką.

| 110–111. | Komisija sutinka su Audito Rūmų nuomone, kad mokslinių tyrimų vertinimas, ypač įgyvendinant tokią plataus masto programą kaip bendroji programa, yra itin sunki užduotis.
  Komisija pastebi, kad per pastaruosius 25 metus sistema buvo gerokai patobulinta ir kad apskritai sistema buvo naudinga politikos formuotojams, mokslinių tyrimų vadovams ir kitoms suinteresuotosioms šalims. |
| --- | --- |

110–111.

Komisija sutinka su Audito Rūmų nuomone, kad mokslinių tyrimų vertinimas, ypač įgyvendinant tokią plataus masto programą kaip bendroji programa, yra itin sunki užduotis.

Komisija pastebi, kad per pastaruosius 25 metus sistema buvo gerokai patobulinta ir kad apskritai sistema buvo naudinga politikos formuotojams, mokslinių tyrimų vadovams ir kitoms suinteresuotosioms šalims.

| 112. | Komisija sutinka su Audito Rūmų pastaba, kad bendrąsias programas įgyvendinantys generaliniai direktoratai vykdė Komisijos reikalavimus, įskaitant 2000 ir 2002 m. komunikatuose dėl vertinimo nurodytus reikalavimus.
  Bendrųjų programų vertinimo srityje jau buvo atlikti reikšmingi pakeitimai, įskaitant esminį pertvarkymą, skirtą BP7, kaip nurodyta poveikio vertinime (SEC(2005) 430) pateiktoje strategijoje. |
| --- | --- |

112.

Komisija sutinka su Audito Rūmų pastaba, kad bendrąsias programas įgyvendinantys generaliniai direktoratai vykdė Komisijos reikalavimus, įskaitant 2000 ir 2002 m. komunikatuose dėl vertinimo nurodytus reikalavimus.

Bendrųjų programų vertinimo srityje jau buvo atlikti reikšmingi pakeitimai, įskaitant esminį pertvarkymą, skirtą BP7, kaip nurodyta poveikio vertinime (SEC(2005) 430) pateiktoje strategijoje.

| 113. | Dėl vertinimo aktualumo ir naudingumo, Komisija gali nurodyti iš esmės teigiamus atsiliepimus, ypač dėl naujausių jos atliktų vertinimų, pavyzdžiui, 2004 m. penkerių metų laikotarpio vertinimo (1999–2003). Penkerių metų laikotarpio vertinimo rezultatai buvo plačiai skelbiami, jie buvo pristatyti tokioms pagrindinėms institucijoms kaip Europos Parlamentas, Taryba, Mokslinių ir techninių tyrimų komitetas (CREST) ir Bendrosios programos komitetas. Kadangi šį vertinimą buvo privaloma atlikti prieš Komisijai teikiant pasiūlymą dėl naujosios bendrosios programos (šiuo atveju BP7), galiausiai priimta BP7 programa įrodo, kad vertinimo rezultatai buvo visuotinai pripažinti.
  Tai nereiškia, kad proceso negalima toliau tobulinti, ir Komisija sutinka, kad būtina toliau atlikti gerai apgalvotus pakeitimus, grindžiamus konkrečiais šiuo metu jau veiksmingai naudojamo metodo elementais. |
| --- | --- |

113.

Dėl vertinimo aktualumo ir naudingumo, Komisija gali nurodyti iš esmės teigiamus atsiliepimus, ypač dėl naujausių jos atliktų vertinimų, pavyzdžiui, 2004 m. penkerių metų laikotarpio vertinimo (1999–2003). Penkerių metų laikotarpio vertinimo rezultatai buvo plačiai skelbiami, jie buvo pristatyti tokioms pagrindinėms institucijoms kaip Europos Parlamentas, Taryba, Mokslinių ir techninių tyrimų komitetas (CREST) ir Bendrosios programos komitetas. Kadangi šį vertinimą buvo privaloma atlikti prieš Komisijai teikiant pasiūlymą dėl naujosios bendrosios programos (šiuo atveju BP7), galiausiai priimta BP7 programa įrodo, kad vertinimo rezultatai buvo visuotinai pripažinti.

Tai nereiškia, kad proceso negalima toliau tobulinti, ir Komisija sutinka, kad būtina toliau atlikti gerai apgalvotus pakeitimus, grindžiamus konkrečiais šiuo metu jau veiksmingai naudojamo metodo elementais.

| 114. | Komisija sutinka su Audito Rūmų nuomone dėl vertinimo ir stebėsenos svarbos ir, remdamasi jau atliktais teigiamais pakeitimais, sieks atnaujinti taikomą praktiką atsižvelgdama į naujas politikos ir praktikos realijas. |
| --- | --- |

114.

Komisija sutinka su Audito Rūmų nuomone dėl vertinimo ir stebėsenos svarbos ir, remdamasi jau atliktais teigiamais pakeitimais, sieks atnaujinti taikomą praktiką atsižvelgdama į naujas politikos ir praktikos realijas.

| 115. | Komisija jau yra įsipareigojusi užtikrinti aiškesnę programų intervencijos logiką, remdamasi BP7 teisės aktuose įtvirtintais laimėjimais bei poveikio vertinimais, ir atsižvelgs į Audito Rūmų rekomendacijas dėl būsimų teisės aktų pasiūlymų. |
| --- | --- |

115.

Komisija jau yra įsipareigojusi užtikrinti aiškesnę programų intervencijos logiką, remdamasi BP7 teisės aktuose įtvirtintais laimėjimais bei poveikio vertinimais, ir atsižvelgs į Audito Rūmų rekomendacijas dėl būsimų teisės aktų pasiūlymų.

| 116. | Pripažindama reikšmingus jau atliktus bendrųjų programų vertinimo proceso patobulinimus, Komisija sutinka, kad yra dar tobulintinų dalykų, įskaitant glaudesnį įvairių susijusių tarnybų bendradarbiavimą veiklos lygmeniu. Komisija ir toliau dės pastangas remti vertinimo metodikos gerinimą. |
| --- | --- |

116.

Pripažindama reikšmingus jau atliktus bendrųjų programų vertinimo proceso patobulinimus, Komisija sutinka, kad yra dar tobulintinų dalykų, įskaitant glaudesnį įvairių susijusių tarnybų bendradarbiavimą veiklos lygmeniu. Komisija ir toliau dės pastangas remti vertinimo metodikos gerinimą.

| 117. | Dėl organizacinės tvarkos, Komisija mano, kad:






  — | (pirma įtrauka) vertinimo komisijos turėtų būti sudaromos kuo anksčiau, kad galėtų padėti atlikti konkretų vertinimą. Tačiau specialiosios vertinimo komisijos, sudaromos konkretiems tikslams, tikriausiai galėtų padėti užtikrinti didesnį aiškumą ir tikslingumą, |
| --- | --- | --- |

117.

Dėl organizacinės tvarkos, Komisija mano, kad:

—

(pirma įtrauka) vertinimo komisijos turėtų būti sudaromos kuo anksčiau, kad galėtų padėti atlikti konkretų vertinimą. Tačiau specialiosios vertinimo komisijos, sudaromos konkretiems tikslams, tikriausiai galėtų padėti užtikrinti didesnį aiškumą ir tikslingumą,

| — | (antra įtrauka) būtina geriau koordinuoti įvairių bendrąsias programas įgyvendinančių generalinių direktoratų darbą. Be naujosios BP7 vertinimo metodikos, šis tikslas bus pasiektas naudojant specialiąsias koordinavimo struktūras, kurios papildys Komisijos vidinį MTTP vertinimo tinklą, o ne įsteigiant jungtinę vertinimo tarnybą. |
| --- | --- |

—

(antra įtrauka) būtina geriau koordinuoti įvairių bendrąsias programas įgyvendinančių generalinių direktoratų darbą. Be naujosios BP7 vertinimo metodikos, šis tikslas bus pasiektas naudojant specialiąsias koordinavimo struktūras, kurios papildys Komisijos vidinį MTTP vertinimo tinklą, o ne įsteigiant jungtinę vertinimo tarnybą.

---

(1)  Komisijos komunikatas pavasario Europos Vadovų Tarybai – Įgyvendinant atnaujintą Lisabonos strategiją ekonomikos augimui ir darbo vietų kūrimui (COM(2006) 816).

(2)  Pavyzdžiui, Komisijos pasiūlymas dėl BP7 buvo parengtas remiantis išsamiu ex ante poveikio vertinimu, kurį atliekant buvo panaudotos ekonometrinio galimo mokslinių tyrimų veiklos poveikio tokioms sritims kaip ekonomikos augimas ir darbo vietų kūrimas modeliavimo priemonės (žr. Europos Komisija, Komisijos tarnybų darbinis dokumentas „Poveikio vertinimas ir Tarybos ir Europos Parlamento pasiūlymo dėl sprendimo dėl 7-osios bendrosios programos ex ante vertinimas (EB ir Euratomas)“, SEC(2005) 430). BP7 sprendimai sukuria aiškią struktūrą, kuri sujungia tikslus, loginį pagrindą ir veiklą. Be to, pagal BP7 priimti sprendimai dėl specialiosios programos apibrėžia tikslus, strategiją ir veiklos kryptis.

(3)  Kokybės vertinimo sistema (Quality Assessment Framework) skelbiama tinklavietėje http://ec.europa.eu/budget/documents/evaluation_en.htm.

(4)  Europos Komisija, Biudžeto GD, „Vertinant ES veiklą – praktinis Komisijos tarnybų vadovas“, 2004 m. liepos mėn., skelbiamas http://ec.europa.eu/budget/publications/other_en.htm.

(5)  Arnold E. „Ką vertinimo protokolas mums sako apie bendrosios programos įgyvendinimą“ („What the Evaluation Record tells us about the Framework Programme Performance“), 2004 m.

(6)  Mokslinių tyrimų generalinis direktoratas, „Bendrijos mokslinių tyrimų struktūrizuojantis poveikis – Mokslinių tyrimų ir technologijų plėtros (MTTP) bendrosios programos tinklo formavimo poveikis“, 2007 m.; Informacinės visuomenės ir žiniasklaidos generalinis direktoratas, „IST–RTD poveikio ES inovacijų sistemoms veiksmingumas“, 2007 m.

(7)  Žr. Mandl C. „Vertinant vertinimus, arba mokslinių tyrimų pagrindimas“ (,„Evaluating Evaluations or The Case for Action Research“) Austrian Platform Newsletter, Nr. 30, 2007 m. birželis.

(8)  Žr., pavyzdžiui, Europos Komisija, Jungtinis tyrimų centras, „Vertinant MTTP politikos socialinį ekonominį poveikį“ („Assessing the Socio-Economic Impact of RTD Policies“) (EPUB), 2002 m., ir Mančesterio universitetas, „Vertinant bendrųjų programų socialinį ekonominį poveikį“ („Assessing the Socio-economic Impacts of the Framework Programme“) (ASIF), 2002 m., abu skelbti http://circa.europa.eu/Public/irc/rtd/fiveyearasskb/library?l=/iii-knowledge_base/040-evaluation_methodolo&vm=detailed&sb=Title. Šie pranešimai buvo išplatinti ir įteikti Komisijos vardu vertinimus atliekantiems rangovams ir ekspertams.

---