EUROOPAN YHTEISÖJEN KOMISSIO 
Bryssel, 22.05.1996 
KOM(96)220 lopull. 
KOMISSION TIEDONANTO 
NEUVOSTOLLE JA EUROOPAN PARLAMENTILLE 
YHTEISÖN TOIMIEN ITSENÄINEN ULKOINEN VALVONTA JA ARVIOINTI 
TUTKIMUKSEN JA TEKNOLOGISEN KEHITTÄMISEN ALALLA 

YHTEENVETO 
Komissio pyrkii jatkuvasti ilmentämään ja edistämään yhteisön TTK-toimiin liittyvien 
pyrkimystensä uskottavuutta ja tehokkuutta. Niiden neljättä puiteohjelmaa ja siihen 
liittyviä erityisohjelmia koskevien viimeaikaisten oikeudellisten päätösten perusteella, 
joissa määrätään monimutkaisesta arviointijärjestelmästä ja sen perusteella toimivien 
itsenäisten ulkopuolisten asiantuntijoiden aktiivisesta roolista, komissio päätti tarkastella 
uudelleen yhteisön TTK:n arviointipyrkimyksiä. Tieteen ja tekniikan tutkimuskomitealta 
(CREST) pyydettiin neuvoa, minkä jälkeen CREST perusti alakomitean arviointia varten. 
Neuvoston tutkimusryhmälle ja ydinenergiakysymyksiä käsittelevälle ryhmälle, samoin 
kuin Euroopan parlamentin tutkimusta, teknologista kehittämistä ja energia-asioita 
käsittelevälle valiokunnalle (CERT) kerrottiin tapahtuneesta kehityksestä. 
Tässä tiedonannossa esitetään yhteenveto oikeudellisten päätösten edellyttämästä 
arvioinnista ja hahmotellaan järkiperäistettyä menetelmää pitäen mielessä CREST.iltä 
saadut neuvot. Menetelmä tuottaa tuloksia oikea-aikaisella ja tehokkaalla tavalla 
kustannus-hyöty -periaatetta noudattaen. Siinä keskitytään erityisohjelmien ja 
puiteohjelman jatkuvaan valvontaan sekä niiden joka viides vuosi suoritettavaan 
arviointiin. Edistymiskertomus laaditaan säännöllisesti ja Euroopan unionista tehdyn 
sopimuksen 130 p artiklan nojalla pyydetty vuosikertomus julkaistaan vuosittain. 
Menetelmä otettiin kokeiluluonteisesti käyttöön vuonna 1995 ja sitä tarkistetaan kolmen 
vuoden kuluttua sen täytäntöönpanon aloittamisesta. 
Menetelmä perustuu vankkaan komission jo aiemmista arvioinneista hankkimaan 
kokemuspohjaan ja siinä otetaan huomioon hiljattain esitetty aloite konkreettisista 
vaiheista kohti komission parhainta mahdollista arviointimenettelyä. Menetelmän 
pääpiirteenä on yhteisön TTK-toimien yhtenäisen valvonnan ja arvioinnin kehittäminen 
edelleen. Erityisesti menetelmässä: 
i) otetaan käyttöön jatkuva valvonta ja sitä kehitetään ohjelma-arvioinnin kautta 
kohti tieteellis-teknisen politiikan arviointia; 
ii) esitetään täytäntöönpanoperiaatteet; 
iii) edellytetään itsenäisten ulkopuolisten asiantuntijoiden asianmukaista apua; ja 
iv) menetelmän olisi ajoissa tuotettava tuloksia tulevista ohjelmapäätöksistä käytäviä 
keskusteluja varten. 
Komissio vastaa yhteisön TTK-pyrkimysten valvonnasta ja arvioinnista. Ulkopuolisten 
asiantuntijoiden ja laitosten osallistuminen ja menettelyjen avoimuus edistävät kuitenkin 
valvonnan ja arvioinnin riippumattomuutta ja. avoimuutta Lisäksi otetaan käyttöön uusi 
tulosvastuun taso julkaisemalla komission vastaukset puiteohjelman viisivuotisarvioinnin 
suorittaneen työryhmän esittämiin suosituksiin. Tämä edistää yhteisön TTK.n arvioinnin 
uskottavuutta. 
Komissio kehottaa tämän tiedonannon välityksellä neuvostoa ja Euroopan parlamenttia 
panemaan merkille tämän järkiperäistetyn menetelmän, jossa otetaan huomioon nykyiset 
valvontaa ja arviointia koskevat oikeudelliset vaatimukset. 
1. JOHDANTO 
Komission valkoisessa kirjassa "Kasvu, kilpailukyky ja työllisyys", KOM(93) 700 
lopullinen, mainittiin lisääntyneetTTK-pyrkimyksetjaniiden sopeuttaminen uusiin 
markkinaoloihin yhtenä pääkeinoista parantaa Euroopan teollista ja teknologista 
suorituskykyä. Arvioinnilla - sekä ohjelmien (niiden johdon, valvonnan laadun ja 
sisäisten menettelyjen tehokkuuden, jne.) arvioinnilla sekä tulosten (tieteellisen ja 
teknisen tietämyksen kasvun, tulosten levittämisen ja optimoinnin, TTK-tulosten 
teollisen hyödyntämisen ja niiden suhteen innovaatioprosesseihin, pitkäaikaisten 
taloudellisten ja sosiaalisten vaikutusten mittauksen, jne.) arvioinnilla - on tässä 
suhteessa tärkeä asema, sillä se myötävaikuttaa TTK-pyrkimysten tehokkaaseen 
toteuttamiseen, yhdenmukaisuuteen kaikkien asianomaisten toimintaohjelmien 
kanssa ja julkisten varojen parhaimpaan mahdolliseen käyttöön. 
Neljättä puiteohjelmaa1 ja sen erityisohjelmia koskevat oikeudelliset päätökset 
edellyttävät, että komissio toteuttaa monimutkaisen arviointijärjestelmän (ks. 
jäljempänä 3 kohta). Tässä tiedonannossa komissio esittää järkiperäistetyn 
menetelmän, joka tuottaa tuloksia oikea-aikaisella, tehokkaalla tavalla ja 
kustannus-hyötysuhde -periaatetta noudattaen. 
2. YHTEISÖN TTK:N ARVIOINTI PYRKI MY STEN KEHITTYMINEN 
Yhteisön TTK-toiminnan järjestelmällinen kehittyminen varmistettiin vuoden 1983 
toimintasuunnitelmalla2, mistä lähtien se on kehittynyt edelleen3. Ulkopuolisten 
asiantuntijoiden käyttö on ollut arvioinnin puolueettomuuden edistämisen 
pääpiirteenä. 
Neuvostoja Euroopan parlamentti kehottivat vuonna 1993 komissiota jatkamaan 
yhteisön TTK-ohjelmien arvioinnin uskottavuuden parantamista varmistaen 
samalla sen puolueettomuuden. Tämän jälkeen neljättä puiteohjelmaa koskeviin 
oikeudellisiin päätöksiin on sisältynyt arviointia koskevia lisävaatimuksia 
Puiteohjelman täytäntöönpanoon osallistuneet komission palveluyksiköt laativat 
vuonna 1994 mietinnön tämän alan neuvostolle ja Euroopan parlamentille 
annettavan vastauksen ensimmäisenä vaiheena. Asiakirja toimitettiin CREST:ille, 
CERT:ille ja Euroopan tiede-ja teknologiayleiskokoukselle (ESTA) 
Tässä asiakirjassa termi "neljäs puiteohjelma" käsittää kahdesta eri päätöksestä 
johtuvat yhteisön toimet: JL Päätös N:o 1110/94/EY Euroopan yhteisön neljännestä 
puiteohjelmasta tutkimusta, teknologista kehittämistäja esittelyä koskevien toimien 
osalta (1994 - 1998) ja Z Päätös N:o 94/268/Euratom Euroopan 
atomienergiayhteisöä koskevasta yhteisön tutkimus- ja koulutustoiminnan 
puiteohjelmasta (1994 - 1998) 
Neuvoston päätöslauselma 28 päivältä kesäkuuta 1983 
Tiedonanto neuvostolle yhteisön tutkimus- ja kehittämistoiminnan arviointiin 
liittyvästä yhteisön toimintasuunnitelmasta vuosille 1987 - 1991, COM(86) 660 
final, 20.11.1986 
3 
CREST antoi vuonna 1995 neuvoja4, joihin sisältyi CRESTiin arviointia 
käsittelevän alavaliokunnan perustaminen. Tutkimusryhmälle ja 
ydinenergiakysymyksiä käsittelevälle ryhmälle (neuvosto) ja CERT:ille 
(parlamentti) kerrottiin tästä kehityksestä. 
Komissio hyväksyi 21. maaliskuuta 1995 ohjelman5 "Terveestä ja tehokkaasta 
rahoituksen hoidosta (SEM 2000)", joka jakautuu kolmeen eri vaiheeseen. 
konsolidointi nykyisissä puitteissa, rahoituksen hoidon uudistus ja kumppanuus 
jäsenvaltioiden kanssa. Hyväksyessään tämän ohjelman toisen vaiheen komissio 
otti käyttöön muun muassa vaatimuksen kaikkien yhteisön ohjelmien ja toimien 
järjestelmällisestä arvioinnista ja selvensi, että arviointityö on ensisijaisesti 
toiminnallisten pääosastojen vastuulla. 
3. NYKYTILANNE 
Neljättä puiteohjelmaa ja erityisohjelmia koskevat oikeudelliset päätökset6 
edellyttävät komissiolta (ks. taulukko 1): 
Puiteohjelman osalta. 
jatkuvaa ja järjestelmällistä edistymisen valvontaa suhteessa alkuperäisiin 
tavoitteisiin itsenäisten ulkopuolisten asiantuntijoiden asianmukaisella 
avustuksella (4 artiklan 1 kohta); ja 
itsenäisten pätevien asiantuntijoiden suorittamaa ulkopuolista arviointia 
sitä edeltävien viiden vuoden aikana tapahtuneesta yhteisön toimien 
hallinnoinnista ja edistyksestä sekä arvioinnin toimittamista komission 
esittämine huomautuksineen Euroopan parlamentille, neuvostolle sekä 
talous- ja sosiaalikomitealle ennen viidettä puiteohjelmaa koskevan 
ehdotuksen esittämistä (4 artiklan 2 kohta); 
CREST.in neuvot neuvostolle ja komissiolle yhteisön tutkimusohjelmien valvonta-
ja arviointimenettelyistä. Hyväksyttiin 18. toukokuuta 1995 pidetyssä CREST.in 
kokouksessa 
Puheenjohtajan, Anita Gradinin ja Erkki Liikasen muistiota koskeva suositus N:o 
4, SEK(95)1301/4, 22.7.1995 ja arviointia koskeva tiedonanto komissiolle 
(konkreettiset vaiheet komission parhainten mahdollisten menettelytapojen 
aikaansaamiseksi) SEK(96)659, annettu 9. päivänä huhtikuuta 1996. 
Neuvoston päätökset: 94/801/EY, 23.11.1994; 94/572/EY, 27.7.1994; 94/802/EY, 
23.11.1994; 94/571/EY, 27.7.1994; 94/803/EY, 23.11.1994; 94/91 l/EY, 
15.12.1994; 94/804/EY, 23.11.1994; 94/912/EY, 15.12.1994; 94/913/EY, 
15.12.1994; 94/805/EY, 23.11.1994; 94/806/EY, 23.11.1994; 94/914/EY, 
15.12.1994; 94/915/EY, 15.12.1994; 94/807/EY, 23.11.1994; 94/917/EY, 
15.12.1994;94/916/EY,15.12.1994;94/920/Euratom,15.12.1994;94/799/Euratom, 
8.12.1994; ja Yhteisen tutkimuskeskuksen täytäntöönpanemat neuvoston päätökset: 
94/918/EY, 15.12.1994; 94/919/Euratom, 15.12.1994 
Erityisohjelmien osalta: 
jatkuvaa ja järjestelmällistä ohjelman edistymistä koskevaa valvontaa 
itsenäisten ulkopuolisten asiantuntijoiden asianmukaisella avustuksella (4 
artiklan 1 kohta), 
itsenäisten pätevien asiantuntijoiden suorittamaa ulkopuolista arviointia 
ohjelman kattamilla aloilla suoritetuista toimista ja niiden hallinnoinnista 
tätä arviointia edeltävien viiden vuoden aikana (4 artiklan 2 kohta), 
ja kunkin erityisohjelman päättyessä riippumattomatonta loppuarviointia 
saavutetuista tuloksista tavoitteisiin suhteutettuina ja tämän arvioinnin 
toimittamista Euroopan parlamentille, neuvostolle sekä talous- ja 
sosiaalikomitealle (4 artiklan 3 kohta). 
Näiden oikeudellisten vaatimusten täytäntöönpano nykyisillä menetelmillä saattaisi 
johtaa seuraavaan: 
i) tarve tehdä kaksi suurehkoa arviointia (toinen neljännen puiteohjelman 
puolivälissä ja toinen sen päättyessä) kussakin tapauksessa noin 20 
ohjelmasta; 
ii) liian lyhyt aika näiden kahden arvioinnin välillä, jotta voitaisiin havaita 
merkittävää edistystä; 
iii) loppuarviointeja vaaditaan ennen kuin huomattavia T&T-tuloksia 
saavutetaan tai niiden vaikutukset ovat ilmeisiä; ja 
iv) vaatimus selventää niiden itsenäisten ulkopuolisten asiantuntijoiden roolia, 
jotka antaisivat "asianmukaista apua". 
4. SUUNTAUS KOHTI JÄRKIPERÄISTÄMISTÄ 
Seuraavassa kuvataan järkiperäistettyä lähestymistapaa, jota komissio aikoo 
noudattaa. Siinä otetaan huomioon CREST:in neuvot ja tarvittaessa SEM 2000 -
aloitteen periaatteet. 
4 1 Miten järkiperäistää 
CREST:in neuvoissa on tunnustettu, että edellä luetellut monimutkaiset 
arviointivaatimukset voidaan käytännössä täyttää järkiperäistetyllä 
lähestymistavalla samalla varoen byrokraattisuutta ja arviointia arvioinnin vuoksi 
(ks. taulukko 1). Ohjelman valvonta- ja arviointivaatimukset täytetään 
kahdenlaisilla puiteohjelmaan ja erityisohjelmiin liittyvillä toimilla: 
i) jatkuva valvonta itsenäisten ulkopuolisten asiantuntijoiden asianmukaisella 
avustuksella; ja 
ii) viisivuotisarviointi täytäntöönpanon puolivälissä. Itsenäiset ulkopuoliset 
asiantuntijat suorittavat tämän arvioinnin ja siihen sisältyy edelliseen 
puiteohjelmaan tukeutuva loppuarviointi. Kunkin meneillään olevan 
erityisohjelman loppuarviointi sisällytetään senjälkeiseen 
viisivuotisarviointiin. Täten kunkin ohjelman loppuarviointi (4 artiklan 3 
kohta) on riippumaton viisivuotisarvioinnista (4 artiklan 2 kohta). 
Nämä kaksi toimintaa, valvonta ja arviointi, ovat erillisiä ja toisistaan 
riippumattomia. 
Puiteohjelman viisivuotisarviointi annetaan tiedoksi, yhdessä komission 
huomautusten kanssa, Euroopan parlamentille, neuvostolle sekä talous- ja 
sosiaalikomitealle ennen seuraavaa puiteohjelmaa koskevan ehdotuksen esittämistä 
(4 artiklan 2 kohta). 
lisäksi CREST:in neuvoissa ehdotetaan, että käsiteltäviin kysymyksiin kuuluisi. 
hankkeiden valinnan yhdenmukaisuus erityisohjelman ja työohjelman 
tavoitteiden kanssa, 
laajuus, jossa valitut hankkeet tai hankeryppäät täyttävät yhteisön 
suurempien toimintaohjelmien tavoitteet erityisesti niillä alueilla, joilla on 
merkitystä kyseiselle erityisohjelmalle, 
hankkeiden edistyminen ja tulos asetettuihin alkuperäisiin tavoitteisiin 
nähden, 
tapaukset, joissa itsenäisten valvontaryhmien mielestä tuloksilla on 
erityisen tärkeitä vaikutuksia tai missä huono suoritus edellyttää 
jatkotarkastelua, 
ohjelman hallinnoinnin tehokkuus ja avoimuus, mukaan lukien 
tarjouskilpailujen kehittäminen, arviointi- ja valintaprosessi, 
sopimusneuvottelut ja varojen takaisinmaksut, samoin kuin komission 
sisäinen koordinointi, 
erityistoimenpiteiden ja tukitoimien käyttö (esim. pk-yritysten tukemiseksi, 
tiedon levittämisen parantamiseksi, jne), 
muutokset, joita voidaan tarvita ohjelman tasapainon tai 
täytäntöönpanostrategian kannalta kokemusten ja laajemman ympäristön 
muutosten perusteella. 
CREST:in neuvoissa ehdotetaan edelleen panos- ja tuotostoiminnan osoittimia 
valvonta- ja arviointiprosesseja varten (ks. jäljempänä 5 kohdan 1 alakohta). 
4.2 Miten maksimoida hyödyt 
Jäljempänä luonnostellaan ulkopuolisten asiantuntijoiden avustuksella toteutettava 
yhdenmukaistettu valvonta- ja arviointimenetelmä, jonka mukaan jatkuvan 
valvonnan kertomukset antavat aikanaan merkittäviä lisätietoja Euroopan unionista 
tehdyn sopimuksen 130 p artiklassa edellytettyyn vuosikertomukseen7. Ohjelmien 
viisivuotisarviointi antaa tärkeää sisältöä yhteisön tulevaa TTK-toimintaa 
koskeville keskusteluille. 
Tässä siirtymisessä kohti jatkuvaa valvontaa ja viisivuotisarviointia tuloksia on 
saatavilla, kun päätöksiä on tehtävä ja voidaan saada yleisnäkemys 
täytäntöönpanon tilasta säännöllisin väliajoin. Lisäksi arvioinnit muodostavat 
"yhtenäisen kokonaisuuden". Arvioinneista saatava opetukset koskevat 
erityisohjelmien ohella myös puiteohjelmaa ja koko yhteisön T&T-politiikkaa. 
Ulkopuolisten asiantuntijoiden ja elinten asianmukainen osallistuminen (erityisesti 
CREST ja ohjelmavaliokunnat) ja menettelyjen avoimuus edistävät arviointien 
riippumattomuutta ja avoimuutta samalla kun tunnustetaan tarve kunnioittaa 
tiettyjen tietojen luottamuksellisuutta. Ulkopuoliset asiantuntijat keskustelevat 
kertomuksistaan hankkeiden johtajien ja ohjelmavaliokuntien kanssa. Tämän 
menettelyn tulisi helpottaa asiantuntijoiden suositusten täytäntöönpanoa. Lisäksi 
käyttöön on otettu uusi tulosvastuun taso julkaisemalla komission vastaukset 
puiteohjelman viisivuotisarviointiryhmän antamiin suosituksiin 
Sopimus Euroopan unionista, 130 p artikla: "Jokaisen vuoden alussa komissio 
antaa Euroopan parlamentille ja neuvostolle kertomuksen. Kertomuksessa annetaan 
tiedot edellisen vuoden toiminnasta tutkimuksessaja teknologisessa kehittämisessä 
sekä tulosten levittämisessä sekä kuluvan vuoden työohjelmasta ." 
7 
5. ULKOINEN VALVONTA 
5 1 Eri tv i sohi el m at 
Ulkoisen seurannan päätehtävinä on arvioida ohjelmien edistymistä 
ohjelmajohtajien avustamiseksi mukauttamaan erityisohjelmat kehityskulkuun ja 
myötävaikuttaa tällaisten ohjelmien viisivuotisarviointiin. Valvonta on nopea 
vastausmekanismi, jolla saadaan vuositasolla kuva ohjelman kehityksestä. 
Valvonta perustuu ohjelmajohtajien jatkuvaan ja järjestelmälliseen tiedonkeruuseen 
erityisohjelmissa saavutetuista tuloksista ja edistyksestä. CREST:in avustuksella 
on erotettu joukko ohjelman suoritusta mittaavia osoittimia, jotka pääasiassa 
liittyvät neljännen puiteohjelman toiminnan 1 mukaisiin jaettujen kustannusten 
periaatteella toimiviin hankkeisiin. Muut erityisohjelmat, kuten tulosten 
. levittäminen ja lämpöydinfuusio, noudattavat erilaisia täytäntöönpanomenettelyjä, 
joihin voivat soveltua myös erilaiset suoritusosoittimet. Yhteisen 
tutkimuskeskuksen (YTK) osallistumista erityisohjelmiin tarkastellaan kuten mitä 
muuta osallistujaa tahansa, kun taas YTK:n suorasta toiminnasta raportoidaan 
"Johtokunnan YTK:n vuosikertomusta koskevissa havainnoissa", joka on välitön 
tuotos puiteohjelmaa koskevaa kokonaisvalvontaa ajatellen. 
Pieni itsenäisten asiantuntijoiden ryhmä, joka muodostaa ulkopuolisen 
näkemyksen, analysoi kunkin erityisohjelman osalta suoritusosoittimien sisältämät 
kutakin erityisohjelmaa koskevat asiaankuuluvat ja saatavissa olevat tiedot. 
Valvontaryhmät eivät kaksinkertaista ohjelmavaliokuntien tehtäviä eivätkä ne ole 
niiden kanssa ristiriidassa, vaan lisäävät ylimääräisen ulottuvuuden, eli 
riippumattoman arvioinnin kunkin erityisohjelman kokonaissuorituksesta ja 
saavutuksista. Valvontaryhmät arvioivat ohjelman tuloksia ohjelman tavoitteisiin 
ja sen täytäntöönpanon edistymiseen nähden. 
Kukin ryhmä esittää analyysinsä tulokset asianomaiselle ohjelmanjohdolle, joka 
ryhtyy asianmukaisiin toimenpiteisiin. 
5.2 Puiteohjelma 
Puiteohjelman valvonnassa arvioidaan vuosittain koko ohjelman täytäntöönpanoa, 
mikä myötävaikuttaa tämän ohjelman viisivuotisarviointiin. Itsenäisten 
asiantuntijoiden ryhmä tarkastelee erityisohjelmia koskevan valvonnan tuloksia ja 
arvioi kokonaiskehityksen suhteessa koko puiteohjelman täytäntöönpanon 
tavoitteisiin, painopistealueisiin ja edistymiseen. Arvioitaessa koko puiteohjelmaa 
myönteiset vaikutukset yhteisön teollisuuden tieteellisten ja teknologisten 
perustojen vahvistamisen tavoitteisiin ja kansainväliseen kilpailuun sekä 
myötävaikutus muiden yhteisön toimintaohjelmien täytäntöönpanoon otetaan myös 
huomioon. 
Ryhmä esittää analyysinsä tulokset puiteohjelman johdolle, joka ryhtyy 
asianmukaisiin toimenpiteisiin. 
8 
6. ERITYISOHJELMIEN JA PUITEOHJELMAN ULKOINEN 
VIISIVUOTISARVIOINTI 
Itsenäisten ulkopuolisten asiantuntijoiden ryhmä laatii erityisohjelmien ja koko 
puiteohjelman viisivuotisarvioinnit, jotka ajoitetaan siten, että ne antavat aineistoa 
tuleville yhteisön TTK-toimintaa koskeville oikeudellisille päätöksille. Vuotuiset 
valvontakertomukset, joita on edellä käsitelty tarkemmin, antavat myös tietoja 
viisivuotisarviointia varten, joka sisältää strategisemman ulottuvuuden. 
(Esimerkiksi pitkän aikavälin hankkeita, joita on kehitelty peräkkäisissä 
puiteohjelmissa, voidaan arvioida pitemmällä aikavälillä.) Nämä arvioinnit ovat 
valmiina, kun seuraavasta puiteohjelmaehdotuksesta keskustellaan. 
Viisivuotisarviointeihin, joihin kuuluu edellisen puiteohjelman mukaiset 
loppuarvioinnit, sisältyy kolme pääosaa, joissa kussakin keskitytään erillisiin, 
vaikkakin keskenään sidoksissa oleviin ominaisuuksiin: 
i) asiaankuuluvuuden arvioiminen, eli ovatko alkutavoitteet vielä voimassa 
kehittyvään T&T:hen sekä teollisiin ja sosiaalistaloudellisiin olosuhteisiin 
nähden; 
ii) tehokkuuden arvioiminen, eli onko tavoitteisiin pyritty kustannus-
hyötyperiaatteen mukaisesti, ja 
iii) toteutuneisuuden arvioiminen, eli onko alkutavoitteet saavutettu: 
tieteellisten ja teknologisten perustojen ja yhteisön teollisuuden 
kilpailukyvyn vahvistaminen samoin kuin panostukset kaikkiin 
asiaankuuluviin yhteisön toimintaohjelmiin. 
Erityistä huomiota kiinnitetään luotettavien menetelmien kehittämiseksi TTK-
hankkeiden tulosten arviointia varten. Tätä silmällä pitäen perustettiin väliaikainen 
teollisuuden edustajista koostuva työryhmä. Se suosittelee ulkopuolisella 
avustuksella yhteistä metodologiaa, jota käytetään TTK-hankkeiden, erityisesti 
teollista merkitystä omaavien hankkeiden, tulosten arvioinnissa 
Viisivuotisarvioinneissa voitaisiin kiinnittää erityisesti huomiota yhteisön ja 
kansallisten T&T-toimintaohjelmien väliseen yhtenäisyyteen niiden keskinäisen 
yhdenmukaisuuden edistämiseksi. 
Koska viisivuotisarviointiin kuuluu aikaisemman erityisohjelman loppuarviointi, 
erityisohjelmien arviointikertomukset toimitetaan Euroopan parlamentille, 
neuvostolle sekä talous-ja sosiaalikomitealle asiaankuuluvien päätösten 4 artiklan 
3 kohdassa edellytetyn mukaisesti. Puiteohjelman viisivuotisarviointikertomus 
komission huomautuksineen toimitetaan edellä mainituille elimille ennen seuraavaa 
puiteohjelmaa koskevan ehdotuksen esittämistä, kuten asianomaisen päätöksen 4 
artiklan 2 kohdassa edellytetään. 
7. TÄYTÄNTÖÖNPANO 
Komissio on vastuussa yhteisön TTK-pyrkimysten valvonnasta ja arvioinnista. 
CREST:iä, ohjelmavaliokuntia ja muita asianomaisia elimiä pyritään kuulemaan 
tarvittaessa. Itsenäisten ulkopuolisten asiantuntijoiden kanssa tehdään sopimuksia 
valvontatehtävistä ja viisivuotisarvioinnista sekä kertomusten laadinnasta. 
Erityisohjelmien valvontaryhmään kuuluu tavallisesti kolme asiantuntijaa, joilla 
on soveltuvat kokemustausta ja asema: yksi teollisuuden ja yksi korkeakoulujen 
edustaja ja yksi TTK-ohjelman arvioinnista kokemusta omaava asiantuntija 
Puiteohjelmien valvontaryhmiin kuuluu yleensä kuusi tai seitsemän asiantuntijaa. 
Suuremmasta luvusta kuvastuu heidän työnsä suurempi laajuus. Samanlaiseen 
teollisen, akateemisen ja ohjelma-arvioinnista saadun kokemuksen tasapainoon 
pyritään. 
Viisivuotisarviointeja suorittavien ryhmien koko, säilytettäessä asiantuntijoiden 
vähimmäismäärä, on hieman suurempi kuin valvontaryhmien. Erityisohjelma-
arviointiryhmien koko määritetään suhteessa asianomaisten ohjelmien tavoitteisiin 
ja laajuuteen. Puiteohjelman arviointia varten vaaditaan 6-8 asiantuntijan ryhmä. 
Viisivuotisarviointiryhmiin voi kuulua muutamia asiantuntijoita niihin liittyvistä 
valvontaryhmistä kummankin eri tehtävän jatkuvuuden varmistamiseksi. 
Asiantuntijoilla on monia erilaisia taustoja, jotka soveltuvat kyseiseen ohjelmaan 
ja heillä odotetaan olevan laajaa kokemusta horisontaalisten kysymysten 
täysipainoisesta tarkastelusta. 
Erityistä huomiota kiinnitetään valvonnan ja viisivuotisarvioinnin yhtenäisyyden 
varmistamiseen ja mahdollisimman suuren avoimuuden säilyttämiseen tehtävää 
suoritettaessa. 
Kertomuksia annetaan säännöllisesti kerran vuodessa, ja ne yhdistetään Euroopan 
unionista tehdyn sopimuksen 130 p artiklan nojalla vaaditun vuosikertomuksen 
julkaisemiseen. 
10 
8. AJOITUS 
Tämän ohjelman edellyttämät kaikki tarvittavat toimenpiteet toteutetaan 
mahdollisimman nopeasti. 
Vuoden 1995 valvonta on suoritettu loppuun. Erityisohjelmia ja koko 
puiteohjelmaa koskevat ulkopuolisten asiantuntijoiden kertomukset ovat saatavilla. 
Ensimmäisten tulevaa viisivuotisarviointia varten perustettujen ryhmien odotetaan 
aloittavan työskentelynsä vuoden 1996 kevään kuluessaja erityisohjelmia koskevia 
kertomuksia odotetaan vuoden 1996 kesään/syksyyn mennessä ja koko 
puiteohjelmaa koskevan kertomuksen oletetaan valmistuvan vuoden loppuun 
mennessä. 
Edellä ehdotettua järkiperäistettyä lähestymistapaa tarkastellaan kolmen 
täytäntöönpanovuoden jälkeen. 
PÄÄTELMÄT 
Säännöllisistä vuotuisista valvontakertomuksista ja 
viisivuotisarviointikertomuksista saadaan kattava yleisnäkemys ohjelmien 
hallinnoinnista (puiteohjelmasta ja erityisohjelmista), niiden täytäntöönpanosta ja 
saaduista hyödyistä. Ulkopuolisten asiantuntijoiden osallistuminen ja menettelyjen 
avoimuus edistävät valvonnan ja arvioinnin riippumattomuutta ja avoimuutta. 
Komission puiteohjelman viisivuotisarviointiryhmän suosituksiin antamien 
vastausten julkaisemisella saadaan aikaan uusi tulosvastuun taso. Asiantuntijoiden 
ja ohjelmajohtajien sekä valvonnan ja arvioinnin tuloksia käsittelevien 
ohjelmavaliokuntien välisillä kokouksilla varmistetaan yhteisymmärrys ja 
helpotetaan asianmukaisten suositusten täytäntöönpanoa. Kaikki nämä näkökohdat 
edistävät edelleen yhteisön TTK.n arviointipyrkimysten uskottavuutta. 
Viisivuotisarviointikertomukset annetaan Euroopan parlamentille, neuvostolle ja 
talous- ja sosiaalikomitealle, jolloin niistä saadaan aineksia yhteisön TTK-
toimintaa koskeville tuleville oikeudellisille päätöksille. 
Komissio kehottaa neuvostoa ja Euroopan parlamenttia tämän tiedonannon 
välityksellä panemaan merkille tämän järkiperäistetyn lähestymistavan, jossa 
otetaan huomioon valvontaa ja arviointia koskevat nykyiset lainsäädännölliset 
vaatimukset. 
11 
TAULUKKO 1: NYKYTILANNE v. EHDOTETTU OHJELMA 
7° 1990 1991 1992 1993 1994 1995 1996 1997 1998 1999 2000 2001 2002 VUOSI 
FP 3 : 1990-1994 
1. LAINSÄÄDÄNNÖLLISET VELVOITTEET 
{ FP3 
Erityisohjelmat 
FP? 
FP4 Tark. 
{ Täytäntöön­
panon tila 
Erityisohjelmat 
FP4 FP4 : 1994-1998 
Loppu­
arviointi 
Loppu­
arviointi 
5-vuotis-
arviointi 
Täytäntöön- 5-vuotis-
panon tila ; arviointi 
(*) <*> FP 5 : 1998-2002 
Loppu­
arviointi 
Jatkuva teuranta 
. Jatkuva seuranta ja 
raportointi kunkin vuoden 
alussa (*) 
EHDOTETTU 
OHJELMA: 
f-
FP3 4- FP4 (+ FP5 + ...) ( fcrityisohjelmat ^ 
l I"' i 5-vuolisarviointi 
(myös FP3:n loppuarviointii 
arvioitu ajanjakso: 1991-1995 5-vuotisarviotnti 
(myös FP4:n loppuarviointi) 
arvioitu ajanjakso: 1995-1999 
(*> (*) Jatkuva valvonta ja 
raportointi kurikin vuoden 
alussa (*) 
Huom. : nuolet osoittivat arvioidut ajanjaksot, joiden kuluessa arviointikertomukset olisi annettava. 
ISSN 1024-4492 
KOM(96) 220 lopullinen 
rVöXA. JxJ. lv J A. JL 
n is 
Luettelonumero : CB-CO-96-231-FI-C 
ISBN 92-78-04214-5 
Euroopan yhteisöjen virallisten julkaisujen toimisto 
L-2985 Luxemburg