++++

RESOLUTIE VAN DE RAAD

van 28 juni 1983

betreffende een communautair actieprogramma voor de evaluatie van communautaire onderzoek - en ontwikkelingsprogramma's

DE RAAD VAN DE EUROPESE GEMEENSCHAPPEN ,

Gelet op de Verdragen tot oprichting van de Europese Gemeenschappen ,

Gezien de mededeling van de Commissie houdende een communautair actieprogramma voor de evaluatie van communautaire onderzoek - en ontwikkelingsprogramma's ,

Gezien het advies van het Comité voor wetenschappelijk en technisch onderzoek ,

Overwegende dat de Raad er met nadruk op gewezen heeft dat het communautaire onderzoek resultaten moet opleveren die kunnen bijdragen tot het verwezenlijken van de economische , sociale en andere doelstellingen van de Gemeenschap en haar Lid-Staten en dat hij de Commissie heeft verzocht specifieke voorstellen uit te werken voor een systeem voor het evalueren van de resultaten van gemeenschappelijke O en O-programma's ;

Overwegende dat de Commissie aan de Raad een mededeling heeft doen toekomen betreffende de " Exploitatie en evaluatie van onderzoekresultaten " en dat het Comité voor wetenschappelijk en technisch onderzoek zijn instemming heeft betuigd met de algemene beleidslijnen voor de evaluatie die de Commissie in deze mededeling heeft voorgesteld ;

Overwegende dat in een experimentele fase met succes proeven zijn genomen met de evaluatiemethoden en -procedures die de Commissie in het actieprogramma wil gaan toepassen ; dat de aanpak van de Commissie op het gebied van evaluatie wordt gesteund door evaluatiedeskundigen en gebruikers van evaluatieresultaten op verschillende niveaus in de communautaire Instellingen en in de Lid-Staten ;

Overwegende dat de evaluatie deel uitmaakt van het permanente proces van het O en O-beleid voor de opzet , de uitvoering en de herziening van programma's ;

Overwegende dat evaluatie een essentiële factor vormt bij de tenuitvoerlegging van het kaderprogramma voor de wetenschappelijke en technische werkzaamheden van de Gemeenschap waarin een specifieke verwijzing naar de evaluatie zal worden opgenomen ;

Overwegende dat evaluatie er daadwerkelijk toe kan bijdragen dat tijdig besluiten worden genomen over het vaststellen van O en O-prioriteiten , de keuze van onderzoekgebieden en de toewijzing van financiële middelen , ten einde te voldoen aan de behoeften voor de nieuwe wetenschappelijke en technologische ontwikkelingen ;

Overwegende dat het nodig is de bestaande evaluatiemethoden , en meer in het bijzonder de evaluatie van de resultaten van de onderzoekprogramma's van de Gemeenschap , te versterken ten einde een bijdrage te leveren tot een efficiënte besluitvorming op het gebied van O en O ;

Overwegende dat het nodig is in de Gemeenschap de werkzaamheden op het gebied van de evaluatie te stimuleren met het oog op het ontwikkelen van methoden die de doelstellingen inzake evaluatie op bevredigende wijze helpen verwezenlijken ,

Erkent het belang dat door de Commissie aan het evaluatieproces wordt gehecht ,

Neemt met voldoening kennis van het door de Commissie voorgestelde en aan deze resolutie gehechte actieprogramma van drie jaar voor de evaluatie van communautaire O en O-programma's en erkent met name de deugdelijkheid van de door de Commissie beoogde methodologische aanpak ,

Neemt nota van de met het actieprogramma samenhangende bepalingen op het gebied van administratie , planning en begroting , zoals die door de Commissie zijn voorgesteld ,

Verzoekt de Commissie haar op dit gebied voorgestelde werkzaamheden voort te zetten en zo nodig in het licht van de opgedane ervaring een nieuwe mededeling aan de Raad te doen toekomen .

Communautair actieprogramma voor de evaluatie van communautaire onderzoek - en ontwikkelingsprogramma's

De evaluatie van communautaire onderzoek - en ontwikkelingsprogramma's

ACTIEPROGRAMMA

De activiteiten op het gebied van de evaluatie die in dit actieprogramma zijn opgenomen zullen een essentiële rol spelen bij de tenuitvoerlegging van het kaderprogramma dat de Commissie in december 1982 in haar mededeling , getiteld " Voorstellen voor een Europese strategie op wetenschappelijk en technisch gebied - Kaderprogramma 1984-1987 " aan de Raad voorlegde . Het actieprogramma omvat een drie jaar durende fase en wordt vanaf januari 1983 ten uitvoer gelegd . Aan het einde van deze fase zal de Commissie de met haar werkzaamheden behaalde resultaten bezien ten einde eventueel , rekening houdende met ontwikkelingen bij het kaderprogramma , een nieuwe mededeling in te dienen bij de Raad met het oog op de invoering van een volledig operationeel evaluatiesysteem .

Deze fase zal de Commissie in staat stellen de resultaten die zij tijdens het vorige experimentele tijdperk behaalde op een ruimere en meer systematische basis toe te passen . De evaluatiemethodes waarvan bij de uitvoering van de eerste experimenten gebruik werd gemaakt , zullen geleidelijk en te gelegener tijd worden toegepast op communautaire O en O-programma's .

Terzelfder tijd zal de Commissie de methodologie - en procedureaspecten verder uitwerken . Zij zal zich daarbij baseren op de resultaten van verder onderzoek op het gebied van de evaluatie en op de ervaring die is opgedaan met de verdere toepassing van de evaluatiemethode .

In het actieprogramma zijn de volgende maatregelen opgenomen :

1 . Verdere ontwikkeling van de bestaande interne methodes , waarbij de evaluatie plaatsvindt tijdens de tenuitvoerlegging van de O en O-programma's . Dit biedt de mogelijkheid de voortgang van de werkzaamheden op doeltreffende wijze te controleren en aan te passen aan zich wijzigende behoeften , prioriteiten en ontwikkelingen . De Raadgevende Comités inzake programmabeheer ( RCPB's ) spelen een belangrijke rol bij deze continue interne evaluatie . Ook een doeltreffend controle - en rapporteersysteem is van groot belang . Het is de bedoeling dat de RCPB's hun evaluatie van de resultaten die met de O en O-programma's zijn behaald , systematisch aan de Commissie mededelen alvorens een besluit tot herziening of uitbreiding van een programma wordt genomen .

2 . Retrospectieve beoordeling van de resultaten van communautaire O en O-programma's door groepen van externe , onafhankelijke deskundigen .

2.1 . De toegepaste evaluatiemethode is gebaseerd op het beginsel van de ex-post beoordeling van elk programma afzonderlijk door groepen van externe , onafhankelijke deskundigen .

Het gaat daarbij ook enigszins om ex-ante evaluatie , aangezien het de bedoeling is dat de groepen die met de evaluatie zijn belast , aanbevelingen voor de toekomstige oriëntering van de programma's formuleren op grond van de retrospectieve beoordeling .

De evaluatiemethode moet afgestemd zijn op de aard van het te evalueren programma alsmede op de procedures die voor de tenuitvoerlegging daarvan worden toegepast en moet derhalve soepel zijn .

De toe te passen evaluatiemethode zal verschillen al naar gelang van het type onderzoekwerkzaamheden :

a ) Voor de evaluatie van programma's inzake werkzaamheden voor gemeenschappelijke rekening ( werkzaamheden onder contract ) zal de zogenaamde " peer evaluation " -methode worden toegepast . De doelstellingen , die uiteraard zullen verschillen naar gelang van de aard van het programma en de behoeften van de gebruikers , zullen over het algemeen het volgende omvatten :

- vaststelling van de praktische bijdrage die met de programmaresultaten wordt geleverd tot de vooruitgang van het in de Gemeenschap op het betrokken gebied verrichte O en O-werk , tot de verwezenlijking van de doelstellingen van de Gemeenschap en tot de sociaal-economische ontwikkeling in de Gemeenschap in het algemeen ;

- evaluatie van de doeltreffendheid van het beheer en van de gebruikte middelen ;

- doen van aanbevelingen inzake de wijze waarop gebruik kan worden gemaakt van de onderzoekresultaten en inzake de toekomstige oriëntering van het programma .

b ) Voor de programma's van het Gemeenschappelijk Centrum voor Onderzoek ( GCO ) zal de door de Commissie voorgestelde methode worden toegepast voor de evaluatie van twee verschillende aspecten .

In de eerste plaats moeten voor elk programma afzonderlijk de relevantie en de weerslag worden geëvalueerd van de onderzoekresultaten die bij het GCO zijn behaald . Een en ander moet worden bezien in het licht van een allesomvattende strategie , in het kader waarvan de eigen werkzaamheden , de werkzaamheden onder contract en de andere vormen van onderzoekwerk op de verwezenlijking van een zelfde doel zijn gericht . Het gaat met andere woorden om de resultaten die in het kader van communautaire actieprogramma's zijn behaald .

Daarbij worden de volgende doelstellingen nagestreefd :

- vaststelling van de praktische bijdrage die met de programmaresultaten wordt geleverd tot de vooruitgang van het in de Gemeenschap op het betrokken gebied verrichte O en O-werk , tot de verwezenlijking van de doelstellingen van de Gemeenschap en tot de sociaal-economische ontwikkeling in de Gemeenschap in het algemeen ;

- doen van aanbevelingen inzake de wijze waarop gebruik kan worden gemaakt van de onderzoekresultaten en inzake de toekomstige oriëntering van het programma .

In de tweede plaats worden beheerspraktijken geëvalueerd . Daarvoor worden bepaalde permanente controlelichamen ingeschakeld die in het kader van het GCO en van de Commissie werkzaam zijn , zoals de Raadgevende Comités , ad hoc werkgroepen van deskundigen en , op overkoepelend niveau , het Bestuurscomité alsmede de verschillende controlecommissies van de Commissie , het Europese Parlement , enzovoort .

Telkens wanneer zich een moeilijkheid voordoet , maakt de Commissie gebruik van de specifieke hulpmiddelen die tot haar beschikking staan ; zo kan zij bij voorbeeld technische of financiële controles laten verrichten door gespecialiseerde instellingen of adviesbureaus .

c ) Voor de evaluatie van gecoordineerde onderzoekwerkzaamheden , met inbegrip van COST-acties , zal de minder omslachtige " Hearing " -methode worden toegepast . Deze methode leent zich namelijk beter voor toepassing op dit type maatregel , dat doorgaans betrekking heeft op een bescheiden onderzoekgebied waarin de bijdrage van de Gemeenschap ook minder omvangrijk is . Daarbij worden de volgende doelstellingen nagestreefd :

- beoordeling van de waarde en weerslag van gecoordineerde werkzaamheden en van de aan coordinatie verbonden voordelen ;

- beoordeling van de doeltreffendheid van het beheer en van de coordinatie van de werkzaamheden ;

- doen van aanbevelingen inzake de toekomstige oriëntering van het programma .

d ) Gecombineerde evaluaties

Telkens wanneer het noodzakelijk wordt geacht dat verschillende types communautaire werkzaamheden met betrekking tot één bepaald onderzoekgebied gelijktijdig worden geevalueerd , moet de zogenaamde " peer-evaluation " -methode worden toegepast . Deze procedure zal in ieder geval moeten worden gevolgd wanneer de nieuwe beleidslijnen met betrekking tot de " programma's van werkzaamheden " worden ingevoerd .

2.2 . De met de evaluatie belaste groepen moeten betrekkelijk klein van opzet zijn , dit wil zeggen bestaan uit zes tot negen personen , ten einde de toepassing van informele werkmethodes mogelijk te maken . Wel moet ervoor worden gezorgd dat de verschillende vereiste deskundigheden daarin vertegenwoordigd zijn .

Elke groep kan naar eigen goeddunken specifieke evaluatiemethodes en -criteria vaststellen , mits bepaalde , algemene richtsnoeren in acht worden genomen .

Elk vier - of vijfjarig programma zal ongeveer halverwege worden geëvalueerd . Daarbij zal ook rekening worden gehouden met de resultaten van het voorgaande programma . De resultaten van de evaluaties moeten zo snel mogelijk worden bekend gemaakt en op ruime schaal worden verspreid . De evaluatierapporten zullen worden voorgelegd aan het Europese Parlement , de Raad , het Economisch en Sociaal Comité , het Raadgevend Comité EGKS , de Rekenkamer en andere raadgevende comités uit vertegenwoordigers van de Lid-Staten ( CREST , ACPM , COMAC , enz . ) . Zij zullen ook worden toegestuurd aan andere belanghebbende organisaties , instellingen en regeringslichamen in de Lid-Staten en in het bijzonder aan potentiële gebruikers van onderzoekresultaten in de industrie of in andere sectoren .

De systematische feedback inzake de evaluaties zal worden gestimuleerd , ten einde te bereiken dat de programma's aan de reële wensen van de gebruikers voldoen . Dit zal onder andere worden bewerkstelligd door middel van mondelinge presentaties , discussies met de gebruikers over de resultaten van de evaluatie , en door de organisatie van seminaries over de weerslag en het nut van de huidige evaluatiemethodes en -procedures .

3 . De Commissie zal studies verrichten inzake bepaalde aspecten van de evaluatie en het onderzoek ter zake in de Gemeenschap bevorderen . Ten einde ervoor te zorgen dat de met de evaluatie belaste groepen hun taak met behulp van de meest doeltreffende instrumenten kunnen vervullen , zal de Commissie specifieke studies laten verrichten met het oog op de ontwikkeling of verbetering van bepaalde methodologieaspecten . Aangezien er op dit gebied nog relatief weinig is verwezenlijkt , is dit permanent van groot belang , niet alleen met het oog op de succesvolle toepassing van de evaluatiemethodes door de Commissie zelf , maar ook met het oog op de toepassing daarvan in het kader van andere organisaties en instellingen in de Lid-Staten . De Commissie zal de resultaten van dit onderzoek op ruime schaal verspreiden .

4 . De Commissie zal de uitwisseling van desbetreffende gegevens binnen de Gemeenschap bevorderen door de organisatie van workshops en seminaries en de geleidelijke totstandbrenging van een informeel communautair evaluatienetwerk .

De Commissie zal alles in het werk stellen om op de hoogte te blijven van de nationale en internationale ontwikkelingen op dit gebied . Zij is voornemens de uitwisseling te bevorderen van gegevens over zowel haar ervaring met de evaluatie als over die van andere organisaties en instellingen in de Lid-Staten . In het kader van de oprichting van een netwerk van ( nationale en internationale ) deskundigen op het gebied van de evaluatie zal de Commissie periodieke werkshops en seminaries over specifieke onderwerpen organiseren ( b.v . de beoordeling van het nut op lange termijn van onderzoekresultaten of van methoden voor technologie-evaluatie ) . De resultaten daarvan zullen bekend worden gemaakt .

Administratie , planning en begroting

Ten einde de doeltreffende tenuitvoerlegging van dit actieprogramma te verzekeren , en voor de nodige afstand tussen het programma en de dagelijkse activiteiten met het oog op het beheer van O en O-programma's te zorgen , heeft de Commissie een afzonderlijke eenheid opgericht , - die zij overigens nog zal uitbreiden - en deze belast met de werkzaamheden op het gebied van de evaluatie . Het ist de bedoeling van de Commissie deze administratieve structuur zo eenvoudig mogelijk te houden ten einde de soepelheid en aanpasbaarheid van de voorgestelde evaluatiestrategie te weerspiegelen .

In de loop van de volgende drie jaar zullen normaliter ongeveer zeven of acht evaluaties per jaar worden verricht , twee seminaries worden georganiseerd en een conferentie worden opgezet .

De Commissie is voornemens voor de tenuitvoerlegging van haar programma gebruik te maken van de kredieten die in de Algemene Begroting van de Europese Gemeenschappen zijn opgenomen in hoofdstuk 72 - Algemene en voorbereidende werkzaamheden op het gebied van wetenschappelijk en technologisch onderzoek ( artikel 721 ) .

Aan het einde van de drie jaar durende fase zal de Commissie zo nodig een nieuwe mededeling indienen , waarbij zij rekening zal houden met de resultaten die tijdens deze fase werden behaald en de eisen waaraan de volgende volledig operationele fase moet voldoen .