natgillin/translations-raw huggingface dataset:
For this reason, the Commission will continue reporting on FP7 results in a dedicated section of the monitoring reports of Horizon 2020. 
Tästä syystä komissio raportoi edelleen seitsemännen puiteohjelman tuloksista Horisontti 2020 -ohjelman seurantaraporttien erillisessä osiossa.
Moreover, the interim evaluation of Horizon 2020 will include an assessment of the longer term impacts of previous framework programmes. 
Horisontti 2020 -ohjelman väliarviointiin sisältyy lisäksi arvio aiempien puiteohjelmien pitkän aikavälin vaikutuksista.
This approach will continue over time mitigating this problem. 
Tämän lähestymistavan avulla ongelma lievenee ajan mittaan.
(29) Number of researchers who have access to research infrastructures through Union support; publications in peer-reviewed high impact journals in the area of health and wellbeing; publications in peer-reviewed high impact journals in the area of food security; publications in peer-reviewed high impact journals in the area of climate action, resource efficiency and raw materials; number of occurrences of tangible specific impacts on European policies resulting from technical and scientific support provided by the Joint Research Centre. 
(29) Niiden tutkijoiden lukumäärä, joiden saatavilla ovat unionin tuen ansiosta tutkimusinfrastruktuurit; julkaisut terveyden ja hyvinvoinnin alan vertaisarvioiduissa vaikutusvaltaisissa julkaisuissa; julkaisut elintarviketurva-alan vertaisarvioiduissa vaikutusvaltaisissa julkaisuissa; julkaisut ilmastotoimien alan vertaisarvioiduissa vaikutusvaltaisissa julkaisuissa; resurssitehokkuus ja raaka-aineet; niiden tapausten lukumäärä, joissa yhteisen tutkimuskeskuksen antamalla teknisellä ja tieteellisellä tuella on ollut konkreettisia erityisvaikutuksia unionin eri alojen politiikkaan.
EN C 375/96 Official Journal THE COURT’S OBSERVATIONS 3.32. A practical example of the problems caused by the poor use of indicators is provided in our special report on the EIT. We noted that the organisation’s core indicators continued to focus on input or output rather than results or impacts, and concluded that it was difficult to assess the performance of the EIT since it started operations in 2010. 
FI C 375/96 Euroopan unionin virallinen lehti 13.10.2016 TILINTARKASTUSTUOMIOISTUIMEN HUOMAUTUKSET 3.32 Euroopan innovaatio-ja teknologiainstituuttia (EIT) koskevassa tilintarkastustuomioistuimen erityiskertomuksessa annetaan käytännön esimerkki heikon indikaattoreiden käytön aiheuttamista ongelmista. Tilintarkastustuomioistuin pani kertomuksessaan merkille, että instituutin keskeisissä indikaattoreissa keskitytään edelleen tulosten tai vaikutusten sijasta panoksiin tai tuotoksiin.
There was a lack of robust and relevant reporting and monitoring processes and few impacts were visible (30). 
Luotettavat ja merkitykselliset raportointi-ja seurantaprosessit puuttuivat, ja näkyviä vaikutuksia oli vähän (30).
There is insufficient focus on performance at the level of work programmes and calls 3.33. The work programmes and associated calls are a key driver in the way that Horizon 2020 operates. 
Työohjelmien ja ehdotuspyyntöjen yhteydessä ei painoteta riittävästi tuloksellisuutta 3.33 Työohjelmat ja niihin liittyvät ehdotuspyynnöt ovat määrääviä tekijöitä Horisontti 2020 -ohjelman toiminnassa.
They provide an opportunity for the Commission to translate the high-level general and specific objectives of Horizon 2020 into lower level objectives useful for operational performance management purposes. 
Niiden avulla komission on mahdollista muuntaa Horisontti 2020 -ohjelman ylätason yleis-ja erityistavoitteet alemman tason tavoitteiksi, joita voidaan hyödyntää operatiivisen tuloksellisuuden hallinnassa.
3.34. Based on the specific programme, the Commission prepares 2-year work programmes that develop the specific objectives and expected impact, and set out funding opportunities through calls for proposals: 15 billion euro for 2014-2015 and 14,5 billion euro for 2016-2017. 
3.34 Erityisohjelman perusteella komissio laatii kaksivuotiset työohjelmat, joiden yhteydessä määritetään erityistavoitteet ja odotetut vaikutukset. Komissio asettaa rahoitusmahdollisuudet käyttöön ehdotuspyyntöjen avulla: 15 miljardia euroa vuosina 2014–2015 ja 14,5 miljardia euroa vuosina 2016–2017.
The ‘main’ Horizon 2020 work programme dedicates one part to each specific objective of the specific programme. 
Horisontti 2020:n pääasiallisessa työohjelmassa käsitellään omissa osioissaan erityisohjelman kutakin yksittäistä tavoitetta.
It is complemented by separate work programmes for the ERC (an annual programme), the JRC (biennial programmes), and the EIT (a triennial programme, broken down annually). 3.35. 
Sitä täydentävät erilliset työohjelmat, jotka laaditaan Euroopan tutkimusneuvoston (vuotuinen ohjelma), yhteisen tutkimuskeskuksen (kaksivuotiset ohjelmat) sekä EIT:n (kolmivuotinen ohjelma, jota tarkistetaan vuosittain) osalta.
The legislation for Horizon 2020 was adopted shortly before the implementation of the programme started, limiting the scope for strategic planning. 
3.35 Horisontti 2020 -ohjelman lainsäädäntö hyväksyttiin hieman ennen ohjelman täytäntöönpanon käynnistymistä, mikä rajoitti strategisen suunnittelun mahdollisuuksia.
The Europe 2020 strategy, the ‘Innovation Union’ and other flagship initiatives are referred to in the overall strategic framework for the work programme 2014-2015, but the references remain generic, unsystematic and do not clarify the specific contribution of the individual work programmes to particular strategic objectives. 
Vuosien 2014 ja 2015 työohjelmaa koskevassa yleisessä strategiakehyksessä viitataan Eurooppa 2020 -strategiaan, innovaatiounioniin ja muihin lippulaivahankkeisiin, mutta viittaukset ovat yleisluontoisia ja epäsystemaattisia eikä niiden yhteydessä selvitetä tarkemmin yksittäisten työohjelmien nimenomaista vaikutusta tiettyihin strategisiin tavoitteisiin.
For 2016-2017, the strategic programming process improved and was documented via an overarching strategic planning document and scoping papers. of the European Union 13.10.2016 THE COMMISSION’S REPLIES 3.32. 
Vuosia 2016 ja 2017 koskeva strateginen suunnitteluprosessi oli parempi ja se dokumentoitiin kokonaisvaltaisen strategisen suunnitteluasiakirjan ja sisältöä määrittävien asiakirjojen avulla.
As stated in the reply of the Commission and EIT to special report No 4/2016, the EIT performs comprehensive analyses to compare the Knowledge and Innovation Communities (KICs) based on several factors, not simply on the basis of the core KPIs. 
KOMISSION VASTAUKSET 3.32 Kuten komission ja EIT:n vastauksessa erityiskertomukseen nro 4/2016 todetaan, EIT suorittaa laajoja analyyseja vertaillakseen osaamis-ja innovaatioyhteisöjä useiden tekijöiden, ei pelkästään keskeisten tulosindikaattoreiden perusteella.
The implementation of KICs’ business plans is assessed both through quantitative performance indicators and through qualitative reviews done by external experts and the EIT’s staff. 
Osaamis-ja innovaatioyhteisöjen liiketoimintasuunnitelmien täytäntöönpanoa arvioidaan paitsi määrällisillä tulosindikaattoreilla myös ulkoisten asiantuntijoiden ja EIT:n henkilökunnan suorittamilla laatuarvioinneilla.
More widely, the EIT also conducts on-site monitoring and topical reviews of the KICs’ activities. 
EIT seuraa lisäksi osaamis-ja innovaatioyhteisöjen toimintaa paikan päällä ja tekee siitä aihekohtaisia arvioita.
These tools, taken together, provide a very informative picture of the differences between the KICs. 
Nämä välineet tarjoavat yhdessä hyvin informatiivisen kuvan osaamis-ja innovaatioyhteisöjen eroista.
3.34. Since the observation of the Court the Commission has introduced a strategic planning process that went on before the 2016-2017 work programmes were finalised. 
3.34 Komissio otti tilintarkastustuomioistuimen esittämän huomautuksen jälkeen käyttöön strategisen suunnitteluprosessin, joka oli käytössä ennen vuosien 2016–2017 työohjelmien viimeistelyä.
This is a strategic examination of priorities and needs, carried out with Member States and other stakeholders, to ensure the link between the Horizon 2020 specific objectives and the work programmes implementing them. 
Kyseessä on jäsenvaltioiden ja muiden sidosryhmien kanssa suoritettava painopisteiden ja tarpeiden strateginen tarkastelu, jonka avulla varmistetaan Horisontti 2020 -ohjelman erityistavoitteiden ja niiden täytäntöönpanoon käytettävien työohjelmien välinen yhteys.
The preparation of the Horizon 2020 legislation was accompanied by the parallel preparation of the work programmes 2014-2015. 
3.35 Horisontti 2020 -lainsäädäntöä valmisteltiin samaan aikaan kuin vuoden 2014–2015 työohjelmia.
There was a clear link of each work programme part to the Horizon 2020 specific objectives. 
Kullakin työohjelman osalla oli selvä yhteys Horisontti 2020 -ohjelman erityistavoitteisiin.
(30) Special report No 4/2016, ‘The European Institute of Innovation and Technology must modify its delivery mechanisms and elements of its design to achieve the expected impact’, paragraphs 54 and 109 (http://eca.europa.eu). 
(30) Erityiskertomus nro 4/2016 ”Euroopan innovaatio-ja teknologiainstituutin on muutettava täytäntöönpanomekanismejaan ja osittain suunnitteluaan odotetun vaikutuksen aikaansaamiseksi”, kohdat 54 ja 109 (http://eca.europa.eu).
For all the work programmes we examined, the 3.36-3.38. It is accepted that the ‘expected impact’ established in objectives are consistent with the specific objectives as defined the work programmes can be improved, and this has already started in in the specific programme. However, the objectives in the the 2016-2017 work programmes. sampled work programmes do not translate the high-level objectives from the legislation into operational ones which can be monitored and reported on: three out of five work programme objectives use exactly the same wording as is in the legislation, and none fulfil the SMART(31) criteria. 
FI 13.10.2016 Euroopan unionin virallinen lehti C 375/97 TILINTARKASTUSTUOMIOISTUIMEN HUOMAUTUKSET 3.36 Kaikkien tilintarkastustuomioistuimen tarkastamien työohjelmien tavoitteet vastaavat erityisohjelmassa määritettyjä erityistavoitteita. Otokseen kuuluneiden työohjelmien yhteydessä ei kuitenkaan ole muunnettu lainsäädännössä määritettyjä ylätason tavoitteita operatiivisiksi tavoitteiksi, joita voidaan seurata ja joista voidaan raportoida: viidestä työohjelmien tavoitteesta kolmen sanamuoto vastaa täysin lainsäädännön sanamuotoa, eikä yksikään tavoite täytä SMART(31)-kriteereitä.
Operational objectives and relevant indicators would facilitate the required focus on performance or monitoring and reporting on performance at the work programme level. 3.37. 
Operatiiviset tavoitteet ja relevantit indikaattorit helpottaisivat vaadittua tuloksellisuuden painottamista sekä tuloksellisuuden seurantaa ja raportointia työohjelman tasolla.
Each work programme contains calls for proposals corresponding to the broad lines of activities of the specific objective (representing the scientific and technological content). 
3.37 Jokaiseen työohjelmaan sisältyy ehdotuspyyntöjä, jotka vastaavat erityistavoitteen toimien päälinjoja (erityistavoitteen yhteydessä määritetään tieteellinen ja teknologinen sisältö).
The sampled calls for proposals identify objectives which are in line with those in the work programme and consistent with specific broad lines of activities, where applicable (32). 
Otokseen kuuluneiden ehdotuspyyntöjen yhteydessä määritetään tavoitteet, jotka vastaavat työohjelman tavoitteita ja ovat tarvittaessa yhdenmukaisia yksittäisten toimien päälinjojen kanssa (32).
Although overall the objectives of the calls are more specific than the ones in the work programme, they do not meet all SMART criteria. 
Ehdotuspyyntöjen tavoitteet ovat kaiken kaikkiaan yksityiskohtaisempia kuin työohjelman tavoitteet, mutta ne eivät kuitenkaan täytä kaikkia SMART-kriteereitä.
Beside objectives, each call also includes an expected impact section. 
Jokaiseen ehdotuspyyntöön sisältyy tavoitteiden lisäksi odotettua vaikutusta käsittelevä osio.
However the expected impacts are rarely quantified and generally do not include indicators. 
Odotettuja vaikutuksia on kuitenkin harvoin kvantifioitu eikä niiden osalta ole yleensä määritetty indikaattoreita.
It will thus be difficult for the Commission to measure the success of the calls in the absence of operational objectives and indicators with targets. 3.38. 
Näin ollen komission on vaikea mitata ehdotuspyyntöjen onnistumista, koska operatiiviset tavoitteet ja tavoitearvot sisältävät indikaattorit puuttuvat.
The sampled work programmes do not identify their long-term contribution to the strategic objectives even though this should be explained according to guidance on work programmes. 
3.38 Otokseen kuuluneissa työohjelmissa ei ole määritetty niiden pitkän aikavälin vaikutusta strategisiin tavoitteisiin, vaikka työohjelmia koskevien ohjeiden mukaan siitä olisi annettava selvitys.
None of the examples we analysed explain how the work programme contributes towards the achievement of specific Europe 2020 objectives; in one case, the objective of the work programme links the actions supported to one of the flagship initiatives but does not specify exactly how. (31) Specific, measurable, achievable, relevant and time-bound. 
Yhdenkään tilintarkastustuomioistuimen analysoiman tapauksen yhteydessä ei selitetty, miten työohjelma edistää tiettyjen Eurooppa 2020 -tavoitteiden saavuttamista; yhdessä tapauksessa työohjelman tavoitteen yhteydessä tuetut toimet yhdistetään yhteen lippulaivahankkeeseen, mutta yhteyttä ei kuvata tarkemmin.
However, the primary focus of the work programme is to provide the information necessary for applicants to prepare high quality proposals. 
Työohjelman päätarkoituksena on kuitenkin tarjota hakijoille laadukkaiden ehdotusten valmisteluun tarvittavat välttämättömät tiedot.
Work programmes do not need to identify their contribution to Europe 2020 objectives. 
Työohjelmissa ei tarvitse määrittää, mikä on niiden panos Eurooppa 2020 -strategian tavoitteiden saavuttamiseen.
They should rather be linked to the specific objectives of Horizon 2020, and these objectives have been formulated to comply with Europe 2020. 
Työohjelmat pitäisi ennemmin yhdistää Horisontti 2020 -strategian erityistavoitteisiin, jotka on laadittu Eurooppa 2020 -strategian mukaisiksi.
Performance will firstly be assessed through the indicators set out in the legislation. 
Tuloksellisuutta arvioidaan ensin lainsäädännössä säädettyjen indikaattorien avulla.
This is made clear in Article 5 of the Horizon 2020 legislation. ‘The first set of relevant performance indicators for assessing progress against the general objective is set out in [the Annex to the Regulation]’. 
Tämä on esitetty selvästi Horisontti 2020 -ohjelmaa koskevan asetuksen 5 artiklassa: ”Ensimmäinen joukko asiaankuuluvia suorituskykyindikaattoreita arvioitaessa edistystä yleiseen tavoitteeseen nähden esitetään [asetuksen liitteessä].”
This will be the primary information on which the assessment of performance will be established. 
Nämä ovat ensisijaiset tiedot, joiden pohjalta tuloksellisuuden arviointi tehdään.
EN C 375/98 Official Journal of the European Union 13.10.2016 THE COURT’S OBSERVATIONS There is a focus on performance in proposals, evaluations and grant agreements but there are weaknesses that can lead to problems when assessing performance 3.39. 
FI C 375/98 Euroopan unionin virallinen lehti 13.10.2016 TILINTARKASTUSTUOMIOISTUIMEN HUOMAUTUKSET Ehdotuksissa, arvioinneissa ja avustussopimuksissa painotetaan tuloksellisuutta, mutta olemassa on puutteita, jotka saattavat johtaa ongelmiin tuloksellisuutta arvioitaessa 3.39 Ehdotuspyyntöjen yhteydessä hakijat esittävät rahoitusehdotuksia.
The Commission evaluates the proposals and for those it chooses to fund the Commission signs grant agreements with beneficiaries. 
Komissio arvioi ehdotukset ja tekee rahoitettaviksi valitsemiensa ehdotusten osalta avustussopimukset edunsaajien kanssa.
In this section we assess the focus on performance for these stages of the management process. Evaluation of proposals 3.40. 
Tässä osiossa tilintarkastustuomioistuin arvioi tuloksellisuuden painottamista näissä hallinnointiprosessin vaiheissa.
Proposals are normally evaluated by experts, on behalf of the Commission, based on their excellence, impact and the quality and efficiency of their implementation(33). 
Ehdotusten arviointi 3.40 Ehdotusten arvioinnista vastaavat yleensä komission puolesta asiantuntijat, jotka perustavat arvioinnin kolmeen kriteeriin eli huippuosaamiseen, vaikutukseen ja toteutuksen laatuun ja tehokkuuteen (33).
With the exception of the ERC, which uses only the excellence criterion, the beneficiaries’ proposals we examined all included sections structured around these three evaluation criteria, with the weighting for impact at least as high as the other two criteria. 
Kaikkiin tilintarkastustuomioistuimen tutkimiin edunsaajien ehdotuksiin sisältyi osioita, joiden taustalla vaikuttivat mainitut kolme arviointikriteeriä siten, että vaikutuksen kriteeriä painotettiin vähintään yhtä paljon kuin kahta muuta kriteeriä.
However, the quality of this evaluation depends on the quality of the expected impacts set out in the calls published by the Commission. 
Arvioinnin laatu riippuu kuitenkin komission julkaisemissa ehdotuspyynnöissä määritettyjen odotettujen vaikutusten laadusta.
3.41. For the excellence criterion, templates included in proposals indicate how objectives should be defined. 
3.41 Ehdotuksiin sisältyvissä malleissa eritellään huippuosaamista koskevan kriteerin osalta, kuinka tavoitteet on määritettävä.
Three out of the five proposal templates sampled required applicants to define SMART objectives and explain how they relate to the topic of the relevant work programme. 
Otokseen kuuluneista viidestä ehdotukseen sisältyvästä mallista kolmessa vaadittiin hakijoita määrittämään SMART-tavoitteet ja selittämään, kuinka ehdotus liittyy kyseessä olevaan työohjelmaan.
The objectives of these three proposals are generally SMART. 
Näiden kolmen ehdotuksen tavoitteet ovat yleisesti ottaen SMART-muotoisia.
However, for the other two proposals, related to the ERC and Marie Curie, the sampled proposals did not include SMART objectives as there was no such requirement. 
Kahden muun, Euroopan tutkimusneuvostoa ja Marie Curie -toimia koskeneen ehdotuksen kohdalla otokseen poimitut ehdotukset eivät kuitenkaan sisältäneet SMART-tavoitteita, koska sitä ei vaadittu.
(33) Article 15 of Regulation (EU) No 1290/2013. 
(33) Asetus (EU) N:o 1290/2013, 15 artikla.
The sampled grant agreements used the same objectives as were in the proposals. 
Otokseen kuuluneissa avustussopimuksissa käytettiin samoja tavoitteita kuin ehdotuksissa.
3.43. Grant agreements include a section on ‘background and 3.43. results’. 
3.43 Avustussopimuksiin sisältyy tausta-aineistoa ja tuloksia käsittelevä osio.
These results mean ‘any tangible and intangible output Information on the indicators established in the legal base can and will of the action’ as defined in the rules of participation (34). 
Tuloksilla tarkoitetaan ”toimen aineellisia tai aineettomia tuotoksia”, jotka on määritetty osallistumissään-nöissä(34).
There is be collected to allow an assessment of performance. an important provision in the grant agreements which requires beneficiaries to report to the Commission information for the aggregation of the Horizon 2020 KPIs; this level is therefore an important source of all performance information for Horizon 2020. 
Avustussopimuksiin sisältyy tärkeä määräys, jonka mukaan edunsaajien on toimitettava komissiolle tietoja Horisontti 2020 -ohjelman keskeisten tulosindikaattoreiden kokoamista varten; tällä tasolla saadaan näin ollen tärkeää kokonaistietoa Horisontti 2020 -ohjelman tuloksellisuudesta.
We have pointed to problems assessing performance at the higher level (work programmes and calls) in the previous paragraphs. 
Tilintarkastustuomioistuin on tuonut edeltävissä kohdissa esille ongelmia, jotka liittyvät tuloksellisuuden arviointiin ylemmällä (työohjelmien ja ehdotuspyyntöjen) tasolla.
The design of the monitoring and reporting system of Horizon 2020 limits the Commission’s ability to properly monitor and report on performance 3.44. This section focuses on the monitoring and reporting system for Horizon 2020. 
Horisontti 2020 -ohjelman seuranta-ja raportointijärjestelmän rakenne rajoittaa komission mahdollisuuksia seurata kunnolla tuloksellisuutta ja raportoida siitä 3.44 Tässä osassa keskitytään Horisontti 2020 -ohjelman seuranta-ja raportointijärjestelmään.
We examined whether: (a) the current setup enables the Commission to monitor and report separately the spending on research and development as opposed to innovation; (b) the contribution of Horizon 2020 to Europe 2020 can be reported on; (c) the Commission will be in a position to evaluate the programme in the course of its life. 
Tilintarkastustuomioistuin tutki, a) pystyikö komissio nykyjärjestelmän avulla toteuttamaan seurantaa ja raportointia tutkimuksen ja kehittämisen menojen osalta erillään innovoinnin menoista b) onko Horisontti 2020 -ohjelman vaikutuksesta Eurooppa 2020 -strategiaan mahdollista raportoida c) onko komissiolla mahdollisuuksia arvioida ohjelmaa sen toteutuksen aikana.
THE COMMISSION’S REPLIES See Commission’s replies to paragraphs 3.36 to 3.38. 
KOMISSION VASTAUKSET 3.43 Ks. komission vastaukset 3.36–3.38 kohtaan.
(34) Article 2(1)(19) of Regulation (EU) No 1290/2013. 
(34) Asetus (EU) N:o 1290/2013, 2 artiklan 1 kohdan 19 alakohta.
In line with this approach, the innovation-related parts of the Competitiveness and Innovation Framework Programme (36) and the EIT were brought together under the umbrella of Horizon 2020. 3.46. 
Tämän lähestymistavan mukaisesti innovointia koskevat kilpailukyvyn ja innovoinnin puiteohjelman(36) ja Euroopan innovaatio-ja teknologiainstituutin osat koottiin Horisontti 2020 -ohjelman alaisuuteen.
We pointed out in the past that the proposed legislation for Horizon 2020 did not provide a clear definition of innovation and that without some limits on the scope of fundable innovation activities there was a risk that a wide range of innovation projects would dilute funding (37). 
3.46 Tilintarkastustuomioistuin on aiemmin korostanut, että Horisontti 2020 -ohjelman osalta ehdotettu lainsäädäntö ei sisältänyt selkeää innovoinnin määritelmää ja että ilman rahoitettavissa olevien innovointitoimien rajoittamista riskinä oli, että rahoituksen merkitys vesittyy, jos olemassa on paljon erilaisia innovaatiohankkeita (37).
The framework programme and the specific programme for Horizon 2020 do not provide clear criteria to distinguish between ‘research and development’ and ‘innova-tion’(38) or to monitor and report separately on the performance under these headings. 
Horisontti 2020:n puiteohjelma ja erityisohjelma eivät sisällä selkeitä kriteereitä, joiden avulla tutkimus ja kehittäminen erotetaan innovoinnista (38) tai tuloksellisuutta seurataan ja siitä raportoidaan erikseen näissä otsakkeissa.
THE COMMISSION’S REPLIES One of the major aims of Horizon 2020, set out from the beginning of discussions on the framework programme, was to narrow the divide between research and innovation. 
KOMISSION VASTAUKSET Yksi Horisontti 2020 -ohjelman päätavoitteista, joka esitettiin jo puiteohjelmaa koskevien keskustelujen alussa, oli kaventaa tutkimuksen ja innovoinnin välistä kuilua.