natgillin/translations-raw huggingface dataset:
Moreover an information management system is under devel‐ opment that will facilitate the management and monitoring of programme evaluations. 
Lisäksi kehitteillä on tiedon‐ hallintajärjestelmä, joka helpottaa ohjelma‐arviointien hallinnointia ja seurantaa.
The network of Evaluation Correspondents in delegations and operational units, set up in 2013, will provide added feedback. The human resources management for evaluation and ROM should be considered in the framework of the overall human resources management for the external assistance managed by EuropeAid. 
Vuonna 2013 perustettu edustustojen ja operatiivisten yksiköiden arviointi‐ yhdyshenkilöiden verkosto antaa myös palautetta. Arviointiin ja tulosperusteiseen seurantaan osoitettujen henkilöstöresurssien hallinnointia olisi tarkasteltava osana kaikkien EuropeAidin hallinnoimaan ulkoiseen apuun osoitettujen henkilöstöresurssien hallinnointia.
19 The information management system under con‐ struction will provide more precise information on the number of programme evaluations and their cost. 
19 Rakenteilla olevasta tiedonhallintajärjestelmästä tullaan saamaan tarkempia tietoja ohjelma‐arviointien lukumäärästä ja niiden kuluista.
20 Monitoring, reporting, mid‐term evaluation and, more generally, project management activities are so closely interlinked that any division of resource allocation between them can only be an estimate. 
20 Seuranta, raportointi, väliarviointi ja yleinen projek‐ tinhallinta liittyvät toisiinsa niin tiiviisti, että niihin osoitettujen resurssien jakautumisesta voidaan esittää vain arvioita.
This is even more so with respect to the new ROM which is to be a tool for support to overall monitor‐ ing of programmes. 
Näin on etenkin uudessa tulosperus‐ teisessa seurannassa, joka on tarkoitettu tukemaan ohjelmien kokonaistason seurantaa.
21 The human resources management for evaluation and ROM should be considered in the framework of the overall human resources management for the external assistance managed by EuropeAid. 
21 Arviointiin ja tulosperusteiseen seurantaan osoitet‐ tujen henkilöstöresurssien hallinnointia olisi tarkas‐ teltava osana kaikkien EuropeAidin hallinnoimaan ulkoiseen apuun osoitettujen henkilöstöresurssien hallinnointia.
22 Avoiding ROM when an evaluation is to take place was already a principle before the ongoing reform of monitoring and evaluation systems (as men‐ tioned also by the Court). 
22 Tulosperusteisen seurannan välttäminen silloin, kun on määrä toteuttaa arviointi, oli periaatteena jo ennen seuranta‐ ja arviointijärjestelmien käynnissä olevaa uudistusta (kuten tilintarkastustuomioistuinkin on todennut).
This reform also includes the introduction of criteria for the selection and planning of programme evaluations. 
Uudistuksen myötä otetaan käyttöön myös ohjelma‐arviointien valintaa ja suunnittelua koskevat kriteerit.
The Commission considers that EuropeAid’s evalua‐ tion and ROM systems provide relevant and robust findings, even if improvements are needed. 
Komission vastaus 35 Komissio katsoo, että EuropeAidin arviointijärjestel‐ mät ja tulosperusteiset seurantajärjestelmät tuotta‐ vat relevantteja ja pitäviä havaintoja, vaikka niissä onkin parantamisen varaa.
26 Instructions and guidance to staff on the selection criteria for programme evaluations and the plan‐ ning of evaluations within the framework of the preparation of monitoring and evaluation plans will be part of the overall instructions and guidance on the reforms of monitoring, reporting and evalua‐ tion. 
26 Osana seurantaa, raportointia ja arviointia koskevista uudistuksista annettavia yleisohjeita henkilöstölle annetaan opastusta ja ohjeita myös ohjelma‐arvi‐ ointien valintaperusteista ja arviointien suunnitte‐ lusta seuranta‐ ja arviointisuunnitelmien laatimisen yhteydessä.
This guidance will be issued before the end of 2014. 
Ohjeet annetaan ennen vuoden 2014 loppua.
Selection criteria are to be reflected in the financing agreements. 
Valintaperusteet tulevat näkymään myös rahoitussopimuksissa.
26 (a) Mid‐term evaluations are made compulsory on a case‐by‐case basis at formulation phase taking into account the programme specificity. 
26 a) Väliarvioinneista tulee laadintavaiheessa pakollisia tapauskohtaisesti ohjelman erityispiirteet huomioon ottaen.
26 (b) Ex post evaluations are made compulsory on a case‐ by‐case basis at formulation phase taking into account the programme specificity. 
26 b) Jälkiarvioinneista tulee laadintavaiheessa pakollisia tapauskohtaisesti ohjelman erityispiirteet huomioon ottaen.
27 Systems are in place but the Commission acknowl‐ edges the need to improve them. 
27 Kyseiset järjestelmät ovat käytössä, mutta komissio myöntää, että niitä on syytä parantaa.
28 In addition to staff constraints, fewer strategic evaluations than planned were completed because of the political situation in various countries, the increasing complexity of evaluations (particularly evaluations carried out jointly with partners and other donors), and also to changes in the contrac‐ tual framework for these evaluations. 
28 Se, että strategisia arviointeja suoritettiin suunniteltua vähemmän, johtui henkilöstöpulan lisäksi eri maiden poliittisista tilanteista, arviointien monimutkaistu‐ misesta (etenkin yhdessä kumppanien ja muiden avunantajien kanssa toteutettavien arviointien osalta) ja arviointeja koskevaan sopimuskehykseen tehdyistä muutoksista.
29 The Commission reminds that the implementation rate is above 80 %, which is the EuropeAid's bench‐ mark (KPI 19 EAMR). 
29 Komissio muistuttaa, että täytäntöönpanoaste on yli EuropeAidin 80 prosentin vertailuarvon (ulkoisen avun hallinnointia koskevan kertomuksen keskeinen tulosindikaattori nro 19).
The EAMR will have to provide improved documen‐ tation of the non‐compliance of the planning of the programme evaluations that will be established by Delegations and operational HQ services in the upcoming Monitoring and evaluation plans. 
Edustustojen ja päätoimipaikan operatiivisten yksi‐ köiden tulevissa seuranta‐ ja arviointisuunnitelmissa esitettävän ohjelma‐arviointeja koskevan suunnitel‐ man noudattamatta jättäminen on dokumentoitava ulkoisen avun hallinnointia koskevassa kertomuksessa aiempaa paremmin.
31 The revised new ROM system as adopted in May 2014 as part of a wider reform of monitoring and reporting has the primary objective of improving the internal monitoring and reporting on perfor‐ mance and results by delegations and operational units and of reducing a too heavy reliance on external ROM, in line with the Court's special report No 1/2011 on devolution. 
31 Uusi, tarkistettu tulosperusteinen seurantajärjestelmä hyväksyttiin toukokuussa 2014 osana laajempaa seuranta‐ ja raportointiuudistusta. Sen ensisijaisena tavoitteena on parantaa tuloksellisuutta ja tuloksia koskevaa edustustojen ja operatiivisten yksiköiden sisäistä seurantaa ja raportointia ja vähentää ulkoi‐ sen tulosperusteisen seurannan liiallista käyttöä hallinnoinnin hajauttamista koskevan tilintarkas‐ tustuomioistuimen erityiskertomuksen nro 1/2011 mukaisesti.
The main objective of the new ROM system is to provide support to the internal monitoring and reporting. 
Uuden tulosperusteisen seurantajärjes‐ telmän päätavoitteena on tukea sisäistä seurantaa ja raportointia.
The selection methodology reflects these priorities: — For internal monitoring purposes, the selection methodology for ROM review focuses essen‐ tially on projects and programmes flagged by delegations and operational units as (1) facing problems, (2) for which sector expertise is lack‐ ing and (3) that could not be visited. — For reporting on results purposes, the system is to support end of projects results reporting, covering all projects and programmes above EUR 750 000 ending in a given year and to assist delegations and operational units to report on results, including for the aggregated results on the basis of the Commission’s future EU Devel‐ opment and Cooperation Results framework. 
Nämä painopisteet näkyvät myös valintamenetelmissä: – Sisäisen valvonnan osalta tulosperusteisten seurantatarkastusten valintamenetelmissä kes‐ kitytään hankkeisiin ja ohjelmiin, joiden suhteen edustustot ja operatiiviset yksiköt ovat kiinnittä‐ neet huomiota seuraaviin seikkoihin: 1) niissä on ongelmia, 2) niitä koskeva alan asiantuntemus on puutteellista ja 3) niihin ei ole voitu tehdä seurantakäyntiä. – Tuloksia koskevan raportoinnin osalta järjestelmäl‐ lä tuetaan hankkeiden lopussa tehtävää tulos‐ raportointia, joka koskee kaikkia tietyn vuoden aikana päättyviä yli 750 000 euron hankkeita ja ohjelmia. Lisäksi sillä autetaan edustustoja ja operatiivisia yksiköitä raportoimaan tuloksista myös komission tulevaan EU:n kehitysyhteistyön tuloskehykseen perustuvan koottujen tulosten raportoinnin osalta.
The Commission therefore considers that by includ‐ ing a risk‐based selection for ongoing programmes, while ending the use of ROM as an indicator for the overall performance measurement of its portfolio, the new system will enhance the usefulness of ROM, in accordance with its main objective. While ROM is not designed for the purpose of measuring the overall performance of the Commission’s aid portfo‐ lio, the strengthening of the internal monitoring 
Näin ollen komissio katsoo, että koska järjestelmässä on otettu käyttöön käynnissä olevien ohjelmien riski‐ perusteinen valinta ja koska tulosperusteista seuran‐ taa ei enää käytetä eri tukimuotojen tuloksellisuuden Komission vastaus 36 yleisindikaattorina, uusi järjestelmä parantaa tulos‐ perusteisen seurannan hyödyllisyyttä päätavoitteen mukaisesti.
Reply of the Commission 36 and reporting on performance and results and the planned reporting on aggregated results on the basis of the Commission’s future EU Development and Cooperation Results framework are to be part of the tools that should allow the Commission to better measure the overall performance of its portfolio. 
Vaikka tulosperusteista seurantaa ei ole luotu mittaamaan komission eri tukimuotojen yleistä tuloksellisuutta, tuloksellisuutta ja tuloksia koskevan sisäisen seurannan ja raportoinnin vahvistaminen ja kaavailtu komission tulevaan EU:n kehitysyhteistyön tuloskehykseen perustuva koottujen tulosten rapor‐ tointi ovat keinoja, joiden avulla komission pitäisi voida mitata eri tukimuotojensa yleistä tulokselli‐ suutta aiempaa paremmin.
33 Under the new ROM contracts to be signed in 2014, all the reviews and other support missions are to be implemented by senior experts who should moreover be sector experts. 
33 Vuonna 2014 allekirjoitettavien uusien tulosperus‐ teista seurantaa koskevien sopimusten mukaan kaikkien tarkastusten ja muiden tukioperaatioiden toteuttajien on oltava kokeneita asiantuntijoita, joiden on lisäksi oltava kyseisen alan asiantuntijoita.
Besides, a significant number of reviews should indeed be carried out by key experts on a full time assignment whereas for the other reviews the experts will be hired on an ad hoc basis. 
Lisäksi merkittävän osan tarkastuksista olisi oltava keskeisten, kokopäiväisessä palveluksessa työskentelevien asian‐ tuntijoiden suorittamia, kun taas muita tarkastuksia varten asiantuntijat voidaan palkata tilapäisesti.
36 EuropeAid has emphasised in its recent Evalua‐ tion Policy the importance of adhering to existing guidance on setting up reference groups. 
36 EuropeAid on hiljattain hyväksymässään arvioin‐ tiperiaatteita koskevassa asiakirjassa korostanut nykyisten viiteryhmien perustamista koskevien ohjeiden noudattamista.
(See for existing guidelines: http://ec.europa.eu/europeaid/ evaluation/methodology/guidelines/gba_det_ en.htm#01_03 and http://ec.europa.eu/europeaid/ evaluation/methodology/examples/131011‐tor‐pro‐ ject‐evaluations‐guidance_en.pdf), 37 The introduction in 2013 of the Evaluation Corre‐ spondents’ network aims to strengthen significantly the evaluation function across the system, including in Delegations. 
(Ks. voimassa olevat ohjeet: http://ec.europa.eu/europeaid/evaluation/metho‐ dology/guidelines/gba_det_en.htm#01_03 ja http:// ec.europa.eu/europeaid/evaluation/methodology/ examples/131011‐tor‐project‐evaluations‐guidance_ en.pdf.) 37 Vuonna 2013 käyttöönotetulla arviointiyhdyshenki‐ löiden verkostolla pyritään vahvistamaan arviointia merkittävästi koko järjestelmässä edustustot mukaan lukien.
More emphasis will be put on quality control issues for the programme evaluations. 
Ohjelma‐arviointeja koskevia laadunvalvonta‐asioita tullaan painottamaan aiempaa enemmän.
38 Several measures to be taken under the revised ROM system should solve the deficiencies charac‐ terising the present situation: the strengthening of the quality of ROM reviews, the improved condi‐ tions for appropriate internal quality control by the ROM contractors, the setting up of external quality assurance, the importance to be given to defining the follow‐up, and improved overall monitoring of implementation of the revised ROM system. 
38 Tarkistetussa tulosperusteisessa seurantajärjestel‐ mässä toteutetaan useita nykypuutteita korjaavia toimenpiteitä: tulosperusteisten seurantatarkastus‐ ten laadun parantaminen, parempien edellytysten tarjoaminen tulosperusteisen seurannan toimek‐ sisaajien asianmukaiselle sisäiselle laadunvalvon‐ nalle, ulkoisen laadunvarmennuksen käyttöönotto, jatkotoimien määrittelyn merkityksen korostaminen ja tarkistetun tulosperusteisen seurannan täytän‐ töönpanon parempi seuranta kokonaistasolla.
The encoding of the follow‐up planned to take place in the new information management module for ROM is another measure that should contribute to the same. 
Asiaa edesauttaa myös suunniteltujen jatkotoimien koodaaminen tulosperusteisen seurannan uuteen tiedonhallintamoduuliin.
The Commission considers that the evaluation and ROM systems provide adequate information on results achieved, even if improvements are needed. 
Komissio katsoo, että arviointijärjestelmät ja tulosperusteiset seurantajärjestelmät tuottavat riittävästi tietoa saavutetuista tuloksista, vaikka niissä onkin parantamisen varaa.
For the new programming period 2014–20, the Com‐ mission has stepped up its efforts to have smart objec‐ tives and verifiable indicators. 
Uudella ohjelmakaudella 2014–2020 komissio pyrkii entistä painokkaammin SMART‐tavoitteiden ja todennettavissa olevien indikaattorien käyttöön.
The new programming documents have been reviewed in that sense and the operationalisation of those efforts at project level has been initiated. 
Uusia ohjelma‐asiakirjoja on tarkistettu tätä silmällä pitäen ja pyrkimysten toteuttaminen on aloitettu hanketasolla.
40 Objectives and indicators for regional and world‐ wide thematic programmes have to be general in order to capture a variety of situations. (see reply to Box 1). 
40 Alueellisten ja maailmanlaajuisten temaattisten ohjel‐ mien tavoitteiden ja indikaattorien on oltava yleis‐ luonteisia, jotta ne kattaisivat erilaisia tilanteita. (Ks. vastaus laatikkoon 1.)
Box 1 Investing in people is a worldwide thematic pro‐ gramme covering all developing countries. 
Laatikko 1 Investointi ihmisiin ‐ohjelma on maailmanlaajuinen temaattinen ohjelma, joka kattaa kaikki kehitysmaat.
This implies that the objectives are in many cases rather high level precisely to cover many different situations. 
Tästä johtuen tavoitteet ovat usein melko yleisiä juuri siksi, että ne kattaisivat useita erilaisia tilanteita.
The objective quoted for the 2007–13 Bolivia programming document represents rather an overall (or general) objective than a set of specific objectives. 
Esimerkkinä mainittu Boliviaa koskevan vuosien 2007–2013 ohjelma‐asiakirjan tavoite on ennemminkin (yleinen) kokonaistavoite kuin joukko tarkasti määritel‐ tyjä tavoitteita.
Reply of the Commission 37 41 In programmes covering several countries and regions, the objectives of the programme give the key priorities; the specific objectives for each sub‐ programme are more precise and indicators should be measurable. 
Komission vastaus 37 41 Useita eri maita ja alueita koskevissa ohjelmissa ohjelman tavoitteilla määritetään keskeiset paino‐ pisteet; kunkin alaohjelman erityiset tavoitteet ovat tarkempia, ja niihin liittyvien indikaattorien olisi oltava mitattavissa.
Box 2 The Commission wants to highlight that these examples refer to general objectives. 
Laatikko 2 Komissio haluaa korostaa, että mainitut esimerkit koskevat yleisiä tavoitteita.
Concerning the Euromed migration programme, the objectives are only partially quoted by the Court. 
Tilintarkastustuomioistuin lainaa EuroMed Migra‐ tion ‐ohjelman tavoitteita vain osittain.
The full objectives can be found at the fol‐ lowing address: http://www.enpi‐info.eu/mainmed. php?id_type=10&id=9 42 The purpose of the study to which the Court refers was to review the evaluations related to the legal instruments for the last programming period (2007– 13). 
Tavoitteet ovat saatavilla kokonaisuudessaan seuraavassa osoitteessa: http://www.enpi‐info.eu/mainmed. php?id_type=10&id=9. 42 Tilintarkastustuomioistuimen mainitseman tutki‐ muksen tarkoitus oli tarkastella viime ohjelmakauden (2007–2013) säädöksiin liittyviä arviointeja.
The findings of the study have been taken into account to prepare the instruments covering the MFF 2014–20. 
Tutkimuk‐ sessa tehdyt havainnot on otettu huomioon vuosien 2014–2020 monivuotista rahoituskehystä koskevien välineiden valmistelussa.
Strategic evaluations focus on the chain of results achieved and not on implementation of programmes. 
Strategiset arvioinnit kohdistuvat saavutettujen tulos‐ ten ketjuun eivätkä ohjelmien täytäntöönpanoon.
Common Commission reply to paragraphs 43 to 45 The decision to undertake an ex post evaluation of a programme is a question of efficiency and relevance. 
Komission yhteinen vastaus kohtiin 43–45 Päätös ohjelman jälkiarvioinnin suorittamisesta perustuu tehokkuuteen ja tarkoituksenmukaisuuteen.
The decision should not be taken in isolation but with reference to the financial weight and strategic importance of the programme to be evaluated. 
Päätöstä ei tule tehdä muista seikoista irrallaan vaan suhteessa arvioitavan ohjelman taloudelliseen ja stra‐ tegiseen merkitykseen.
46 Under the revised ROM system, the Commission discontinued ex post ROM as it is not a monitoring tool and is not considered to be an appropriate tool to assess impact. 
46 Komissio lopetti tulosperusteisen jälkiseurannan tar‐ kistetussa tulosperusteisessa seurantajärjestelmässä, koska se ei ole seurantaväline ja koska sen ei katsota soveltuvan vaikutusten arviointiin.
47 The approach of the EIB referred to by the Court is specific and is to be seen in connection with the nature of the loan‐based operations managed by the EIB. 
47 Tilintarkastustuomioistuimen mainitsema Euroopan investointipankin toimintatapa on erityinen, ja siinä on otettava huomioon, että Euroopan investointipankin hallinnoimat toimet perustuvat lainoihin.
It cannot be compared to the case of a grant donor like the EU for the grant based fund‐ ing of programmes. 
Sitä ei voida verrata avustuksia myöntävään EU:hun ja sen avustuk‐ siin perustuvaan ohjelmarahoitukseen.
The ongoing set‐up of the EU Development and Cooperation Results Framework through which the Commission aims to implement a first reporting in 2015 does not proceed on such an approach. 
Parhaillaan kehitteillä oleva EU:n kehitysyhteistyön tuloskehys, jota komissio aikoo käyttää raportoinnissa ensimmäisen kerran vuonna 2015, ei perustu kyseisen‐ laiseen toimintatapaan.
Methodology to evaluate budget support has proved its strong results and has been recognised at international level. 
Budjettituen arviointimenetelmä on osoittanut tuot‐ tavansa hyviä tuloksia, ja se on tunnustettu kansain‐ välisellä tasolla.
48 The document setting out the methodological approach to evaluating budget support developed under the auspices of the OECD‐DAC, provides a robust approach addressing the complexity of evaluating budget support. 
48 OECD‐DAC:n tuella laadittu budjettituen arvioin‐ timenetelmiä koskeva asiakirja sisältää tehokkaan menettelytavan budjettituen arviointiin, joka on monimutkaista.
49 Robustness of the approach is recognised by the international evaluation community, and it has been published on the OECD website. 
49 Kansainvälinen arviointiyhteisö on tunnustanut menettelytavan tehokkuuden, ja se on julkaisu OEC‐ D:n verkkosivustolla.
Consequently, the Commission does not see any reason to mention any limitations in its methodol‐ ogy. 
Tästä johtuen komissio ei näe syytä mainita mene‐ telmiinsä liittyviä rajoituksia.
So far, seven evaluations of budget support have been finalised which have been able to assess the results of budget support and have made rec‐ ommendations for improvement. 
Tähän mennessä bud‐ jettituesta on laadittu seitsemän arviointia, joissa on voitu arvioida budjettituen tuloksia ja annettu parannusehdotuksia.
Evaluations are a tool for assessment of the whole chain of results, but as regards outputs and direct outcomes internal monitoring provides primary information and is used to ensure reporting on results across the portfolio. 
Arvioinneilla arvioidaan koko tulosketjua, mutta tietoa tuotoksista ja välittömistä tuloksista saadaan ensisijaisesti sisäisestä seurannasta, jonka avulla varmistetaan myös kaikkien eri tukimuotojen tulosten raportointi.
50 The Commission considers that ROM is not the appropriate tool to provide information on sus‐ tainability and impact and that ex post evaluations should be only decided on a case‐by‐case basis. 
50 Komissio katsoo, että tulosperusteinen seuranta ei sovellu kestävyyttä ja vaikutusta koskevan tiedon tuottamiseen ja että jälkiarviointien suorittamisesta on päätettävä yksinomaan tapauskohtaisesti.
Reply of the Commission 38 52 When preparing the latest (fourth) edition of the Article 318 Evaluation Report, adopted on 26 June 2014, the Commission has duly taken into account the observations made by the Court of Auditors in its 2012 annual report. 
52 Komissio otti tilintarkastustuomioistuimen vuoden 2012 vuosikertomuksessa esitetyt havainnot asianmu‐ kaisesti huomioon laatiessaan viimeisintä (neljättä) 318 artiklaan perustuvaa arviointikertomusta, jonka se antoi 26. kesäkuuta 2014.
The Commission also refers to its replies to the Court’s observations under Chapter 10 of the ECA 2012 Annual Report where it provides its position with regard to the performance information in the third and future editions of the Art. 318 evaluation report. 
Komissio viittaa tässä yhteydessä myös tilintarkas‐ tustuomioistuimen vuoden 2012 vuosikertomuksen 10 luvussa esitettyihin havaintoihin antamiinsa vas‐ tauksiin, joissa komissio ilmaisee kantansa kolmanteen ja tuleviin 318 artiklaan perustuviin arviointikertomuk‐ siin sisältyvistä tuloksellisuutta koskevista tiedoista.
Follow-up mechanisms are in place, although they could be improved. 
Seurantamekanismeja on käytössä, vaikka niissä voikin olla parantamisen varaa.
54 Given the complexity of strategic evaluations, it is difficult to have clear cut commitments linked to high level recommendations. 
54 Koska strategiset arvioinnit ovat monimutkaisia, on vaikea tehdä selkeitä, korkean tason suosituksiin liittyviä sitoumuksia.
In 2013, the Evalua‐ tion unit carried out a study on uptake of strategic evaluations results. 
Arviointiyksikkö toteutti vuonna 2013 strategisten arviointien tulosten hyödyntämistä koskevan tutkimuksen.
In any case, the responsibility lies clearly with the geographic or thematic services responsible for the implementa‐ tion of the programmes or policies. 
Vastuu on joka tapauksessa selvästi ohjelmien tai toimintapolitiikko‐ jen toteuttamisesta vastaavilla alueellisilla ja temaatti‐ silla yksiköillä.
55 The review of the management response system will take into account not only this issue of the dura‐ tion of the follow‐up period but also other issues like brokering the evaluation results and involve‐ ment of management. 
55 Arviointien perusteella tehtäviä toimenpidesuunni‐ telmia koskevan järjestelmän tarkistamisessa otetaan seurantajakson keston lisäksi huomioon myös muita seikkoja, kuten arviointitulosten välittäminen ja joh‐ don osallistaminen.
56 The Evaluation unit does know which recommen‐ dation has been accepted. 
56 Arviointiyksikkö kyllä tietää, mitkä suositukset on hyväksytty.