natgillin/translations-raw huggingface dataset:
16 TEXTBOX 2 TEXTBOX 3 the Sachsen-anhalt programme targeted specific groups of women for inclusion in its traineeship schemes: the long-term unemployed, women over 45 years of age or single mothers who had previously participated in training but were still unemployed 3 to 12 months following the training. In the case of the lombardy programme, the project promoters had to demonstrate coherence between the qualifications targeted and inter alia the established priorities of the region. however, information on regional priorities was not included with either the programme or the call for applications. Special report No 17/2009 — Vocational training actions for women co-financed by the european Social fund 
16 LAATIKKO 2 LAATIKKO 3 Sachsen-anhaltin ohjelmassa harjoittelujärjestelmiin osallistumista tarjottiin seuraaville kohteiksi valituille naisryhmille: pitkäaikaistyöttömät, yli 45-vuotiaat naiset tai yksinhuoltajaäidit, jotka olivat aiemmin osallistuneet koulutukseen, mutta olivat silti työttöminä 3–12 kuukautta koulutuksen jälkeen. lombardian ohjelman osalta hankkeiden edistäjien oli osoitettava, että koulutuksesta saatava ammattitaito vastasi mm. alueelle vahvistettuja painopisteitä. alueellisista painopisteistä ei kuitenkaan annettu tietoja itse ohjelmassa eikä myöskään hakemuspyynnössä. Erityiskertomus nro 17/2009 — Euroopan sosiaalirahastosta osarahoitetut toimet naisten ammatillista koulutusta varten
PROJECT SELECTION DID NOT TAKE SUFFICIENT ACCOUNT OF THE ANALYSES OF LABOUR MARKETS NOR OF PROGRAMME OBJECTIVES 29. for three of the five programmes audited, the selection criteria did not ensure that the issues arising from the labour market analysis were sufficiently addressed nor provide a sound basis for the attainment of programme objectives (see textbox 4). 
Kolmessa viidestä tarkastetusta ohjelmasta valintakriteerien avulla ei varmistettu, että työmarkkina-analyysissa esille tulleita kysymyksiä olisi käsitelty riittävällä tavalla, eivätkä kriteerit tarjonneet riittävää perustaa ohjelmatavoitteiden saavuttamiselle (ks. laatikko 4).
In one case, calls for project proposals were not linked to a specific measure; instead projects were included as ’positive labour actions for women’ simply on the basis of the percentage of female trainees anticipated. In another case, whilst the selection criteria stemmed from the main objectives of the measure, the criterion evaluating a link with labour market priorities was not a determining factor when it came to the approval or rejection of projects. 
Yhdessä tapauksessa hanke-ehdotuspyynnöt eivät liittyneet mihinkään tiettyyn toimenpiteeseen, vaan hankkeet sisällytettiin ohjelmaan ”naisia kannustavina toimina” yksinkertaisesti naishar-joittelijoiden oletetun prosentuaalisen osuuden perusteella. toisessa tapauksessa valintakriteerit oli johdettu toimenpiteen päätavoitteista, mutta hankkeiden hyväksynnässä tai hylkäämisessä määräävänä tekijänä ei ollut kriteeri, jonka avulla arvioidaan yhteyttä työmarkkinoiden painopisteisiin.
17 TEXTBOX 4 one of the objectives of the most important action implemented within the andalusian programme ’actions for vocational training for women’ was that training courses should take into account local labour market conditions. 
17 LAATIKKO 4 andalusiassa toteutetun ”ammatillista koulutusta koskevia toimia naisille” -ohjelman merkittävimmän toimen yhtenä tavoitteena oli se, että koulutuskursseissa olisi otettava huomioon paikalliset työmarkkinaolosuhteet.
Five priority selection criteria were established by ’Ministerial Order’15 and three of these criteria focused on local conditions. 
Ministeriön päätöksellä15 vahvistettiin viisi ensisijaista valintakriteeriä, joista kolmessa keskityttiin paikallisiin olosuhteisiin.
For two of these — ’commitment to take on the person trained’ and ’inclusion of traineeship in companies’ — most project applications did not include such commitments. 
Näistä kahdessa kriteerissä (”sitoumus työllistää koulutettu henkilö” ja ”harjoittelujaksojen järjestäminen yrityksissä”) valtaosaan hankehakemuksia ei tällaisia sitoumuksia sisältynyt.
Data on the third criteria — ’employment rate regarding trainees of previous courses’ — were also often not included. the mid-term evaluation of the lombardy programme stated that the project selection process did not satisfactorily take into account training actions needed in sectors where gender imbalances were most prevalent, and also that not enough attention had been paid to various forms of discrimination and inequalitiy in access to the labour market. although the audited measure of the lombardy programme exclusively addressed women, the data show that 27 % of the training participants were male. 
Myöskään tietoja kolmannesta kriteeristä (”koulutuksen suorittaneiden harjoittelijoiden työllisyysaste”) ei yleensä ollut annettu. lombardiassa toteutetun ohjelman väliarvioinnissa todettiin, että hankevalinnassa ei otettu tyydyttävällä tavalla huomioon koulutustoimia aloilla, joilla sukupuolten epätasapainoa esiintyi eniten, ja että erilaisiin työmarkkinoille pääsyä haittaaviin syrjinnän ja epätasa-arvon muotoihin ei ollut kiinnitetty tarpeeksi huomiota. lombardiassa toteutetun ohjelman osalta tarkastettu toimenpide oli suunnattu yksinomaan naisille, mutta tiedoista käy ilmi, että 27 prosenttia koulutukseen osallistuneista oli miespuolisia.
15 ministerial order (boJa No 146, 19 december 2000, p. 18.647). 
15 Ministeriön päätös, (BoJa nro 146, 19. joulukuuta 2000, s.18.647).
30. one of the main objectives of the measures was the promotion of women in sectors where there was a history of female under-representation. despite this, for three of the programmes audited there was still an emphasis on areas of traditional female employment such as culture, health and cleaning. 
30. Yksi toimenpiteiden keskeisistä tavoitteista oli edistää naisten osallisuutta aloilla, joilla naiset ovat perinteisesti aliedustettuja. tästä huolimatta kolmessa tarkastetuista ohjelmista korostettiin yhä perinteisiä naisten työllisyysaloja, kuten kulttuuri-, terveydenhoito- ja siivousalaa.
31. the lack of specific target groups meant that the candidates selected were not always those most in need of support for entry or re-entry into the labour market, as the examples in textbox 5 show. 
31. Erityisten kohderyhmien puuttuminen tarkoitti sitä, että valitut hakijat eivät aina olleet niitä, jotka olisivat eniten tarvinneet apua päästäkseen tai palatakseen työmarkkinoille, kuten laatikossa 5 kuvatut esimerkit osoittavat.
18 TEXTBOX 5 the mid-term evaluation for the lombardy programme found that training was mainly provided for people with an already ’strong’ position in the labour market (e.g. highly educated and/or young people who already had a good chance of finding a job without further training). for the biggest action in the andalusian programme, a mid-term evaluation, for which the results were available in 2005, concluded that the training measure was not suited to the needs of the women with the greatest difficulties as, on the one hand, the education level required excluded women who had only been to primary school and, on the other hand, the training hours were not suited to women who had to care for their families. Special report No 17/2009 — Vocational training actions for women co-financed by the european Social fund 
18 LAATIKKO 5 lombardiassa toteutetun ohjelman väliarvioinnissa havaittiin, että koulutusta tarjottiin lähinnä henkilöille, joilla oli jo ”vahva” asema työmarkkinoilla (esim. korkeakoulutetuille ja/tai nuorille henkilöille, joilla oli jo hyvät mahdollisuudet löytää työtä ilman lisäkoulutustakin). andalusiassa toteutettiin ohjelman suurimman toimen väliarviointi, jonka tulokset saatiin vuonna 2005. Väliarvioinnissa todettiin, että koulutustoimenpide ei sopinut naisille, joilla oli eniten vaikeuksia, koska osallistujilta edellytetty koulutustaso sulki koulutuksen ulkopuolelle naiset, jotka olivat käyneet vain alakoulun, eivätkä koulutusajat sopineet naisille, joiden oli pidettävä huolta perheistään. Erityiskertomus nro 17/2009 — Euroopan sosiaalirahastosta osarahoitetut toimet naisten ammatillista koulutusta varten
BACKGROUND2 32. measuring the outcomes of training actions is a difficult exercise because: (a) a number of factors external to the training actions can play a major role with regard to the employability of individuals (e.g. evolution of labour supply and demand resulting from the overall economic situation); (b) eSf-co-financed actions are only one part of a wider field of action implemented within member States which have an influence on employment; and (c) certain results are difficult to measure within the context of the attainment of programme objectives, but are of a beneficial nature in wider societal terms (e.g. re-learning how to adapt to routines including the respecting of time constraints, restoration of self-confidence, etc.). 
OLIKO SEURANTATIETOJEN PERUSTEELLA MAHDOLLISTA ARVIOIDA, SAAVUTETTIINKO NAISILLE SUUNNATTUJEN AMMATILLISTA KOULUTUSTA KOSKEVIEN TOIMIEN TAVOITTEET? TAUSTAA2 32. Koulutustoimien tulosten mittaaminen on vaikeaa, koska: a) monilla koulutustoimien ulkopuolisilla tekijöillä (esim. työvoiman tarjonnan ja kysynnän kehitys, joka riippuu yleisestä taloustilanteesta) saattaa olla suuri vaikutus yksittäisten henkilöiden työllistymiseen b) Euroopan sosiaalirahastosta osarahoitetut toimet muodostavat vain yhden osan työllisyyteen vaikuttavien, jäsenvaltioissa toteutettavien toimien laajemmasta kokonaisuudesta ja c) tietyistä tuloksista on etua laajemmasta yhteiskunnallisesta näkökulmasta, mutta niitä on vaikea mitata ohjelmatavoitteiden saavuttamisen kannalta (koulutuksen kautta opitaan uudelleen sopeutumaan rutiineihin ja noudattamaan aikatauluja, saadaan itseluottamusta jne.).
In spite of such difficulties, some short-to medium-term achievements can still be measured. Indicators relevant to the objectives to be achieved could be established and corresponding targets set using benchmarks or other equivalent reference points regarding outputs, results and impact. this would constitute a basis for any subsequent monitoring and evaluation of measures and actions and hence for an appraisal of their effectiveness. 
Näistä vaikeuksista huolimatta joitakin lyhyen ja keskipitkän aikavälin saavutuksia voidaan silti mitata. olisi mahdollista vahvistaa tavoitteisiin liittyviä indikaattoreita sekä asettaa toiminnalle vastaavat päämäärät käyttämällä tuotoksia, tuloksia ja vaikutusta koskevia vertailuarvoja tai muita vastaavia viitekohtia. tähän perustuisivat myös toimenpiteiden ja toimien seuranta ja arviointi ja täten myös vaikuttavuuden arviointi.
19 Special report No 17/2009 — Vocational training actions for women co-financed by the european Social fund 
19 Erityiskertomus nro 17/2009 — Euroopan sosiaalirahastosta osarahoitetut toimet naisten ammatillista koulutusta varten
34. the following indicators provide a necessary minimum for evaluating vocational training actions16: (a) output indicators: number of (female) participants, number of courses provided; (b) results’ indicators: number of participants finishing courses, number of participants obtaining required qualifications; and (c) impact indicators: number of trainees going on to further training, number of trainees finding a job and who were still employed a stipulated time period (e.g. 6 or 12 months) after the end of the course. 
34. ammatillista koulutusta koskevien toimien arviointiin tarvitaan vähintään seuraavat indikaattorit16: a) tuotosindikaattorit: (nais)osallistujien määrä ja järjestettyjen kurssien määrä b) tulosindikaattorit: kurssin päättäneiden osallistujien määrä, vaaditun pätevyyden saaneiden osallistuneiden määrä, ja c) vaikutusindikaattorit: jatkokoulutukseen menneiden harjoittelijoiden määrä, niiden harjoittelijoiden määrä, jotka saivat työpaikan ja jotka ovat edelleen työssä määrätyn ajan (esim. 6 tai 12 kuukautta) kuluttua kurssista.
35. the court examined whether: (a) appropriate indicators had been identified and targets set for the measurement of output, results and impact set out in paragraph 34; (b) the monitoring data for these indicators collected by the bodies implementing the actions were reliable; and (c) in as far as could be ascertained from the available monitoring data, these targets had been attained. 
35. tilintarkastustuomioistuin tarkasti: a) ovatko kohdassa 34 käsitellyt asianmukaiset indikaattorit yksilöity ja tuotosten, tulosten ja vaikutuksen mittaamiseen tarkoitetut päämäärät asetettu b) olivatko toimien täytäntöönpanosta vastaavien elinten indikaattoreista keräämät seurantatiedot luotettavia ja c) näyttikö saatavilla olevien seurantatietojen perusteella siltä, että päämäärät on saavutettu.
INDICATORS TOO NARROWLY FOCUSED 36. whilst output indicators had been established for all audited programmes, the situation regarding results’ and impact indicators varied. 
INDIKAATTORIT OLIVAT LIIAN KAPEA-ALAISIA 36. tuotosindikaattorit oli laadittu kaikille tarkastetuille ohjelmille, mutta tulos-ja vaikutusindikaattorien kohdalla tilanne vaihteli.
In one case both types of indicator existed, whereas in another, neither had been established. 
Yhdessä tapauksessa oli kumpiakin indikaattorityyppejä, kun taas toisessa ei ollut laadittu kumpiakaan.
In the remaining three programmes, either results’ or impact indicators existed, but not both. the following aspects were noted. (a) the employment situation from 6 to 12 months after the training was not used as an indicator at measure level for four programmes although, in some instances, the information was available at individual project level (see textbox 6). 
Muissa kolmessa ohjelmassa oli joko tulos-tai vaikutusindikaattoreita, mutta ei molempia. tarkastuksessa pantiin merkille seuraavat tekijät: a) työllistymistilannetta 6–12 kuukautta koulutuksen päättymisestä ei käytetty indikaattorina neljässä ohjelmassa, vaikka joissakin tapauksissa tieto oli saatavilla yksittäisten hankkeiden tasolla (ks. laatikko 6).
In addition, other issues such as job duration (i.e. short term or long term) and job level (in terms of quality and pay) were not considered. 
Muitakaan tekijöitä, kuten työn kestoa (eli lyhyt-tai pitkäaikaisuutta) ja työn tasoa (laatu ja palkka), ei otettu huomioon.
16 the indicators were identified on the basis of a review by the court of the programmes audited, of guidance issued by the european Commission in 1999 (’MEANS Collection’ aimed at improving methods of evaluating structural policies) and of the specific 1999 Commission’s ’Guidelines for systems of monitoring and evaluation of eSf assistance in the period 2000–06. 
16 Indikaattoritmääritettiin tilintarkastustuomioistuimen arvioinnin perusteella. arviointi koski tarkastettuja ohjelmia, komission vuonna 1999 antamia ohjeita (MEaNS-asiakirjoja, jonka tarkoituksena oli parantaa rakennetoimien arviointimenetelmiä) ja komission vuonna 1999 antamia ohjeita Euroopan sosiaalirahaston kauden 2000–2006 tukea koskevia valvonta-ja arviointijärjestelmiä varten (Guidelines for systems of monitoring and evaluation of ESF assistance in the period 2000–2006).
20 Special report No 17/2009 — Vocational training actions for women co-financed by the european Social fund 
20 Erityiskertomus nro 17/2009 — Euroopan sosiaalirahastosta osarahoitetut toimet naisten ammatillista koulutusta varten
(b) one of the programmes did not have a sufficient range of indicators to allow a worthwhile analysis to be made and in another case the indicators established were not of a type suitable for the measurement of the achievements of the training actions implemented (see textbox 7). 
LAATIKKO 6 LAATIKKO 7 b) Yhdellä ohjelmista ei ollut tarpeeksi paljon erilaisia indikaattoreita, joten hyödyllistä analyysiä ei voitu tehdä. toisessa tapauksessa indikaattorit eivät sopineet mittaamaan toteutettujen koulutustoimien saavutuksia (ks. laatikko 7).
21 TEXTBOX 6 TEXTBOX 7 In lombardy, the authorities examined a sample of projects with regard to the employment status of trainees 12 months after the completion of the training actions and this was considered by the Court as being an example of ’good practice’. 
21 lombardiassa viranomaiset tutkivat otoksen hankkeita siltä kannalta, mikä oli harjoittelijoiden työllisyystilanne 12 kuukautta koulutustoimien päättämisen jälkeen. tilintarkastustuomioistuin piti tätä esimerkkinä ”hyvästä käytännöstä”. andalusiassa oli laadittu indikaattori, jonka avulla mitattiin harjoittelijoiden onnistumista työnhaussa. tietojen keruussa havaittiin kuitenkin joitakin puutteita.
In andalusia, an indicator had been established concerning the success or otherwise of trainees in their subsequent search for employment. however, some weaknesses were observed with regard to data collection. for example, for one of the actions receiving 35 % of total expenditure for the measure, the relevant information was only available for 42 % of the training courses sampled. 
Esimerkiksi eräälle toimelle oli myönnetty 35 prosenttia kaikista toimenpiteeseen liittyvistä menoista, mutta relevanttia tietoa oli saatavilla ainoastaan 42 prosentista niistä toimeen kuuluvista koulutuskursseista, jotka oli poimittu otokseen. andalusiassa ”kuuden kuukauden kuluessa toimista saatujen työpaikkojen määrä” -indikaattorissa ei otettu riittävällä tavalla huomioon osarahoitettujen toimenpiteiden erityispiirteitä.
In Andalusia, the indicator ’number of jobs obtained within six months after the actions’ did not adequately address the specificities of the measures co-financed. as 40 % of the expenditure went on orientation and pre-training actions, more pertinent indicators might have dealt with numbers going on to further training or registering as job seekers. furthermore, 20 % of the trainees were already in employment and therefore their responses skewed the apparent results of this indicator. 
Menoista 40 prosenttia kohdennettiin neuvontaan ja ennen koulutusta toteutettaviin toimiin, joten osuvampia indikaattoreita olisivat kenties olleet lisäkoulutukseen hakeutuneiden ja työpaikanhakijoiksi rekisteröityneiden määrä. lisäksi 20 prosenttia harjoittelijoista oli jo työllistyneitä ja heidän vastauksensa vääristivät indikaattorin avulla saatuja tuloksia. tietyt Skotlannissa toteutetun ohjelman indikaattorit, kuten ”osittaisen/täyden pätevyyden saavuttaneiden naisten/henkilöiden määrä” olivat liian laaja-alaisia, ja täten niillä ei ollut paljoa merkitystä mitattaessa koulutustoimien tuloksia.
In terms of the indicator, the passing of one learning unit towards a full qualification was equivalent to obtaining the full qualification, even though the learning effect could not in any way be judged as comparable. Special report No 17/2009 — Vocational training actions for women co-financed by the european Social fund 
Indikaattorin mukaan yhden pätevyyteen tähtäävän oppimis-kokonaisuuden suorittaminen vastasi täyden pätevyyden saavuttamista, vaikka oppimisvaikutusta ei voitu millään tavoin arvioida vertailukelpoiseksi. Erityiskertomus nro 17/2009 — Euroopan sosiaalirahastosta osarahoitetut toimet naisten ammatillista koulutusta varten
TARGETS NOT SET FOR ALL MEASURES 37. targets to be achieved were not set for all measures audited17: in two cases there was no quantification at all and in another case, although a number of output and results’ indicators had been identified, the only quantified target was for ’number of partici-pants’. 
KAIKILLE TOIMENPITEILLE EI ASETETTU PÄÄMÄÄRIÄ 37. Kaikille tarkastetuille toimenpiteille ei ollut asetettu päämääriä17: Kahdessa tapauksessa päämääriä ei ollut määrällistetty lainkaan ja yhdessä tapauksessa ainoa määrällinen päämäärä oli ”osallistujien määrä”, vaikka ohjelman yhteydessä oli yksilöity useita tuotos-ja tulosindikaattoreita.
38. for the two measures where targets had been set, there was no explanation as to how they had been established and in one case the targets had to be revised significantly following the mid-term review (see textbox 8). 
38. Niiden kahden toimenpiteen osalta, joille oli asetettu päämäärät, ei ollut mitenkään selvitetty, miten nämä oli laadittu, ja yhdessä tapauksessa päämääriä oli muutettava huomattavasti väliarvioinnin jälkeen (ks. laatikko 8).
MONITORING DATA UNRELIABLE AND SOMETIMES INCOMPLETE 39. for two of the five programmes, output indicators concerning the number of participants were found to be unreliable. for four of the programmes, results’ indicators such as numbers completing training and gaining qualifications were also found to be unreliable. 
SEURANTATIEDOT EIVÄT OLLEET LUOTETTAVIA EIVÄTKÄ AINA KATTAVIA 39. Kahdessa viidestä ohjelmasta osallistujien määrää koskevat tuotosindikaattorit havaittiin epäluotettaviksi.
17 a similar conclusion was already drawn in the Court’s Special Report No 7/2003 (oJ c 174, 23.7.2003) on the implementation of assistance programming for the period 2000 to 2006 within the framework of the Structural funds. paragraph 89 of this report states that ’indicators were still not sufficiently quantified or relevant’. 
17 Vastaava päätelmä tehtiin jo rakennerahastojen tukitoimiin liittyvän ohjelmatyön täytäntöönpanoa kaudella 2000–2006 koskevassa tilintarkastustuomioistuimen erityiskertomuksessa nro 7/2003 (EuVl C 174, 23.7.2003). Kertomuksen 89 kohdassa todetaan, että indikaattorit eivät olleet riittävän määrällisiä tai tarkoituksenmukaisia.
22 TEXTBOX 8 Indicator Target (initial) Target (revised) Benchmarks % of women going into employment 31 % 5,51 % 25-40 % % of women going on to further training 42 % 17,56 % 20-30 % for the Scottish programme, quantified targets had been set up as per the table below. despite enquiries by the court, no information was provided as to how benchmarks had been established or initial and revised targets arrived at. Special report No 17/2009 — Vocational training actions for women co-financed by the european Social fund 
22 LAATIKKO 8 Indikaattori Päämäärä (alkuperäinen) Päämäärä (muutettu) Vertailuarvo Työllistyneet naiset 31 % 5,51 % 25-40 % Lisäkoulutukseen hakeutuneet naiset 42 % 17,56 % 20-30 % Skotlannissa toteutetussa ohjelmassa määrälliset päämäärät oli asetettu jäljempänä olevassa taulukossa esitetyllä tavalla. tilintarkastustuomioistuin ei kyselyistään huolimatta saanut tietoa siitä, miten vertailuarvot oli vahvistettu, tai siitä, miten alkuperäisiin tai tarkistettuihin päämääriin oli päästy. Erityiskertomus nro 17/2009 — Euroopan sosiaalirahastosta osarahoitetut toimet naisten ammatillista koulutusta varten
If meaningful conclusions as to the achievements of the co-financed projects are to be drawn, it is essential that the monitoring data provided by the project promoters are reliable and complete. It was observed during the course of the audit that in most cases the managing authority and body delegated to carry out checks did not include any evaluation of the monitoring data provided by promoters. 
Jotta osarahoitettujen hankkeiden saavutuksista tehdyt päätelmät olisivat tarkoituksenmukaisia, on tärkeää, että hankkeiden edistäjien toimittamat seurantatiedot ovat luotettavia ja kattavia. tarkastuksen aikana huomattiin, että useimmissa tapauksissa hallintoviranomainen ja elin, jolle tarkastustehtävät oli siirretty, eivät arvioineet lainkaan hankkeiden edistäjien toimittamia seurantatietoja.
42. for its part, the commission, which receives the annual implementation reports, did not address the inconsistencies existing in these reports nor did it comment on the lack of impact indicators (such as ’employment situation of trainees ''x'' months after the train-ing’). 
42. Komissio, joka vastaanottaa vuotuiset täytäntöönpanokertomukset, ei käsitellyt kertomusten sisältämiä epäjohdonmukaisuuksia eikä kommentoinut vaikutusindikaattorien (kuten ”harjoittelijoiden työllisyystilanne ”x” kuukauden kuluttua koulutuksesta”) puuttumista.
Furthermore, it did not implement checks on the reliability of monitoring data when carrying out its on-the-spot audits18, although the mid-term evaluations in respect of each programme had identified weaknesses in monitoring and reporting. 
Komissio ei myöskään tarkastanut seurantatietojen luotettavuutta paikalla tehtyjen tarkastusten yhteydessä18, vaikka kaikkien ohjelmien väliarvioinneissa oli yksilöity puutteita seurannassa ja raportoinnissa.