natgillin/translations-raw huggingface dataset:
Marie Gartell 
Marie Gartell
Introduction 2 
Inledning 2
A brief description of the work method 4 
En kort beskrivning av arbetssättet Rätt jobb 4
Previous studies 4 
Tidigare studier 4
Identification strategy 5 
Utvärderingsstrategi 5
Method 5 
Metod 5
Randomization in practice 6 
Randomiseringen i praktiken 6
The evaluation question 6 
Utvärderingsfrågan 6
Data 7 
Data 7
Participation in treatments 8 
Deltagande i aktivitet 8
Results 11 
Resultat 12
Survey 1 11 
Enkät 1 12
Survey 2 15 
Enkät 2 16
Analysis of administrative data 18 
Sannolikheten att få arbete eller påbörja reguljär utbildning 18
6.3.1 Effects for different groups of individuals 21 
6.3.1 Effekter för olika grupper av individer 21
Resources 23 
Resurser 23
Survey to caseworkers 24 
Vad tycker förmedlarna?
Summary and discussion 27 
Sammanfattning och diskussion 27
References 30 
Referenser 30
Appendix 31 
Appendix 31
Questionnaires 32 
Enkäter 32
Questionnaire 1 32 
Enkät 1 32
Questionnaire 2 35 
Enkät 2 35
Page: 2 of 37 
Sida: 2 av 36
Rätt jobb – job coaching in groups. 
Rätt jobb – jobbcoachning i grupp.
Final report. 
Slutrapport.
The purpose of Right Job (RJ hereafter) is to enable the PES to work with large volumes of jobseekers in a uniform manner. 
Syftet med Rätt jobb är att Arbetsförmedlingen på ett enhetligt sätt ska kunna arbeta med stora volymer av arbetssökande genom att erbjuda de sökande jobbcoachning i grupp.
Although group meetings are potentially detrimental to the quality of work with jobseekers resulting from individuals maybe having less one- on-one time with their employment officers, there may, on the other hand, be positive effects in that jobseekers gain more contact hours overall. 
Å andra sidan kan det finnas positiva effekter i och med att den arbetssökande totalt sett får fler handläggartimmar.
The fact that jobseekers meet in groups might also have positive outcomes in the form of networking effects. 
Att de arbetssökande träffas i grupp kan även ha positiva effekter genom s.k. nätverkseffekter.
In other words, it is not self-evident what effect group activities have on the desired outcome - of the jobseeker getting a job. 
Det är med andra ord inte självklart vilken effekt gruppverksamhet har på det önskade utfallet - att den arbetssökande får ett arbete.
In total, the experiment included almost 2 500 individuals, about half of whom participated in RJ. 
Totalt omfattade försöksverksamheten knappt 2 500 individer, varav omkring hälften deltog i Rätt jobb.
Estimating the effect of RJ requires a control group that is similar in all respects to the treatment group. 
För att kunna skatta effekten av Rätt jobb krävs en kontrollgrupp som i alla avseenden liknar gruppen som deltar i Rätt jobb.
The basic problem of identification is that the only observable outcome for the individual is the actual outcome of participation in RJ. 
Det grundläggande utvärderingsproblemet är att det enda utfallet som kan observeras för individen är det faktiska utfallet vid deltagande i Rätt jobb.
In contrast, the outcome for the individual if he or she had not participated in RJ is not observable. 
Utfallet för individen om han eller hon inte hade deltagit i Rätt jobb kan däremot inte observeras.
It is thus not simultaneously possible to observe the same individual as both a participant in RJ and as a non-participant. 
Det är alltså inte möjligt att observera samma individ som både deltagare i Rätt jobb och som icke-deltagare vid samma tidpunkt.
Provided that the sample is sufficiently large, there will be no mean differences between the treatment and control group in terms of observable and non-observable characteristics that might influence factors such as labor market outcome. 
Under förutsättning att urvalet är tillräckligt stort kommer det inte att finnas några genomsnittliga skillnader mellan grupperna vad gäller observerbara eller icke-observerbara egenskaper som kan påverka bl.a. arbetsmarknadsutfallet.
This makes the groups comparable so that any differences in outcome between the groups may be attributed to RJ. 
Därmed blir grupperna jämförbara så att eventuella skillnader i utfall mellan grupperna kan tillskrivas Rätt jobb.
The outcomes studied are employment and regular education, and also outcomes such as the individuals' job seeking activities and contact with the PES, and self- perceived life situation (wellbeing). 
Vi studerar utfallet arbete och reguljär utbildning, men även utfall så som t.ex. de sökandes jobbsökaraktivitet och kontakt med Arbetsförmedlingen samt deras välbefinnande.
Furthermore, we report results from a survey distributed to the caseworkers. 
Vi redovisar även vad förmedlarna tycker om arbetssättet Rätt jobb.
The results e.g. show that the treatment group, as compared to the control group, have more frequent contact with the PES, are more satisfied with the PES’s 
1 Erika Rosén har bidragit i projektet genom såväl analysarbete som med det praktiska arbetet med experimentet.
In this report, we have instead chosen to call it job coaching in groups since this better describes the content of the group activities. 
Vi har i denna rapport valt att i stället kalla det för jobbcoachning i grupp då det bättre beskriver innehållet i gruppaktiviteterna.
4 See Gartell & Rosén (2012) and Gartell (2013) for a description and results regarding, respectively, the pilot project Right Job and preliminary results from the experiment. 
3 Se Gartell & Rosén (2012) och Gartell (2013) för en beskrivning av och resultat från pilotprojektet Rätt jobb respektive preliminära resultat från försöksverksamheten.
Page: 3 of 37 Rätt jobb – job coaching in groups. 
Sida: 3 av 36 Rätt jobb – jobbcoachning i grupp.
Final report. 
Slutrapport
The results also indicate that the treatment groups self-perceived life situation appear somewhat better. 
Resultaten indikerar även att individerna i Rätt jobb-gruppen tycks må något bättre.
Furthermore, participation in RJ increases the probability of getting a job or commencing a regular education. 
Vidare ökar deltagandet i Rätt jobb sannolikheten att få ett arbete eller påbörja reguljär utbildning.
The results suggest that the effect is better for individuals who have a weak foothold on the labor market, such as individuals born outside Europe and who have at most a pre-upper secondary school education. 
Resultaten tyder på att effekten är bättre för individer som står långt från arbetsmarknaden, såsom utomeuropeiskt födda och dem med högst en förgymnasial utbildning.
One hypothesis is that these groups of individuals tend to lack their own networks to a greater extent and therefore benefit more from participating in group meetings. 
En hypotes är att dessa individer i större utsträckning saknar egna nätverk och därmed har större nytta av att delta i Rätt jobb.
Another possible explanation could be that these groups of individuals benefit more from the help offered by RJ, such as CV-writing and interview training. 
En annan möjlig förklaring kan vara att dessa grupper av individer drar större nytta av den hjälp som erbjuds inom Rätt jobb, så som CV-skrivande och intervjuträning.
The fact that participation in RJ does not appear to have any long-term effects is consistent with the results presented in Gartell 2013, which estimated the outcome for the individual one to two years after the group formation. 
Att det inte tycks finnas några långsiktiga effekter av att delta i Rätt jobb stämmer väl överens med de resultat som presenterades i Gartell 2013, där utfallet för individen mättes ett till två år efter gruppstart.
One important aspect is the caseworkers’ views on RJ. 
En viktig aspekt är vad de förmedlare som arbetat med Rätt jobb tycker.
A clear majority of officers state that they are satisfied with RJ tasks and that they want to continue using the work method. 
En klar majoritet av förmedlarna uppger att de är nöjda med uppgifterna inom Rätt jobb och att de vill fortsätta att arbeta med arbetssättet.
They also state that there have been improvements in their contact with jobseekers and their ability to identify jobseekers in need of the Clarify Service. 
De uppger även att kontakten med de sökande, och förmågan att identifiera sökande i behov av tjänsten Klargöra, har förbättras.
The estimated effect of RJ should be related to the resources spend on the treatment and control group respectively. 
Resultaten måste vägas mot de resurser som deltagar- respektive kontrollgrupp har tagit del av.
We show that the treatment group on average received a little more resources than individuals in the control group – in terms of hours of contact this represents an average of about 1.5 hours more per individual. 
Vi visar att deltagargruppen i genomsnitt har tagit del av något mer resurser än individerna i kontrollgruppen – i termer av handläggartimmar handlar det i genomsnitt om omkring 1,5 timmar mer per individ.
That the treatment group received more resources was due to that RJ in the present experiment was carried out in addition to regular operations. 
Att deltagargruppen fått mer resurser beror på att gruppverksamheten i den aktuella försöksverksamheten bedrevs utöver ordinarie verksamhet.
The treatment group thus also had access to the PES’s regular operations (tau), such as individual meetings, during the same period. 
Personerna fick alltså även ta del av Arbetsförmedlingens ordinarie insatser, t.ex. individuella möten, under samma tidsperiod.
The report is organized as follows. 
Rapporten är disponerad enligt följande.
The next section gives a brief description of the RJ work method. 
I nästa avsnitt ges en kort beskrivning av arbetssättet Rätt jobb.
Section 3 provides a brief review of related literature. 
Avsnitt 3 går kort igenom relaterad litteratur.
Section 4 describes the identification strategy, and Section 5 presents data. 
Utvärderingsstrategin beskrivs i avsnitt 4 och i avsnitt 5 presenteras data.
Section 6 presents the results. 
I avsnitt 6 redovisas resultaten.
Section 7 discusses the resources that have been used for the participant and control groups, and Section 8 reports the case workers view on the RJ work method. 
Avsnitt 7 diskuterar vilka resurser som har använts till deltagar- respektive kontrollgrupp, och i avsnitt 8 redovisas hur förmedlarna ser på arbetssättet Rätt jobb.
Finally, Section 9 provides a summary and discussion of the results. 
Slutligen, i avsnitt 9, sammanfattas och diskuteras resultaten.
5 The Clarify service is for jobseekers needing enhanced support to clarify their opportunities for work or education. 
4 Tjänsten Klargöra är till för arbetssökande som behöver fördjupat stöd för att klargöra sina förutsättningar för arbete eller utbildning.
Among other groups, the service is intended for jobseekers who are unsure of their work capacity, have impaired work capacity or other difficulties affecting their choice of work/profession and preventing them from becoming established in the labour market. 
Den vänder sig bl.a. till arbetssökande som är osäkra på sin arbetsförmåga, har nedsatt arbetsförmåga eller andra svårigheter som påverkar val av arbete/yrke och som hindrar dem från att etablera sig på arbetsmarknaden.
Page: 4 of 37 
Sida: 4 av 36
A brief description of the work method 
En kort beskrivning av arbetssättet Rätt jobb
The work method Right Job (RJ) involves caseworkers meeting jobseekers in groups.The size of these groups varies, but a group usually consists of 10-20 persons. 
Rätt jobb innebär att arbetsförmedlarna träffar de arbetssökande i grupper.Storleken på grupperna varierar, men en grupp består vanligen av 10-20 personer.
The idea is that group activities require fewer resources than individual meetings in terms of hours of contact. 
Tanken är att gruppverksamhet är mindre resurskrävande än individuella möten i termer av handläggartimmar.
In other words, given the same number or hours of contact, the employment officer is able to meet more jobseekers. 
Det vill säga, handläggaren kan träffa fler arbetssökande givet samma antal handläggartimmar.
Activities begin with five 3-hour seminars that span over one or two weeks. 
Verksamheten inleds med fem seminarier à tre timmar fördelat på en eller två veckor.
The seminars include writing tools, networking methods and interview training. 
Seminarierna omfattar bl.a. verktyg att skriva, metoder för nätverkande och träning inför intervjuer.
After the five introductory seminars, the jobseekers continue to meet by themselves in what are known as operational teams. 
Efter de fem inledande seminarierna fortsätter de arbetssökande att träffas självständigt i så kallade operativa team.
In these self-contained groups, the jobseekers themselves draw up concise and concrete action plans for the coming 14 days (known as a 2-week sprint). 
I dessa självgående jobbsökargrupper gör de arbetssökande själva upp korta och konkreta handlingsplaner för de närmaste 14 dagarna (s.k. 2 veckors sprint).
The team meets every day to help and support each other. 
Teamet träffas varje dag där deltagarna hjälper och stöttar varandra.
One important detail is that the caseworker should not attend these meetings, but only be responsible for starting things up and logistics. 
En viktig detalj är att handläggaren inte ska närvara på dessa möten, utan endast ansvara för uppstart och logistik.
The operational teams consist of 8-12 participants. 
De operativa teamen består av 8-12 deltagare.
Every 14 days, the operational teams are regrouped, partly to compensate for the loss of participants due to e.g. work and studies, and partly to boost contacts, networks and social stimuli. 
Var 14:e dag ombildas de operativa teamen, dels för att kompensera för bortfall av deltagare på grund av t.ex. arbete och studier, dels för att öka kontaktytor, nätverk och social stimuli.
Start of RJ 
Start Rätt jobb
Start of operational teams 
Start operativa team
2 4 6 
2 v. 4 v. 6 v.
Seminars 1-5 2-week sprint 2-week sprint 2-week sprint 
Seminarium 1-5 2 veckors sprint 2 veckors sprint 2 veckors sprint
Previous studies 
Tidigare studier
There is extensive literature on the impacts of traditional active labor market programs.The meeting between caseworkers and jobseekers has been evaluated to a much lesser extent. 
Det finns en omfattande litteratur som utvärderar arbetsmarknadspolitiska insatser i form av t.ex. arbetsmarknadsutbildning och arbetspraktik.Mötet mellan förmedlaren och den arbetssökande är utvärderat i betydligt mindre utsträckning.
Meetings may result in different effects depending on their content and form. 
Dessa möten kan resultera i olika effekter beroende på dess innehåll och form.
There are two types of effect that could arise. 
Det finns två typer av
6 This arrangement is based on Scrum and Lean methodology. 
5 Upplägget bygger på Scrum och Lean metodiken (http://sv.wikipedia.org/wiki/Scrumhttp://sv.wikipedia.org/wiki/Lean_production
7 Pedersen Maibom et al. (2012) provides a thorough review of the previous literature. 
6 Pedersen Maibom m.fl. (2012) går grundligt igenom tidigare litteratur.
The present section is based largely on this review. 
Detta avsnitt baseras till stor del på deras litteraturgenomgång.
Page: 5 of 37 Rätt jobb – job coaching in groups. 
Sida: 5 av 36 Rätt jobb – jobbcoachning i grupp.
One of the most recent studies on meetings comes from Denmark and investigates both individual meetings and group meetings (Pedersen Maibom et al. 2012).This study is based on randomized experiments. 
En av de senaste studierna på området kommer från Danmark, och undersöker både enskilda möten och möten i grupp (Pedersen Maibom m.fl. 2012).Denna studie baseras på randomiserade experiment.
The group meetings consist of a 2-3 hours meeting per week, while the individual meetings consist of a 15-30 minutes meeting every other week. 
Gruppmötena består av ett möte på 2-3 timmar per vecka, medan de individuella mötena består av ett möte på 15-30 minuter varannan vecka.
The reference group participates in tau – the jobseeker should usually have at least one meeting with an employment officer every three months and after 6-9 months has the opportunity (and obligation) to participate in labor market policy programs. 
Referensgruppen deltar i den ordinarie verksamheten – den arbetssökande ska vanligtvis ha minst ett möte med en förmedlare var tredje månad och har efter 6-9 månader möjlighet (och skyldighet) att delta i arbetsmarknadspolitiska program.
The results indicate positive but non-significant effects of group meetings, and positive and significant effects of individual meetings. 
Resultaten visar på positiva men icke-signifikanta effekter av gruppmöten, och på positiva och signifikanta effekter av individuella möten.
If the cost of the measures is taken into account (cost-benefit analysis) then both types of meetings have positive effects but, here too, individual meetings have more positive effects. 
Om kostnaden av insatserna tas med i beräkningen (s.k. cost-benefit analys) har båda typen av möten positiva effekter, men de individuella mötena har även här mer positiva effekter.
Pedersen Maibom et al. (2012) include a thorough review of previous research on active labor market policies. 
Pedersen Maibom m.fl. (2012) innefattar en grundlig genomgång av tidigare forskning på olika arbetsmarknadspolitiska insatser.
This review draws the conclusion that meetings have positive and relatively great effects on the individuals' labor market outcomes. 
Från denna genomgång drar de slutsatsen att möten har positiva och relativt stora effekter för individernas arbetsmarknadsutfall.
It generally appears that the effects of meetings are both greater and more consistent compared with those of traditional labor market policy programs. 
Det tycks generellt som effekterna av möten är både större och mer konsistenta jämfört med traditionella arbetsmarknadspolitiska program.
Identification strategy 
Utvärderingsstrategi
This means that participants were randomly assigned to the opportunity to participate in RJ. 
Med randomisering avses att vi slumpmässigt tilldelar arbetssökande möjligheten att delta i Rätt jobb.
Jobseekers that are not given this opportunity are included in the control group and to tau. 
De arbetssökande som inte får denna möjlighet ingår i kontrollgruppen och deltar istället i Arbetsförmedlingens ordinarie verksamhet.
If we were to let jobseekers themselves choose whether they want to participate in RJ or in tau, there is a risk that individuals who prefer RJ are different with regard to non-observable characteristics that our analysis cannot take into consideration. 
Om vi istället skulle låta de arbetssökande själva välja om de vill delta i Rätt jobb eller i den ordinarie verksamhet finns en risk att de individer som föredrar Rätt jobb är annorlunda med avseende på egenskaper som vi inte kan observera, och som vi därmed inte kan ta hänsyn till i vår analys.
For example, individuals choosing to participate in group meetings might differ in terms of motivation or social competence, which may also affect their opportunities to get a job. 
Exempelvis skulle individer som väljer att delta i gruppverksamhet kunna ha en annan motivation eller social kompetens, vilket kan påverka deras möjligheter att få ett arbete.
Any differences in outcome between the groups cannot then be attributed to the treatment. 
Eventuella skillnader i utfallet mellan grupperna kan då inte tillskrivas insatsen.
However, randomization requires the sample to be sufficiently large for randomness to result in equivalence in all respects between the groups of participants and non-participants. 
Randomiseringen förutsätter dock att antalet
For example, Hägglund (2006) demonstrates in a randomised experiment that 46% of the individuals summoned to a meeting left unemployment already before the time of the meeting. 
Exempelvis visar Hägglund (2006), i ett randomiserat experiment, att 46% av individerna som kallades till ett möte lämnade arbetslösheten redan innan tidpunkten för mötet.
Studies investigating the ex post effects of a meeting generally indicate positive effects on employment. 
Studier som undersöker ex post effekterna av ett möte visar generellt på positiva effekter på sysselsättningen.
10 See also Kjærsgaard 2012 for more in-depth studies of meetings in Denmark. 
9 Se även Kjearsgaard 2012 för mer fördjupade studier av möten i Danmark.
Among other things, Kjærsgaard finds that the effect of meetings comes close to the meeting, and that the effect appears to increase the more meetings there are. 
Kjearsgaard finner bl.a. att effekten av möten kommer nära inpå mötet, och att effekten tycks tillta ju fler möten som hålls.
Kjærsgaard also studies the effect of group composition in group meetings and finds that the effect can be influenced by the composition of participants in the group. 
Vidare studerar Kjearsgaard effekten av gruppsammansättning vid gruppmöten, och finner att effekten kan påverkas av sammansättningen av deltagare i gruppen.
Page: 6 of 37 
Sida: 6 av 36
Randomization in practice 
Randomiseringen i praktiken
In practice, randomization was performed as follows. 
I praktiken har randomiseringen gått till enligt följande.
Before each group formation, a list of the individuals in the target group in question was created. 
Inför varje gruppstart har en lista med individerna i den aktuella målgruppen skapats.
Treatment and control subjects were selected from this list at random. 
Från denna lista har deltagare samt jämförelsepersoner slumpmässigt valts ut.
At the first two participating offices a random number for each individual was generated, and the individuals on the list were sorted according to this random number. 
Vid de två första kontoren genererades ett slumptal för varje individ, och individerna på listan sorterades efter detta slumptal.
The list was then divided into two parts so that the number of individuals who would be summoned to RJ was about the same as the number of individuals who would not be called. 
Listan delades sedan i två delar så att antalet individer som skulle kallas till Rätt jobb var ungefär det samma som antalet individer som inte fick kallas.
Before each randomization, the control subjects from the preceding randomization were matched against the new sample to ensure that no control subjects from the preceding sample were summoned to RJ. 
Inför varje randomisering matchades kontrollpersonerna från föregående randomisering med det nya urvalet för att säkerställa att inga kontrollpersoner från föregående urval kallades till Rätt jobb.
This procedure was modified during the project, and a web tool to perform the randomization was used. 
Detta förfarande modifierades under projektets gång och randomiseringen utfördes sen vid kontoren med hjälp av ett webb-verktyg.
In other words, based on a list of the target group in question, each individual's personal identity number was entered into this tool. 
Det vill säga, utifrån en lista över den aktuella målgruppen knappades varje individs personnummer in i detta verktyg.
The employment officers then received an immediate answer on their screen indicating whether or not the individual should be summoned to RJ. 
Förmedlarna fick då direkt upp ett svar på skärmen som angav huruvida individen skulle kallas till Rätt jobb eller inte.
The sample was based on the individual's date of birth. 
Urvalet baserades på individens födelsedatum.
The same personal identity number always generates the same result in the web tool. 
Samma personnummer genererar alltid samma resultat i webb-verktyget.
All individuals summoned to RJ did not attend the group meetings. 
Alla individer som kallades till Rätt jobb deltog inte, det vill säga, det finns ett bortfall.
To keep track of participation, a record was kept of whether or not the individual attended the meetings. 
För att hålla reda på detta bortfall dokumenterades om individen deltog i Rätt jobb eller inte.
A participant is a person who attended at least one seminar. 
En deltagare är en person som närvarat vid minst ett seminarium.
Some other information was also recorded, such as the date the group was formed and the employment officer(s) who had responsibility for each group. 
Även en del annan information dokumenterades, såsom datum för gruppstart och vilken/vilka handläggare som har haft ansvar för respektive grupp.
These records were made by the officers at the offices. 
Denna dokumentation utfördes av handläggarna på kontoren.