Source: http://docplayer.fi/2132829-Kaste-ohjelman-valtionavustushankkeet.html
Timestamp: 2017-06-29 10:59:55+00:00
Document Index: 22443614

Matched Legal Cases: ['kko ', 'KKO ', 'kko ', 'kko ', 'kko\n', 'kko ', 'kko ']

Kaste-ohjelman valtionavustushankkeet - PDF
Kaste-ohjelman valtionavustushankkeet
Download "Kaste-ohjelman valtionavustushankkeet"
1 Kaste-ohjelman valtionavustushankkeet Näkökulmia osahankkeiden arviointiin Kivipelto, Minna; Heinonen, Hanna; Larivaara, Meri; Jonsson, Pia Maria; Kotiranta, Tuija; Vierros, Anne; Vuorenmaa, Maritta; Maijanen, Susanna; Tulonen-Tapio, Johanna Terveyden ja hyvinvoinnin laitos (THL) PL Helsinki Telephone:2 2 Esipuhe Terveyden ja hyvinvoinnin laitos asetti arvioinnin asiantuntijaryhmän Kaste-hankkeiden arvioinnin etenemisen tukemiseksi. Asiantuntijaryhmän tehtävänä on tarjota Kaste-hankkeille arvioinnin asiantuntija-apua sekä vahvistaa tarvittaessa kehittämistyön asiantuntijoiden arviointiosaamista. Käytännössä tämä tarkoittaa hankkeiden kehittämistyöhön kiinnittyvän arviointitoiminnan monipuolista tukemista niin arviointisuunnitelmaa laadittaessa kuin arviointia toteutettaessa. Asiantuntijaryhmän tehtävänä on toimia metodologisena tukena hankkeiden itsearvioinnin toteuttamisessa. Osahankkeissa itsearviointi on usein riittävä tapa arvioida toimintaa, samalla luodaan kuitenkin pohjaa myös ulkopuoliselle arvioinnille, jos siihen joissain tilanteissa päädytään. Itsearvioinnin toteuttaminen edellyttää kehittämistyön ja siihen kiinnittyvän arvioinnin systemaattista dokumentointia ja työstä raportointia. Arviointi kiinnittyy siis varsin luontevasti osaksi kehittämistyötä, jos sen toteuttaminen aloitetaan heti kehittämistyön käynnistyessä. Kuitenkaan pelkkä prosessikuvaus ei ole arviointia, vaan arvioinnissa tulee aina olla erotettavissa arvot, joiden suhteen asia on toteutettu. Michael Scrivenin (1991) arvioinnin klassisen määritelmän mukaan Arvioinnin perusmerkitys viittaa jonkin asian ansion, merkityksen tai arvon määrittelyn prosessiin." Arvioinnin asiantuntijaryhmän toiminnan käynnistyessä päätettiin Kaste-hankkeille koota helposti saatavilla olevaa arviointitietoa sähköiseen muotoon osana arviointituen kokonaisuutta. Asiantuntijaryhmä on koonnut oheisen verkkojulkaisun, jossa tarjotaan näkökulmia osahankkeiden arviointiin. Tekstin toimittamisesta on vastannut tutkimuspäällikkö Minna Kivipelto, lisäksi arviointituen asiantuntijaryhmään kuuluvat kehittämispäällikkö Hanna Heinonen, tutkija Meri Larivaara, kehittämispäällikkö Pia Maria Jonsson, kehittämispäällikkö Tuija Kotiranta, tutkija Anne Vierros, kehittämispäällikkö Maritta Vuorenmaa, kehittämispäällikkö Susanna Maijanen ja kehittämispäällikkö Johanna Tulonen-Tapio.3 3 Aluksi Tähän verkkojulkaisuun on koottu joitain käytännön vinkkejä arviointien suunnitteluun ja toteuttamiseen Kaste-ohjelman hankkeissa. Arvioinnin asiantuntijaryhmän tarkoituksena on helpottaa tällä verkkojulkaisulla arviointien tekemistä ja osoittaa, että arviointi on suurelta osin hyvin arkijärkistä puuhaa: arvioinnissa kerätään olennaista tietoa siitä, mitä hankkeissa tapahtuu, ja sitten arvioidaan onnistumisia ja myös epäonnistumisia toimintojen edelleen kehittämiseksi. Julkaisun teksti on on suuntaa-antavaa ja sen tueksi suositellaan lämpimästi muuta arviointiin liittyvää kirjallisuutta ja verkkoaineistoja. Verkkojulkaisu koostuu kuudesta luvusta. Luvussa 1 kuvataan lyhyesti Kaste-ohjelma ja sen tavoitteeet. Tavoitteiden tuntemus on tärkeää arvioinnin suunnittelussa. Luvussa 2 kuvataan monivaiheista innovaatioprosessia, joka on ominaista Kaste-hankkeessa toteutettaville kehittämishankkeille. Monivaiheisuus tuo omat haasteensa arvioinnille. Arviointeja tehdään kehittämistyön tueksi, mutta paineita aiheuttavat myös muut, ulkoiset arviointivelvoitteet. Luvussa 3 kuvataan lyhyesti arviointien tarvetta ja luonnetta Kaste-ohjelman osahankkeiden kohdalla. Luvussa 4 esitetään esimerkki arviointisuunnitelman tekemisen eri vaiheista. Luvussa annetaan esimerkkejä siitä, miten arvioinnin toteutusta ja tiedonkeruuta voi suunnitella. Varsinainen arvioinnin toteuttamista käsitellään luvussa 5. Luvussa esitetään joitain esimerkkejä siitä, millä tavoin arviointitietoa voidaan kerätä Kaste-ohjelman hankkeissa. Osa arviointia on hyvien käytäntöjen käyttöönotto ja vaikuttamistoiminta. Näitä käsitellään luvussa 6. Kirjallisuusluetteloon on kerätty arvioinnissa mahdollisesti sovellettavaa lisämateriaalia.4 4 Sisältö 1 Kaste-ohjelma ja arviointi 5 2 Kaste-kehittämistoiminta monivaiheisena innovaatioprosessina 7 3 Arviointi kehittämisen tukena 8 4 Arviointi alkaa suunnittelusta 9 5 Suunnitelmasta toteutukseen: tiedonkeruu ja dokumentointi Arviointi ja mittaaminen Vertaisarviointi hankekehittämisen tueksi Hankepalaverit arvioinnin välineenä Eri ryhmien ääni kuuluviin Vaiheittaisen arvioinnin malli Kustannusvaikuttavuuden arviointi 23 6 Hyvien käytäntöjen käyttöönotto ja vaikuttamistoiminta 24 Lähteet 265 5 1 Kaste-ohjelma ja arviointi Kaste eli sosiaali- ja terveydenhuollon kansallinen kehittämisohjelma vuosille on sosiaali- ja terveysministeriön lakisääteinen ja strateginen ohjausväline, jolla johdetaan valtakunnallista sosiaali- ja terveyspolitiikkaa. Sosiaali- ja terveydenhuollon valtionosuudesta annetun lain mukaan valtioneuvosto vahvistaa joka neljäs vuosi sosiaali- ja terveydenhuollon kansallisen kehittämisohjelman. Valtioneuvosto hyväksyi Kaste-ohjelman (Sosiaali- ja terveydenhuollon kansallinen kehittämisohjelma Kaste ) Kaste-ohjelma linjaa ohjelmakauden keskeiset sosiaali- ja terveydenhuollon kehittämistavoitteet sekä ne keinot, joilla tavoitteet on mahdollista saavuttaa. Kaste-ohjelma toteutetaan kuntien sosiaali- ja terveydenhuollon kehittämistyönä sekä sosiaali- ja terveysministeriön ja sen alaisten laitosten toimenpiteinä. Ohjelman päätavoitteet ovat: lisätä väestön osallisuutta ja vähentää syrjäytymistä lisätä väestön hyvinvointia ja terveyttä sekä kaventaa hyvinvointi- ja terveyseroja parantaa palveluiden laatua, vaikuttavuutta ja saatavuutta sekä vähentää alueellisia eroja Näihin tavoitteisiin pyritään ennalta ehkäisemällä, varmistamalla henkilöstön riittävyys ja osaaminen sekä luomalla eheät palvelukokonaisuudet ja vaikuttavat toimintamallit. Tavoitteiden saavuttamiseksi on määritelty 39 toimenpidekokonaisuutta ja niiden toteutumisen seuraamiseksi on valittu 19 seurantaindikaattoria. (Sosiaali- ja terveydenhuollon kansallinen kehittämisohjelma Kaste ) Kuntien kehittämistyötä tuetaan Kaste-ohjelman puitteissa sosiaali- ja terveydenhuollon valtionavustuksilla, joihin on varattu tukea yhteensä 104,2 miljoonaa euroa vuosina Valtionavustuksen myöntämisen perusteena on mm. hankkeen alueellinen tai valtakunnallinen merkittävyys, tulosten laaja-alainen hyödynnettävyys sekä aikaansaatujen uudistusten juurtumisedellytykset (Kaste-ohjelman valtakunnallinen toimeenpanosuunnitelma vuosille , 64). Ohjelmakaudella valtionavustusta saaneet hankkeet ovat pääsääntöisesti olleet laajoja alueellisia hankekokonaisuuksia, jotka koostuvat useista pienemmistä paikallisista osahankkeista. Yhteensä valtionavustusta on myönnetty 23 kehittämishankkeelle (http://www.stm.fi/vireilla/rahoitus_ja_avustukset/sosiaali_ja_terveydenhuoll on_kehittamishankkeiden_valtionavustukset). Kaste-ohjelman valtionavustushankkeiden arvioinnista ei ole annettu erillisiä ohjeita. Seuraavat hankearvioinnin perusohjeet pätevät kuitenkin myös Kaste-hankkeisiin. Arvioinnissa kannattaa tarkastella ennen kaikkea sitä, onko6 6 toiminnalle asetetut tavoitteet saavutettu, sekä toisaalta sitä, onko kehittämistyö tuottanut ennakoimattomia sivuvaikutuksia. Arvioinnissa on hyvä eritellä toiminnan vahvuuksia ja heikkouksia sekä sitä, miten näitä koskevaa tietoa on analysoitu. Yhtenä näkökulmana on myös sen tarkastelu, miten kehitetyillä uudenlaisilla rakenteellisilla malleilla tai toimintatavoilla on edistetty toiminnan vaikuttavuutta. Lisäksi arvioinnissa kannattaa nostaa erikseen esille toiminnasta löydettävät hyvät käytännöt ja niiden levittämisen edellytykset. (Mark, Henry & Julnes 2000.) Jatkorahoitusta saaneiden hankkeiden ensimmäisen rahoituskauden päättyessä on tärkeää arvioida kehittämistyön toteutumisesta sekä siten luoda pohjaa kehittämistyön toisen vaiheen etenemiselle. Ensimmäisessä vaiheessa arviointia on perusteltua tehdä ensisijaisesti organisaation tai palvelujen kehittämisen näkökulmasta ja näin luoda pohjaa vaikuttavuuden arvioinnille. Kaste-ohjelman valtakunnallisen toimeenpanosuunnitelman mukaan on tärkeää tarkastella valtionavustushankkeiden tavoitteenasettelua, organisointia, tavoitteiden saavuttamista sekä uudistusten juurtumista ja vaikutuksia (Kaste-ohjelman valtakunnallinen toimeenpanosuunnitelma vuosille , 70). Ensimmäisen vaiheen arvioinnissa kootaan ja tulkitaan informaatiota, jota on kerätty kehittämistyön aikana työhön käytetyistä voimavaroista, toiminnoista ja prosesseista, osallistujista ja resursseista sekä toimintaympäristöstä. Kerätyn tiedon hyödyntäminen vaatii vertailua, jota voidaan toteuttaa esimerkiksi benchmarking-toiminnan avulla, vertailemalla muiden samaa kehittämistyötä tekevien Kaste-hankkeiden tuloksia tai huomioimalla saman toiminnan aiempia arviointeja, esimerkiksi väliarviointeja. Kasteen ensimmäisen kehittämisvaiheen päättyessä arvioinnissa tulee tarkastella: kehittämistyölle suunnattuja resursseja kehittämistyön puitteissa tarjottuja palveluja (määrää, keinoja) kehittämistyöstä hyötyvien tai siinä osallisena olevien asiakkaiden palvelutarpeita kehittämistyön avulla palveluihin saatuja muutoksia (joko selkeitä palvelujärjestelmän muutoksia tai välillisiä hyötyjä, kuten työntekijöiden osaamisen vahvistuminen) kehittämistyön toteuttamisen kontekstia sekä tulosmuuttujia. Hankearvioinnin ohella toteutetaan Kaste-ohjelman kokonaisarviointi, jonka suorittaa tutkimus- ja konsultointiyritys Net Effect Oy. Ohjelman kokonaisarvioinnissa tavoitellaan tietoa siitä, kuinka ohjelma on toiminut sosiaali- ja terveysministeriön strategisena sosiaali- ja terveyspolitiikan johtamisen ja ohjauksen välineenä ja missä määrin hankerahoitus on tukenut strategisten tavoitteiden saavuttamista.7 7 2 Kaste-kehittämistoiminta monivaiheisena innovaatioprosessina Arviointien tekemiseen ei ole olemassa mitään yhtä toteuttamismallia. Jokainen arviointi tulee suunnitella arvioitavan hankkeen tai muun arviointikohteen tarpeiden, resurssien ja tavoitteiden mukaisesti. Erilaisten valmiiden arviointimallien käyttöön on liitettävä tarkka harkinta siitä, millä tavoin ne istuvat oman hankkeen arviointiin. Kaste-hankkeet ovat monivaiheisia innovaatioprosesseja. Niiden ominaisuutena on kehittämisen epälineaarisuus ja käytössä olevien resurssien erilaisuus. Lisäksi hankkeissa on yleensä vahvaa substanssiosaamista. Arviointi- ja kehittämisosaamisen tiedot ja taidot voivat kuitenkin vaihdella. Arviointia suunnittelevan on syytä olla tietoinen siitä, millaisia tekijöitä monivaiheisen innovaatioprosessin arvioinnissa on huomioitava. Kehittämisen epälineaarisuus. Koiviston ja Hämäläisen (2010) mukaan innovaatioiden kehittäminen ei ole vaihe vaiheelta edistyvä lineaarinen prosessi, joka etenee suoraviivaisesti idean tunnistamisesta kehittelyyn ja tuotteistamiseen ja tämän jälkeen käyttöönottoon. Innovaatioprosessi koostuu paremminkin tiloista, joissa suunnitellaan ja toteutetaan rinnakkain useita toimia ja joissa eri toimijat ovat moninaisessa vuorovaikutussuhteessa keskenään. Innovaatioprosessin toimia ovat esimerkiksi innovaatioaihioiden tunnistaminen tai keksiminen, erilaiset määrittely- ja kehittämistoimet, uuden asian kokeilu ja vaikutusten tai vaikuttavuuden arviointi, tuotteistamiseen ja levittämiseen sekä innovaation käyttöönottoon liittyvät toimet soveltajaorganisaatioiden kanssa. Epälineaarisessa innovaatioprosessissa voidaan tehdä rinnakkain monia innovaatiotoimia. (Koivisto & Hämäläinen 2010.) Useiden eri vaiheiden ja toimien päällekkäisyys on tyypillistä Kaste-ohjelmassa toteutettaville hankkeille. Resurssit. Arviointien suunnittelu ja tekeminen vaatii työaikaa. Tarjolla on monenlaisia arviointimalleja ja ratkaisuja, joiden käytännön toteutukseen vaadittava aika vaihtelee. Verkkokyselyn tekeminen ei vaadi niin paljon työaikaa kuin henkilökohtaiset haastattelut. Arvioinnin raportointiin on erilaisia vaihtoehtoja lyhyestä tiivistelmästä (esim. Power Point-esitys) laajoihin ja seikkaperäisiin raportteihin tausta-aineistoineen. Kaste-hankkeiden arvioinneissa on yleensä vain vähän resursseja arvioinnin suunnitteluun ja toteutukseen. Sen vuoksi on hyvä tehdä ainakin karkea arvio siitä, minkä verran työaikaa arviointiin on käytettävissä. Arviointiosaaminen. Moni hanketyöntekijä on törmännyt Kaste-ohjelman aikana ensimmäistä kertaa arviointiin niin, että se on tullut osaksi omaa työtä. Kaste-ohjelman osahankkeiden arviointien suunnittelu ja toteuttaminen edellyttää arviointiosaamisen perusteiden hallintaa. Tämä voi aiheuttaa hämmennystä vaatimuksia tuntuu olevan paljon, mutta käytännön ohjeita kovin vähän.8 8 THL tukee Kaste-hankkeiden arviointeja. Tämän lisäksi on kuitenkin hyvä hankkia lisätietoa myös itsenäisesti (kirjallisuus, arviointikoulutukset ja seminaarit). Suomessa yliopistojen ja ammattikorkeakoulujen koulutusohjelmiin sisältyy jo jonkin verran arviointikoulutusta. 3 Arviointi kehittämisen tukena Arviointi voi kohdistua monelle eri tasolle: toimintaan, projektiin, ohjelmaan, strategiaan tai poliittisiin päätöksiin. Arvioinnin kohteena voi olla yksittäisen organisaation toiminta kokonaisuudessaan tai osa siitä. Sosiaali- ja terveysalalla on kehitetty erilaisia arviointivälineitä ja lähestymistapoja, joilla voidaan arvioida asiakkaiden tilanteita. Työntekijät ovat kehittäneet reflektiivisiä itsearviointimenetelmiä oman työnsä seuraamiseen (esimerkiksi Kuvastin, ks. Yliruka 2006). Asiakkaiden tilanteiden arvioinneissakin on erilaisia osa-aluekohtaisia arviointivälineitä (esimerkiksi toimintakyvyn, päihteidenkäytön tai masennuksen arviointiin). Arvioinnissa voidaan yhdistää erilaisten ulottuvuuksien samanaikainen tarkastelu, kuten asiakkaan tilanteen arviointi ja työntekijän käyttämien työtapojen ja menetelmien arviointi. Arviointi voi olla jatkuvaa, asiakastyöhön liitettävä osa-alue. Arviointi voi olla kertaluonteinen prosessi, kuten organisaation laatujärjestelmän auditointi. Jotkut arvioinnit toteutetaan loppuarviointina, jolloin tulos on nähtävissä vasta arvioinnin päätyttyä. Prosessiarvioinniksi kutsutaan sellaista arviointia, josta tietoa voidaan saada eri vaiheissa (Seppänen-Järvelä 2004). Joka tapauksessa arvioinnin tulisi aina olla käytännöllisesti hyödyttävää: arviointitiedon avulla tulee voida tietää, mikä toimii ja mitä tulisi muuttaa tai kehittää. Arviointia tehdään monesta syystä. Eri toimijat (esim. STM, Suomen Kuntaliitto jne.) ovat tehneet arviointisuosituksia, joiden avulla arvioinnin tekemistä halutaan edistää. Eräisiin ohjelmiin ja hankkeisiin kuuluu arviointivelvoite (esim. ESR-ohjelmat). Projekti- ja hanketoiminnan myötä arvioinnit ovat lisääntyneet huomattavasti, sillä rahoittajat edellyttävät kehittämiseen asetettujen panosten seuraamista ja tuotosten esiintuomista. Arviointeja tehdään myös alan sisäisten tarpeiden vuoksi: halutaan tuoda esiin, millä tavoin kehittäminen on hyödyttänyt ja millaisia panostuksia tarvitaan, jotta kehittämistä voitaisiin jatkaa. Kaste-ohjelman osahankkeiden arvioinneissa on mielekästä kerätä tietoa niistä tavoitteista, joita osahankkeille on asetettu. Jos tietoa halutaan saada jo hankkeen aikana, on suositeltavaa tehdä arviointia jo hankkeen kuluessa, ei ainoastaan sen päättyessä. Hankkeissa on lähes aina mukana palvelujen käyttäjiä, asiakkaita, kansalaisia, viranomaisia ja päättäjiä. Arvioinnissa heidät kaikki on hyvä ottaa jollain tapaa mukaan niin, että eri toimijaryhmien ääni tulee kuuluviin. On muistettava, että kaikessa ei voi onnistua arvioinnin tehtävänä on analysoida myös hankaluuksia ja epäonnistumisia sekä tuoda esiin oppimiskokemuksia.9 9 Arvioinnin suunnittelu aloitetaan mahdollisimman aikaisessa vaiheessa. Parhaimmillaan hankkeen toimintojen ja hankkeen arvioinnin suunnittelu tehdään yhtä aikaa. Meneillään olevissa hankkeissa arvioinnit ovat jo käynnissä, mutta niihin on mahdollista tehdä vielä tarkennuksia, jos esimerkiksi tiedonkeruuta ei ole vielä aloitettu. Arviointi on valintojen tekemistä. Arvioinnissa ei voida juuri milloinkaan ottaa kaikkea mahdollista huomioon. On tehtävä valintoja, kuten kohteen rajaaminen, edunsaajien määrittely, pätevän tiedon määrittely, tiedonkeruumenetelmän valinta ja tiedon dokumentointitavat. Valintojen tekeminen on kannan ottamista. Koska valintoja joutuu tekemään, jää aina myös joku näkökulma ottamatta huomioon. Priorisoidut asiat on kyettävä perustelemaan erityisesti arvioinnin ensisijaisten edunsaajien näkökulmasta (esim. asiakkaat, palvelujen käyttäjät). Arviointi on arvottamista. Koottua tietoa ei voida arvottaa vain arvioinnin lopuksi. Jo valittavien näkökulmien mukaan ottaminen on arvottamista: mikä jätetään pois ja mitä otetaan mukaan. Erityisesti demokraattisessa arvioinnissa korostetaan sitä, että valinnat tehdään läpinäkyväksi ja tuodaan esiin (ks. esim. House & Howe 1999). 4 Arviointi alkaa suunnittelusta Hyvä arviointi edellyttää suunnitelmallisuutta. Arviointisuunnitelman laadinta on aloitettava mahdollisimman nopeasti hankkeen käynnistyttyä. Arviointisuunnittelu sisältää eri vaiheita, kuten neuvottelu- ja sopimuksentekovaiheen, arvioinnin toteuttamisen ja tiedon tuottamisen vaiheen sekä arviointitiedon käyttöönottovaiheen (Arviointi sosiaalipalveluissa 2001, 13 18). Tässä annetaan esimerkkejä lähinnä arvioinnin toteuttamisen ja tiedon tuottamisen suunnittelusta. Lopullinen arviointisuunnitelma on syytä hyväksyttää hankkeen ohjausryhmässä. Arviointisuunnitelman sisältö: 1. Arvioinnin tausta ja tarpeet: Kartoitetaan tarpeet tai tehdään tarveanalyysi. Tämä tarkoittaa sitä, että selvitetään, miksi ja millaisiin asioihin arviointia tarvitaan. Määritellään haluttava tieto ja edunsaajaryhmät (=keitä arviointitiedon tulee hyödyttää). Pohdittavaksi: Käsitteet käyttäjälähtöisyys, tarvelähtöisyys ja asiakaslähtöisyys ovat tuttuja sosiaali- ja terveysalan toimijoille. Hanketyöntekijöillä on yleensä käytännön kautta tietoa siitä, millaisia asioita tulisi kehittää ja miksi. Nämä muodostavat arvioinnin kannalta oleellista tietoa: miksi ja ketä varten arviointitietoa tuotetaan: ovatko arvioinnin ensisijaiset edunsaajat viranomaisia, päättäjiä, rahoittajia, kansalaisia tai palvelujen käyttäjiä?10 10 Ongelmana on usein tiedon todentaminen eli miten saamme tietoomme asiakkaiden tarpeet? Hankkeiden arviointien tukena voi käyttää erilaisia tekniikoita tarpeiden analysoimiseksi. Tarpeita voi kartoittaa systemaattisesti mm. seuraavia lähteitä käyttäen: Tilastot ja raportit Tutkimukset ja julkaisut Avainryhmien kuuleminen Kyselyt, haastattelut Osallistuva havainnointi Tarveanalyysin tekemisestä on tietoa tarkemmin Colin Robsonin (2001) teoksessa Käytännön arvioinnin perusteet. 2. Arvioinnin tavoitteet ja kohteet sekä arviointikysymykset. Määritellään arvioinnin tavoitteet ja kohteet. On selvitettävä, arvioidaanko työmenetelmiä, rakenteita, resurssien ja tuotosten välistä suhdetta, erilaisia vaikutuksia vai jotain muuta? Tarkennetaan arviointikysymykset ja näkökulma. 3. Tiedonkeruun tarpeet, menetelmät ja dokumentointi. Sovitaan, miten arviointitietoa kerätään suunnitelman mukaisesti, miten tieto dokumentoidaan (=tallennetaan). On keskusteltava myös tiedonkäsityksestä: millainen tieto on pätevää, että ensisijaisten edunsaajien näkemykset saadaan esille. Kuvaako heidän tarpeitaan parhaiten määrällisesti mitattava tieto, kokemustieto vai tunnetieto? Vai tarvitaanko useammanlaista tietoa? Pohdittavaksi: Arviointisuuntaus kertoo, millaista tietoa pidetään luotettavana. Kun arvioinnin aloittamiseen liittyvät kysymykset on ratkaistu, on hyvä perehtyä eri arvioinnin suuntauksiin. Tämä auttaa vielä tarkentamaan sitä, millaisen arvioinnin kanssa ollaan tekemisissä. On hyvä pohtia, millaiseen suuntaukseen oma arviointi liittyy? (Taulukko 1.) Arviointimenetelmän etsiminen on aloitettava siitä, että tunnistetaan arvioinnissa tarvittava tieto ja tiedon tarpeet: mitä varten arviointia tehdään. Kuten taulukosta 1 nähdään, perustuu arvioinnin tarve ja siinä arvostettava tieto eri suuntauksissa erilaisille näkemyksille. Jokaisessa suuntauksessa on omat etunsa ja haasteensa. Arviointisuuntauksen valinta on osa arviointiin liittyvää arvottamista: mitä pidetään tärkeänä. Vasta tämän jälkeen on hyvä sopia siitä, miten tieto kerätään. Millaiset menetelmät soveltuvat tarkoitukseen parhaiten - kyselyt, haastattelut, eläytymismenetelmät? Tarvitaanko mahdollisesti useampaa menetelmää? Jos esimerkiksi päätetään koota tieto kokouksissa, pidetäänkö muistioita vai nauhoitetaanko jotkut keskustelut.11 11 Tietoa tulee voida käsitellä ja ryhmitellä analyysia varten, joten dokumentoinnin kohdalla on sekin pidettävä mielessä. Tarjolla on erilaisia tietoteknisiä tallennus- ja analyysiohjelmia (esim. Webropol, SPSS), mutta paljon käytetään perinteisiä kirjallisia Word-dokumentteja (muistiot, tiivistelmät jne.). 4. Aikataulu, resurssit ja toimijat. Yksi arvioinnin eri vaiheisiin suuresti vaikuttava tekijä ovat käytössä olevat työresurssit ja aika. Arvioinnin suunnittelussa kannattaa laskea, miten paljon kukin työvaihe vie aikaa ja pohtia, kenellä on mahdollisuus toteuttaa ne. Joissain hankkeissa on varauduttu arviointiin erillisellä panoksella, mutta varsin usein se on sisällytetty osaksi hanketoimijoiden työtä. Tietyt työvaiheet ovat kuitenkin sellaisia, että niissä olisi esim. puolueettomuuden kannalta syytä olla hankkeen ulkopuolinen arviointihenkilö. Tämänkin vuoksi arviointisuunnittelu tulisi olla mukana jo siinä vaiheessa, kun hankkeelle haetaan rahoitusta. Jos näin ei ole tehty, on vain suhteutettava arvioinnin laajuus niihin mahdollisuuksiin, joiden puitteissa sitä on mahdollista tehdä. Suomessa sosiaali- ja terveysalalla tehdään hyvin monentyyppisiä arviointeja. Pienehköissä kehittämishankkeissa saatetaan päätyä pragmaattiseen arviointiin siten, että löydetään käyttötarkoitukseen hyvin soveltuva arviointimenetelmä. Aika ja resurssit vaikuttavat nopeassa aikataulussa ei ole aikaa ryhtyä perehtymään uusiin suuntauksiin. 5. Arviointitiedon käsittely, tulosten koostaminen, hyvien käytäntöjen käyttöönotto ja raportointi. Lopuksi arviointitiedon perustella tuodaan esille tulokset, hankkeen vaikuttavuus ja tehdään johtopäätökset, kuten mitä tulisi muuttaa tai kehittää saadun tiedon perusteella. Arviointiraporttiin on hyvä sisällyttää myös suunnitelma tiedon levittämisestä ja hyvien käytäntöjen käyttöönotosta hankkeen jälkeen. Jos näitä ei tuoda arvioinnissa esille, on vaikea perustella, miksi jotkut tai koko hankkeen aikana kehitetty toiminta tulisi jatkua hankkeen jälkeenkin.12 12 TAULUKKO 1. Esimerkkejä arviointisuuntauksista ja niihin sisältyvästä tiedonkäsityksestä ja menetelmistä (ks. myös Kuusela 2001, 56 63; Kazi 2000). Arviointi-suuntaus Tiedonkäsitys Asetelmia Menetelmiä Huomioitavaa Edunsaajat Empiristinen Empiirisesti mitattavat tulokset (yksi totuus on löydettävissä) Randomisoitu koeasetelma Kvantitatiiviset menetelmät Kokeelliset asetelmat (Campbell & Stanley 1966) Suuret otokset, koska tulosten tulee olla yleistettävissä Koe- ja kontrolliryhmät Palvelee tehokkaasti päätöksentekoa Kvantifiointi antaa pätevän vaikutelman Realistinen Tulkinnallinen ja osallistava Kriittinen realismi ( totuuksia on eri tasoilla tai todellisuus on kerroksinen ) Relativismi Kokemuksellinen tieto (ei ole olemassa yhtä totuutta ) Prosessit, kontekstit ja interventioiden väliset syy-yhteydet realismin viitekehyksessä Kerronnalliset ja narratiiviset sekä kokemukselliset asetelmat Realistinen arviointi (Pawson & Tilley 1997) Realistinen haastattelu Muistelu-, haastattelu- ja fokusryhmätekniikat (esim. BIKVA) Valtaistava arviointi (esim. Fetterman 2005) Selvitetään, millainen interventio vaikuttaa, kenen kohdalla ja missä olosuhteissa Tuloksista etsitään konsensus, yhteiset asiat Tuotettu tieto on tilannesidonnaista, ei yleistettävissä muihin yhteyksiin Eri tasoilla toimivat saavat tietoa oman toimintansa vaikutuksista Asioiden välinen yhteys ei kuitenkaan kiistaton Prosesseissa mukana olevat oppivat ja saavat uusia näkökulmia Vaarana, että arvottaminen jää heikoksi Kriittinen Kriittinen realismi; heikko tai maltillinen realismi (yksi tai monia totuuksia on löydettävissä) Valtaistava arviointi (kriittinen teoria) Kriittinen toimintatutkimus Esim. forumteatteri (Ventola & Renlund 2008) Valtaistava arviointi (Adams 2003) Kriittinen teoria ohjaa indikaattoreiden laadintaa Tulokset pätevät tutkimusjoukon kohdalla (esim. tietty ihmisryhmä) Heikompiosaiset ja marginaaliryhmät saavat äänensä kuuluville Teorian soveltaminen hankalaa julkishallinnossa Pragmaattinen Ei määritelty tai useita Käytännön tarpeisiin liittyvä asetelma Benchmarking Erilaiset kyselyt ja haastattelut, joiden laadinta tehty kokemusten pohjalta Robsonin (2001) käytännön arviointi Tulokset eivät suoraan osoita, että ne johtuvat hankkeen toiminnoista Tulokset ovat suuntaa-antavia Voidaan laatia hyvin palvelemaan eri edunsaajaryhmiä Heikoimmillaan toteaa vain sen, joka jo tiedetään13 13 5 Suunnitelmasta toteutukseen: tiedonkeruu ja dokumentointi Arviointisuunnitelman valmistuttua arviointi voi alkaa. Tiedonkeruu toteutetaan suunnitelman mukaisesti käyttämällä joko valmiiksi kehitettyä arviointimenetelmää tai hyödynnetään jotain arviointiin soveltuvaa tutkimusmenetelmää. On vielä korostettava menetelmien erilaisia tarkoituksia ja vaikutuksia. Menetelmiä on kehitetty esimerkiksi työn arviointiin ja asiakkaan tilanteen arviointiin, organisaation toiminnan arviointiin, laatujärjestelmän arviointiin. Menetelmän käytön vaikutuksia voi pohtia taulukon 1 avulla. Yksittäinen menetelmä ei ole oikotie arvioinnin toteuttamiseen, vaan menetelmän on sovelluttava arvioinnissa olevaan tiedon tarpeeseen ja siihen, että ensisijaiset edunsaajat saavat sitä tietoa, jota tarvitaan. Tuotettiin tieto sitten teatterin, tarinan tai kyselyjen avulla, tulee arviointimenetelmään kuulua seuraavat osatekijät: Systemaattinen tiedonkeruu hankkeen prosessien, tavoitteiden, vaikutusten ja hyvien käytäntöjen esiin saamiseksi Tiedon dokumentointi Tiedon käsittely ja analysointi Johtopäätösten ja kehittämisehdotusten esittäminen Arviointi on tiivistetysti oikeastaan sitä, että tehdyt asiat dokumentoidaan ja tuodaan näkyväksi. 5.1 Arviointi ja mittaaminen Pattonin (1997) mukaan minkäänlaista ihanteellista vastausta siihen ei ole olemassa, mikä on paras tapa toteuttaa arviointi. Esimerkiksi käsitteellisten tavoitteiden muokkaamisessa mitattavaan muotoon, siis mittarien valinnassa on kuitenkin hyvä huomioida seuraavia asioita. Mittari on mittaus- tai arviointiväline, kuten laite, kysymyksiä sisältävä lomake, testi, haastattelu tai vaikkapa työkokous, jolle on laadittu asiasabluuna. Pattonin (1997, ) mukaan arviointivälineen valinnassa tärkeintä on asianmukaisuus ja luotettavuus suhteessa arvioinnin avainkysymyksiin. Onkin syytä mitettiä, millainen mittari on asianmukainen hankkeen kaikkien osapuolten kannalta. Asianmukaisuuteen voi liittää sellaisia tarkennuksia kuten kohderyhmän mahdolliset rajoitteet, motivaatio tai ilmaisukyky erilaisten mittausvälineiden kohdalla. Mittari ei ole asianmukainen, jos esimerkiksi kyselylomakkeen kysymykset on huonosti muotoiltuja, liian abstrakteja tai monitulkinnallisia. Asianmukaisuutta voi testata kokeilemalla mittarin käyttöä ennen varsinaista arviointia. Jos sopiva mittari löytyy, tulee seuraavaksi ryhtyä pohtimaan mitattavia asioita ja niiden saamista mitattavaan muotoon.14 14 Esimerkiksi työterveyshankkeen yksi tavoite voisi olla moniammatillisen ja ylisektoraalisen työn lisääminen. Vaikuttavuustavoitteissa mainitaan mm. asiakkaiden terveystottumusten paraneminen. Tavoitteiden saaminen mitattavaan muotoon edellyttää niiden konkretisoimista: Onko moniammatillisen ja ylisektoraalisen työn lisääminen tavoite vai väline jonkin tavoitteen saavuttamiseksi? Millaisten tavoitteiden? Jos ne ovat välineitä, mitä näillä välineillä halutaan saada aikaiseksi? Halutaanko niillä parantaa asiakkaiden terveystottumuksia? Jos päädytään siihen, että moniammatillisen ja ylisektoraalisen työn lisääminen ovat välineitä asiakkaiden terveystottumusten parantamiseksi, on nämä käsitteet seuraavaksi operationalisoitava. Operationalisointi tarkoittaa käsitteellisten konstruktioiden saattamista mitattavaan muotoon. Operationaalinen määritelmä antaa säännön, jonka mukaan käsite on empiirisesti mitattavissa. Esimerkiksi, miten operationalisoidaan paremmat terveystottumukset? Tarkoittaako se vihannesten käyttöä aterioilla? Makeiden välipalojen välttämistä? Säännöllistä ruokailua? Nämä ovat esimerkkejä operationaalisista määritelmistä, joiden perusteella voidaan luoda kysymykset esimerkiksi kyselylomakkeeseen. Muuttujat ovat erityisesti tilastollisissa tutkimuksissa tärkeitä, mutta myös pienehköissä kyselytutkimuksissa on hyvä miettiä, millaista muuttujatietoa tarvitaan asioiden jatkokäsittelyn kannalta. Tyypillisiä muuttujia ovat sukupuoli, ikä, ammattiasema, asuinpaikka tai vaikkapa projektin aloitusajankohta. Muuttujien avulla jäsennellään tuloksia, kuten miten paljon ruokailutottumukset muuttuivat alle 30 vuotiailla, vuotiailla ja yli 50-vuotiailla. Kyselyyn ei siten automaattisesti laiteta esimerkiksi kohtaa siviilisääty, jollei tämän muuttujan ajatella olevan jotenkin merkityksellinen. Indikaattori on puolestaan tunnusluku, jonka avulla mitattavan asian muuttumista voidaan seurata. Kaste-ohjelmassa on 19 pääindikaattoria, joiden avulla koko ohjelman toteutumisen vaikutuksia seurataan. Terveellisten ruokailutottumusten lisääntyminen voi parhaimmillaan olla yksi tekijä, millä saavutetaan yksi valtakunnallisista tavoitteista kuten ylipainoisten osuus työikäisistä palautuu vuosien tasolle. Hankkeessa on kuitenkin oltava konkreettisempia indikaattoreita, jos halutaan seurata juuri terveellisten ruokailutottumusten vaikutuksia (esim. hankkeessa mukana olevien painoindeksi tms.). Edessä on vielä moniammatillisen ja ylisektoraalisen työn lisääminen operationalisointi ja merkitys mittaamisessa. Moniammatillisen ja ylisektoraalisen työn lisääntyminen on varmaan helpohkosti operationalisoitavissa kysymällä, onko työ lisääntynyt ja miten paljon. Moniammatillisista tilanteista voidaan jopa pitää kirjaa ja mitata määriä. Mutta mitä näillä tiedoilla tehdään? Täytyyhän määrällisen lisääntymisen ohella pysytä tuomaan esiin se, mitä hyötyä tai jopa haittaa lisääntymisestä on ollut. Lisäksi on kiinnostavaa, onko lisääntyminen johtanut asiakkaiden terveystottumusten paranemiseen. Tämä varovainen johtopäätös15 15 voidaan tehdä, jos moniammatillisen ja ylisektoraalisen työn lisääntyessä myös asiakkaiden terveystottumusten havaitaan parantuneen. Jos hankkeen tavoitteet ja tavoiteltava vaikutus saadaan hyvin operationalisoitua, alkaa mittarin validiteetti olla hyvä. Validiteetti tarkoittaa sitä, mittaako mittari sitä, mitä sen pitääkin mitata. Sisäistä validiteettia pyritään kasvattamaan esimerkiksi huolehtimalla siitä, että kyselyssä on kysymyksiä arvioitavasta asiasta mahdollisimman tarkkaan ja kattavasti. Terveystottumusten paranemista ei voi osoittaa vain muutamalla muuttuneella asialla (enemmän vihanneksia, vähemmän makeita välipaloja). Apuna on usein aikaisempi ammatillinen tieto, mutta myös tilastot, tutkimukset ja linjaukset, joiden mukaisesti terveelliset ruokailutottumukset voidaan määritellä. Validiteetin arviointia hankaloittavat erilaiset väliintulevat tekijät. Jo tutkimukseen osallistuminen voi aiheuttaa terveystottumusten paranemista, joten suoran syy-yhteyden osoittaminen hankkeen toimintojen ja vaikutusten välillä voi olla vaikeaa. Pisimmälle sisäistä validiteettia viedään koeasetelmatutkimuksissa, joissa kaikki mahdollinen mitattavaan asiaan liittyvä pyritään eliminoimaan pois niin, etteivät ne vääristä koetuloksia. Validiteettia arvioitaessa tiedonkäsitys on tärkeä pitää mielessä. Empiristisessä tutkimuksessa tutkimukseen osallistuvilta pyritään saamaan todenmukainen vastaus siitä, ovatko ruokailutottumukset muuttuneet. Tulkinnalliseen ja subjektiiviseen tietoon nojautuva tutkimus ei kärsi alhaisesta validiteetista, jos tutkimukseen osallistuvat puhuvat totuudenvastaisesti, sillä tutkimuksessa ei pyritäkään etsimään absoluuttista totuutta vaan ihmisten tulkintoja ja näkemyksiä asioista (jotka voivat siis olla eri asia, kuin objektiivisesti mitattava todellisuus). Reliabiliteetti tarkoittaa luotettavuutta sen kannalta, miten pysyviä mittaustulokset ovat. Pattonin (1997, 256) mukaan arviointi on reliaabelia, jos samat tulokset saadaan toistamalla arviointi samaan arviointikohteeseen, samojen olosuhteiden vallitessa. Objektiivisesti mitattavien asioiden kohdalla tämä on helpommin toteutettavissa. Esimerkiksi asiakkaan pituuden mittaamisen tulisi tuottaa sama tulos mittaajasta riippumatta. Sosiaali- ja terveysalan toiminnot ovat harvoin tällä tavoin empiirisesti mitattavissa. Yksi keino reliabiliteetin lisäämiseksi on tehdä arvioinnin eri vaiheet näkyväksi ja avoimeksi. Näin toistettavuus on ainakin periaatteen tasolla turvattu. On muistettava, että virheetöntä mittausmenetelmää ei toistaiseksi ole keksitty. Seuraavaksi esitetään kuusi näkökulmaa arvioinnin toteuttamiseen Kaste-ohjelman osahankkeissa (luvut ). Esimerkit ovat suuntaa-antavia ja myös muuntyyppisiä arviointitapoja on suositeltava käyttää. Lisätietoa on hyvä hankkia käytettävissä olevan ajan ja resurssien puitteissa valmiista oppaista, kirjallisuudesta ja verkkoaineistosta. 5.2 Vertaisarviointi hankekehittämisen tueksi Esimerkki. Hankkeen toimijat haluavat kehittämistyön alkuvaiheissa käynnistää systemaattisen arviointityön. Arvioinnin toteuttamiseen ei ole varattu erillistä16 16 rahoitusta, siksi ulkopuolisen arvioinnin ostaminen ei ole mahdollista. Pelkän itsearvioinnin avulla toteutettava arviointi mietityttää, koska arviointia halutaan kohdentaa erityisesti hallinnon ja johtamisen kysymyksiin, joihin liittyy paljon ennakko-oletuksia ja erilaisia arvotuksia. Ehdotus. Käynnistetään vertaisarvioinnin prosessi kehittämistyön arvioimiseksi ja suuntaamiseksi. Vertaisarviointia voidaan tarvittaessa täydentää sopivin osin itsearvioinnin avulla. Vertaisarviointi edellyttää käynnistyäkseen sopivan kumppanin etsimistä ja valitsemista. Vertaisarvioinnin kumppani voi löytyä esimerkiksi saman rahoittajan muista kohteista tai saman substanssialan muista kehittämishankkeista. Vertaisarviointi haastaa arvioinnin kohteen positiivisella tavalla oman työn tarkasteluun sekä tuottaa samalla rakentavia kommentteja työn sisältöä tuntevalta asiantuntijalta nostaen siten kokemuksellisuutta ja käytännön tekijöillä olevan tiedon nostamista kehittämistyön keskiöön. Kumppanin valinnan jälkeen tutustutaan dokumenttien avulla arviointikohteeseen. Tutustuminen voidaan järjestää esimerkiksi aloitustapaamisena, jossa osapuolet haastattelevat toisiaan ja kokoavat haastattelun avulla hankkeen perustiedot sekä kehittämistyön tavoitteet ja kehittämistyön toteuttamisen toimintaympäristöön liittyvät avaintekijät. Perehtymisvaiheen jälkeen kumppanit sopivat yhdessä arvioinnin menettelytavoista, kuten siitä, mitä arvioidaan, millä kriteereillä, mikä on arvioinnin toteuttamisen aikataulu ja arviointiin käytettävä aika. Vertaisarvioinnin toteuttamisessa voidaan käyttää monia erilaisia menetelmiä, kuten arvioivaa ja reflektoivaa keskustelua, peilaamista, kyselyjä, haastatteluja, havainnointia tai vertailua (Seppänen-Järvelä 2005, 13). Vertaisarvioinnin yhdistäminen itsearviointikeskusteluihin on erityisesti asiakastyön arviointiin sopiva menetelmä (Yliruka 2006, 54). Arvioinnin toteutusvaiheessa kumppanit tapaavat toisiaan säännöllisesti. Hyvänä tapaamistiheytenä on joka kolmas kuukausi järjestettävä arviointitapaaminen, jossa yhdellä tapaamisella keskitytään arvioimaan toista kumppania. Siten arvioinnin etenemistä kehittämistyössä seurataan systemaattisesti vähintään puolivuosittain. Arviointitapaamisista on tärkeää aina antaa palautetta. Palaute voidaan antaa joko arviointitapaamisen lopuksi tai se voidaan toimittaa kirjallisena yhteenvetona erikseen kumppanille. Jos kehittämistyötä ohjaavat tahot (esimerkiksi ohjausryhmä) seuraa arvioinnin toteuttamista, on suositeltavaa antaa palaute kirjallisena. Arvioinnin toteuttaminen päättyy raportointi vaiheeseen. Tässä arvioinnin yhteenvetovaiheessa voidaan vertaisarviointi koota yhteen esittämällä kehittämistyön vahvuudet, parantamisalueet, kehittämisideat sekä muut huomiot. Edut: Sitouttaa toimijat laajasti mukaan sekä kehittämis- että arviointityöhön Mahdollistaa myös johtamisen ja hallinnon arvioimisen laajasti17 17 Toimii oppimisprosessina, joka lisää osallisten asiantuntijuutta ja tietoisuutta. Tekee näkyväksi ja tunnetuksi tehtyä kehittämistyötä ja saavutettuja tavoitteita Haasteet: Kumppanin valinta tulee suorittaa huolella Arviointi toteutuu helposti pelkästään kehittämistyöntekijöiden tiedon varaan rakentuvana, muiden näkökulmien mukaan tulemisesta on huolehdittava 5.3 Hankepalaverit arvioinnin välineenä Esimerkki. Hanke on ollut käynnissä jo jonkin aikaa, mutta arviointia on ehditty pohtimaan vain kovin vähän. Resurssit ovat suuntautuneet hankkeen toimintojen käynnistämiseen ja toteuttamiseen. Hankkeessa on paljon erilaisia kokouksia ja palavereja. Palavereissa käsitellään hankkeen edistymisen kannalta oleellisia asioita, kuten työmenetelmiä, onnistumisia, tarvittavien tukitoimien saamista. Pulmana on nyt, mistä aloittaa arviointi. Ehdotus. Työntekijöiltä kerättävä tieto voidaan kytkeä hankkeessa toteutettaviin säännöllisiin hanketapaamisiin. Tällöin arviointitiedon keräämistä varten ei tarvita lisää kokouksia. Voidaan sopia, millaisia arvioiin kannalta oleellisia kysymyksiä käsitellään osana kutakin hanketapaamista. Tiedonkeruuta varten on hyvä luoda asiasabluuna, joka auttaa käymään keskusteluja arvioinnin kannalta keskeisistä teemoista. Arviointikeskustelulle voidaan sopia aika esimerkiksi hanketapaamisen alkuun, jonka jälkeen voidaan siirtyä käsittelemään muita aiheita. Edut: Arviointitietoa saadaan hankkeen aikana Arviointi voidaan kytkeä osaksi hanketapaamisia, ei tarvita lisää kokouksia sitä varten Kokouksiin saadaan systematiikkaa, kun asiasabluunalla huolehditaan arviointitiedon keräämisestä Haasteet: Asiakkaiden ja palvelujen käyttäjien mielipiteet eivät tule suoraan esille 5.4 Eri ryhmien ääni kuuluviin Esimerkki. Hankkeessa on toimijoita ja osallistujia, joilla on hyvin erilaiset taustat. Hankkeessa on mm. eläkeläisiä, työikäisiä ja opiskelijoita. Osallistujissa on myös maahanmuuttajia ja erilaisista kulttuureista tulevia ihmisiä. Kyselyt ja18 18 haastattelut tuntuvat hanketyöntekijöistä vaikeilta, sillä osallistujilla on niin erilaiset taustat ja mahdollisuudet tuottaa tietoa. On jopa mietitty, kootaanko osallistujilta ollenkaan arviointitietoa, vai kootaanko onnistumiset ja epäonnistumiset hanketyöntekijöiden kokemusten avulla. Ehdotus. Hankkeen arvioinnissa voidaan hyödyntää yksilökeskusteluja, ryhmähaastatteluja ja osallistuvaa havainnointia. Osallistuva havainnointi on terveellistä erityisesti tutkijoiden ja ulkopuolisten arvioitsijoiden osallistuessa hankkeen arviointiin. Vaikka monella arvioitsijalla on usein alan koulutusta ja työkokemustakin, saattaa kyseisen aihealueen kysymykset ja ilmiöt olla tuttuja lähinnä tutkimuksellisesti. Etnografinen tutkimus korostaa ymmärryksen lisäämistä tutkittavasta ilmiöstä siinä sosiaalisessa ympäristössä, jossa toiminta tapahtuu (esim. Vuorinen 2005). Pienimuotoisestikin toteutettuna esimerkiksi hankkeen koulutustilaisuuksiin osallistuminen auttaa näkemään toiminnasta puolia, joita ei tavoita muilla menetelmillä. Hankkeen osallistujilta tiedonkeruu voidaan tehdä lisäksi ryhmähaastatteluin, jotka on mahdollista toteuttaa eri toimijaryhmiin jakaen. Osallistujista valitaan esimerkiksi arpomalla tietty määrä eri-ikäisiä henkilöitä. Näihin henkilöihin ollaan yhteydessä ja esitetään heille mahdollisuutta osallistua oman ikäluokkansa fokusryhmään. Fokusryhmät voidaan muodostaa muunlaisin perustein, kuten työtehtävän tai asuinalueen mukaan. Pääasia, että ryhmistä muodostuu pienehköjä, 7-9 hengen ryhmiä, joissa on luonteva keskustella. Fokusryhmissä on erillinen fasilitaattori, joka vetää ryhmätilaisuuden ja mahdollisesti toinen henkilö, joka kirjaa ylös keskusteluissa tulleet asiat. Fokusryhmien pohjalta voidaan muodostaa hankkeen työntekijöille yksilökeskustelujen teemat. Jos esimerkiksi alle 25-vuotiaiden ryhmässä on tullut esille, että heitä ei huomioida tarpeeksi hankkeen toiminnoissa, tehdään tätä asiaa tiedusteleva kysymys tai kysymyksiä työntekijöille. Edut: Erilaiset tiedonkeruumuodot täydentävät hankkeesta saatavaa kuvaa Arviointitiedon keruu suosii hankkeen osallistujien äänen esiinsaamista Arviointi on samalla oppimisprosessi Haasteet: Eri toimijaryhmien tavoittaminen ja mukaansaaminen Aineisto kertyy helposti laajaksi 5.5 Vaiheittaisen arvioinnin malli Esimerkki. Hankkeessa haluttaisiin tehdä prosessiarviointia, koska hanketyöntekijät haluaisivat pysähtyä käsittelemään tietoa aika ajoin kehittääkseen hankkeen toimintoja. Hankkeessa järjestetään koulutusta sosiaali- ja terveys-19 19 alan työntekijöille ja kehitetään asiakaspalvelun käytäntöjä uudistamalla työmenetelmiä. Tietoa haluttaisiin saada lisäksi muutoksesta, eli millaiset asiat ovat kehittyneet hankkeen kuluessa ja mihin suuntaan. Myös vaikuttavuustietoa haluttaisiin saada, ainakin hankkeen lopuksi. Ehdotus. Arviointi on syytä toteuttaa vaiheittain niin, että erilaiset tiedonkeruumuodot vuorottelevat. Taulukoissa on esimerkki prosessimaisesta arvioinnin etenemisestä hankkeessa, jossa arviointia on päätetty tehdä triangulatiivisesti vuorottelemalla kyselyjä, fokusryhmähaastatteluja ja arviointiryhmän kokoontumisia. Prosessiarviointiin kuuluu kolme arviointikierrosta (Kivipelto 2005): Arviointikierros 1 Arvioinnin vaihe Tehtävät Tuotos Arviointisuunnitelman tarkennus Kyselyn valmistelu ja toteutus Kyselytiedon kokoaminen Arviointiryhmän kokous Fokusryhmähaastattelut Fokusryhmähaastattelujen yhteenveto Arviointiryhmän kokous Tarkennetaan tausta ja tarpeet tavoitteet, kohteet, arviointikysymykset menetelmät, tiedonkeruu ja dokumentointi aikataulu, resurssit ja toimijat arviointitiedon käsittelytavat tulokset ja raportointi hyvien käytäntöjen käyttöönotto Valmistellaan arviointikysymysten pohjalta operationalisoiden kysely saatteineen Kyselyn jakaminen tai lähettäminen Kyselyllä kerätyn tiedon koostaminen ja analysointi Kyselytiedon käsittely ja toimenpide-ehdotukset hankkeelle Teemat fokusryhmähaastatteluihin Haastattelujen valmistelu kyselytiedon pohjalta Fokusryhmien kokoaminen ja haastattelujen toteutus Kootaan haastatteluissa tulleet asiat (esim. arviointikysymysten mukaisesti) Tehdään yhteenvedon pohjalta kehittämisehdotukset Haastattelutiedon käsittely ja toimenpide-ehdotukset hankkeelle Arviointisuunnitelma Kysely Kyselytiedon raportit (esim. SPSS-tulosteet) Muistio Nauhoitetut haastattelut Muistiot haastatteluista Yhteenveto fokusryhmähaastattelujen muistioista ja kehittämisehdotukset Muistio20 20 Arviointikierros 2 Arvioinnin vaihe Tehtävät Tuotos Kyselyn toteutus Kyselyn jakaminen tai lähettäminen Kysely Kyselytiedon kokoaminen Kyselyllä kerätyn tiedon koostaminen Kyselytiedon raportit ja analysointi Arviointiryhmän kokous Kyselytiedon käsittely ja toimenpide-ehdotukset Muistio hankkeelle Teemat fokusryhmähaastatteluihin Fokusryhmähaastattelut Haastattelujen valmistelu kyselytiedon pohjalta Fokusryhmien kokoaminen ja haastattelujen toteutus Nauhoitetut haastattelut Muistiot haastatteluista Fokusryhmähaastattelujen yhteenveto Arviointiryhmän kokous Kootaan haastatteluissa tulleet asiat (esim. arviointikysymysten mukaisesti) Tehdään yhteenvedon pohjalta kehittämisehdotukset Haastattelutiedon käsittely ja toimenpide-ehdotukset hankkeelle Yhteenveto fokusryhmähaastattelujen muistioista ja kehittämisehdotukset Muistio Näytä lisää
Miten ideoidaan ja kehitetään uusia toimintatapoja? Juha Koivisto, THL 1 Hankekohelluksesta ketterään ja kokeilevaan toimintatapojen kehittämiseen Hankesuunnittelu, -arviointi ja -raportointi on usein Lisätiedot ARVIOINTISUUNNITELMA
1 VERKOTTAJA 2013 2016 -projekti - Päihde- ja mielenterveystyön kokemusta, vertaisuutta ja ammattiapua ARVIOINTISUUNNITELMA 2 SISÄLLYS 1 Johdanto 3 2 Hankkeen kuvaus ja päämäärä 3 3 Hankkeen tavoitteet Lisätiedot 1 Arvioinnin tausta ja tarpeet... 2. 2. Arvioinnin tavoitteet, tiedonkeruu ja resurssit... 3. 3 Arviointitiedon käsittely ja tulosten koostaminen...
Arviointisuunnitelma Sisältö 1 Arvioinnin tausta ja tarpeet... 2 2. Arvioinnin tavoitteet, tiedonkeruu ja resurssit... 3 3 Arviointitiedon käsittely ja tulosten koostaminen... 5 6 Hyvien käytäntöjen käyttöönotto Lisätiedot Hanketoiminnan ohjaus ja vaikuttavuus
AMMATILLISEN PERUS- JA LISÄKOULUTUKSEN VALTIONAVUSTUSHANKKEIDEN 2014 ALOITUSTILAISUUS 11.9.2014 Hanketoiminnan ohjaus ja vaikuttavuus Opetusneuvos Vaikuttavuus Ei ole vain yhtä määritelmää siitä, mitä Lisätiedot voimavaroja. Kehittämishankkeen koordinaattori tarvitsee aikaa hankkeen suunnitteluun ja kehittämistyön toteuttamiseen. Kehittämistyöhön osallistuvill
Niemi, Petri. 2006. Kehittämishankkeen toteuttaminen peruskoulussa toimintatutkimuksellisen kehittämishankkeen kuvaus ja arviointi. Turun yliopiston kasvatustieteellisen tiedekunnan lisensiaatintutkimus. Lisätiedot Hyvät t käytännöt t julkisiksi miksi ja miten?
VERKOTTAJA 2013 2016 -projekti - Päihde- ja mielenterveystyön kokemusta, vertaisuutta ja ammattiapua ARVIOINTISUUNNITELMA 1 SISÄLLYS 1 Johdanto 3 2 Hankkeen kuvaus ja päämäärä 3 3 Hankkeen tavoitteet 3 Lisätiedot Vaikutusten mittaaminen. Hannes Enlund Fimea Lääkehoitojen arviointi
Vaikutusten mittaaminen Hannes Enlund Fimea Lääkehoitojen arviointi Vaikutusten mittaamisen ydin Vaikeinta on oikean kysymyksen esittäminen ei niinkään oikean vastauksen löytäminen! Far better an appropriate Lisätiedot AVAIN- Mittari sosiaalityön vaikuttavuuden arviointiin Minna Kivipelto & Sanna Blomgren & Pekka Karjalainen & Paula Saikkonen
AVAIN- Mittari sosiaalityön vaikuttavuuden arviointiin Minna Kivipelto & Sanna Blomgren & Pekka Karjalainen & Paula Saikkonen 17.11.2016 15.11.2016 1 Tausta 1990-luku: arvioinnin esiintulo 2000 - vaikuttavuus, Lisätiedot ARVIOINTISUUNNITELMA
ARVIOINTISUUNNITELMA MINNE TÄTÄ HYVINVOIN- TIPALVELUJEN KÄRRYÄ OIKEIN VIEDÄÄN? TULTIIN PORUKALLA SIIHEN TULOKSEEN, ETTÄ PARAS TARTTUA ITSE OHJAUSPYÖ- RÄÄN. Sisältö 1. KAMPA-hanke ja sen tavoitteet... 2 Lisätiedot Perusopetuksen ja lukiokoulutuksen laadunhallinta- ja itsearviointikäytänteiden
Perusopetuksen ja lukiokoulutuksen laadunhallinta- ja itsearviointikäytänteiden arviointi Elina Harjunen Pro Lukio ry 9.5. Arviointi pohjautuu OKM:n toimeksiantoon Karvi kartoittaa perusopetuksen ja lukiokoulutuksen Lisätiedot Terveyden edistämisen neuvottelukunta Ylilääkäri Maarit Varjonen-Toivonen
Terveyden edistämisen neuvottelukunta 2009-2013 Ylilääkäri Maarit Varjonen-Toivonen Alueellinen TED-työryhmä (2010) Kuntakierros 2009 Kuntien toiveet Terveyden edistämisen neuvottelukunta 2009 Alueellinen Lisätiedot Tukea digitaalisen nuorisotyön kehittämissuunnitelman laatimiseen
AMMATILLISEN KOULUTUKSEN JÄRJESTÄJIEN ALUEELLINEN KEHITTÄMISSUUNNITELMA 2013-2016 Koulutus ja tutkimus kehittämissuunnitelma 2012 2016 linjaa valtakunnalliset painopistealueet, jotka koulutuspoliittisesti Lisätiedot ++(1) +(2) -(4) (0) ++(1) +(1) -(5) --(0) ++(2) +(2) -(3) --(0) ++(1) +(2) -(2) --(0)
Arviointialue 6: Vaikuttavuus Indikaattorit Esimerkkejä arviointikriteereistä Arviointi: ++ erittäin hyvä + hyvä - kehitettävää -- vaatii pikaisesti toimenpiteitä Tietolähteitä Tuloksellisuuden ja vaikuttavuuden Lisätiedot 1. Ohjausta koskeva julkinen päätöksenteko
Kysymykset 1. 1. Ohjausta koskeva julkinen päätöksenteko OHJAUKSEN TOIMINTAPOLITIIKKA ALUEELLISELLA TASOLLA Alueellisesti tulisi määritellä tahot, joita tarvitaan alueellisten ohjauksen palvelujärjestelyjen Lisätiedot HYVÄT KÄYTÄNNÖT näytön lähteenä
2011 HYVÄT KÄYTÄNNÖT näytön lähteenä Laatua laivalla seminaari 30.8.2011 Lähtökohtia ja periaatteita käsitteet: hyvät vai parhaat käytännöt tavoitteena toisilta oppiminen hyvien käytäntöjen arvostaminen Lisätiedot Hanketoiminnan ja hankkeiden vaikuttavuuden edistäminen
Ammatillisen peruskoulutuksen syksyn 2013 valtionavustushankkeiden aloitustilaisuus 26.02.2014 Hanketoiminnan ja hankkeiden vaikuttavuuden edistäminen Opetusneuvos Leena.koski@oph.fi www.oph.fi Vaikuttavuus Lisätiedot Sosiaalisen arvioinnin kehittämisverkosto Ville Kujanpää
Sosiaalisen arvioinnin kehittämisverkosto 9.11.2016 Ville Kujanpää Tavoite Sosiaalisen arvioinnin kehittämisverkoston tavoitteena on tukea sosiaalisen arvioinnin menetelmän käyttöönottoa setlementtien Lisätiedot Ammatillisen koulutuksen laatutyöryhmä työskentelee
Ammatillisen koulutuksen laatutyöryhmä työskentelee Laatuverkoston tapaaminen 31.10.2013 Opetusneuvos Tarja Riihimäki Laatutyöryhmä työskentelee Ehdotus koulutuksen järjestäjien laadunhallintajärjestelmien Lisätiedot Mitä on RAY:n seuranta?
Mitä on RAY:n seuranta? Tulokset näkyviin järjestöjen eduksi Janne Jalava seurantapäällikkö, dosentti RAY/avustusosasto 1 Myös seurannan lähtökohta löytyy laista 21 Rahapeliyhteisön valvontatehtävä Rahapeliyhteisön Lisätiedot Monikäyttöinen, notkea CAF - mihin kaikkeen se taipuukaan?
Monikäyttöinen, notkea CAF - mihin kaikkeen se taipuukaan? Raila Oksanen 1.9.2016 Page 1 Monikäyttöisyyden lähtökohta CAF on tarkoitettu helppokäyttöiseksi työkaluksi julkisen sektorin organisaatioiden Lisätiedot Arvioinnilla luottamusta
Arvioinnilla luottamusta Perusopetuksen ja lukiokoulutuksen laadunhallinta- ja itsearviointikäytänteet Elina Harjunen, Risto Hietala, Laura Lepola, Anu Räisänen ja Aila Korpi Pohjois-Suomen AVI-alueen Lisätiedot HANKETYÖN VAIKUTTAVUUDEN ARVIOINTI
HANKETYÖN VAIKUTTAVUUDEN ARVIOINTI Mitä vaikuttavuus on? Vaikuttavuuden arviointi? Kokemuksia Anu Räisänen 2012 Tuloksellisuuden käsitteistö (VM) Tuloksellisuus tehokkuus taloudellisuus suoritteet tulokset/tuotokset Lisätiedot KANSALLISEN OPPIMISTULOSTIEDON TUOTTAMINEN AMMATTIOSAAMISEN NÄYTÖISTÄ JA KANSALLINEN SEURANTA
KANSALLISEN OPPIMISTULOSTIEDON TUOTTAMINEN AMMATTIOSAAMISEN NÄYTÖISTÄ JA KANSALLINEN SEURANTA Kansallisen seuranta-arvioinnin tavoitteet ja periaatteet Oppimistulosten seuranta-arvioinnit 2008 2009 Tiedotustilaisuus Lisätiedot KESKI-SUOMEN SOTE 2020 HANKKEEN ULKOINEN ARVIOINTI. Piia Tienhaara & Pasi-Heikki Rannisto
Hyvällä johtamisella hyvään työelämään Paasitorni, 10.12.2013 Paula Risikko, sosiaali- ja terveysministeri 1 Johtamisverkosto selvittää, kokoaa, kehittää ja jakaa johtamisen ja esimiestyön hyviä käytäntöjä Lisätiedot Työllisyystoimien vaikutusten arvioinnin ja tulosindikaattorien kehittäminen. Itä-Suomen yliopisto, Karjalan tutkimuslaitos
Työllisyystoimien vaikutusten arvioinnin ja tulosindikaattorien kehittäminen Tausta ja tarpeet Tulevaisuudessa tuloksellisuus ja tuloksellisuuden todentaminen tulevat saamaan nykyistä suuremman painoarvon Lisätiedot Kohderyhmä Rooli Viestinnän tavoite Viestinnän väline/vastuuhenkilöt
LIITE 6. VIRTA OULUN VIESTINTÄSUUNNITELMA Virta Oulu alahankkeessa noudatetaan Oulun kaupungin viestintäohjetta: http://www.ouka.fi/viestinta/pdf/viestintaohje.pdf Taulukko 1. Sisäinen viestintä. Kohderyhmä Lisätiedot Arvioinnin viitekehys ja toimintamalli hankearvioinnin perustana
Arvioinnin viitekehys ja toimintamalli hankearvioinnin perustana Lahden tiedepäivä 10.11.2015 Tiina Saarinen Kehittämissuunnittelija A-klinikkasäätiö Hankearvioinnin haasteita Haasteet usein seurausta Lisätiedot Kehittämisverkostojen kick off tule kuulemaan mistä on kysymys! Mona Särkelä-Kukko
Kehittämisverkostojen kick off tule kuulemaan mistä on kysymys! Mona Särkelä-Kukko 1.9.2016 1. Kehittämisverkostojen käynnistämisen tausta 2. Yhteinen ymmärrys lähtökohtiin 3. Toiveet, tarpeet ja osaamisen Lisätiedot VÄLI- JA LOPPURAPORTOINTI
Tuija Nikkari 2012 VÄLI- JA LOPPURAPORTOINTI Raportointikoulutus 23.8.12 Raportoinnin tarkoitus Raportoinnin tehtävänä on tuottaa tietoa projektin etenemisestä ja tuloksista rahoittajalle, yhteistyökumppaneille Lisätiedot Näkökulmia vaikutusten arvioinneista. Kajaani Eila Linnanmäki ja Tuulia Rotko
Näkökulmia vaikutusten arvioinneista Kajaani 12.11.2010 Eila Linnanmäki ja Tuulia Rotko 1 Mikä vaikutusten arviointi? Näyttöön perustuva vaikuttavuuden ja vaikutusten arviointi alkoi kehittyä 1990-luvulta Lisätiedot AROPE. Näyttötutkintojen arvioijan perehdyttäminen. Anita Aalto-Setälä Eeva-Kaarina Aurila Pertti Huhtanen Teija Ripattila Anna Tolonen
perehdyttäminen AROPE Anita Aalto-Setälä Eeva-Kaarina Aurila Pertti Huhtanen Teija Ripattila Anna Tolonen perehdyttäminen 1 Tausta, tavoitteet, arvioijan rooli ja tehtävät tavoitteena kerätä hyviä toimintamalleja Lisätiedot MIKSI VAIKUTTAVUUTTA? Vaikuttavuusvalmentamo 29.10
MIKSI VAIKUTTAVUUTTA? Vaikuttavuusvalmentamo 29.10 AVUSTUSOSASTO RAY 25.10.2016 2 LAKISÄÄTEINEN TEHTÄVÄ Laki raha-automaattiavustuksista 21. Rahaautomaattiyhdistyksen on sopivalla tavalla seurattava myönnettyjen Lisätiedot SenioriKasteen loppuarviointi 08/2016
Keski-Pohjanmaa / Kainuu / Oulunkaari / Lappi SenioriKasteen loppuarviointi 08/2016 Ohjausryhmä 20.9.2016 Liisa Ahonen Arviointiprosessi arviointisuunnitelma 12.1.2015 Hankkeen työntekijät Toiminnalliset Lisätiedot Oheisessa liitteessä on määritelty lyhyesti, millaiset kehittämistoimet hankerekisteriin laitetaan, ja mitä rekisterikenttiin on tarkoitus kirjata.
09.12.2015 1 (5) n käyttöönotto Satakunnan sairaanhoitopiirissä Satakunnan sairaanhoitopiirissä tehdään paljon hyvää kehittämistyötä eri vastuualueilla ja yksiköissä. Laajan kehittämistyön näkyväksi tekemisen Lisätiedot Etelä-Pohjanmaan lapset, nuoret ja lapsiperheet -kehittämishanke ARVIOINTISUUNNITELMA
Etelä-Pohjanmaan lapset, nuoret ja lapsiperheet -kehittämishanke ARVIOINTISUUNNITELMA 8.10.2010 SISÄLLYS 1. Johdanto... 2 2. Hankkeen tausta ja tavoitteet... 2 2.1 Toimintaympäristö... 2 2.2 Hankkeen tavoite... Lisätiedot OPETUKSEN JÄRJESTÄJÄN PAIKALLINEN KEHITTÄMISSUUNNITELMA
OPETUKSEN JÄRJESTÄJÄN PAIKALLINEN KEHITTÄMISSUUNNITELMA 2013-2016 Koulutus ja tutkimus kehittämissuunnitelma 2012 2016 linjaa valtakunnalliset painopistealueet, jotka koulutuspoliittisesti on päätetty Lisätiedot Vertaisarvioinnin osaamisen lisääminen LaStrada-verkostossa
Vertaisarvioinnin osaamisen lisääminen LaStrada-verkostossa Kuinka tavoitteemme täyttyi laatustrategian toimeenpanon hankkeen aikana Miksi vertaisarviointia Yhtenä hankkeen tavoitteena oli lisätä LaStradaverkoston Lisätiedot PSY181 Psykologisen tutkimuksen perusteet, kirjallinen harjoitustyö ja kirjatentti
PSY181 Psykologisen tutkimuksen perusteet, kirjallinen harjoitustyö ja kirjatentti Harjoitustyön ohje Tehtävänäsi on laatia tutkimussuunnitelma. Itse tutkimusta ei toteuteta, mutta suunnitelman tulisi Lisätiedot LUONNOS OPETUKSEN JÄRJESTÄJÄN PAIKALLINEN KEHITTÄMISSUUNNITELMA
OPETUKSEN JÄRJESTÄJÄN PAIKALLINEN KEHITTÄMISSUUNNITELMA 2013-2016 Koulutus ja tutkimus kehittämissuunnitelma 2012 2016 linjaa valtakunnalliset painopistealueet, jotka koulutuspoliittisesti on päätetty Lisätiedot Portfoliotyöskentely sosiaali- ja terveydenhuollon johtajan pätevyys opinnoissa sekä erikoislääkäri- ja erikoishammaslääkäritutkinnoissa
Päivitetty 30.6.2011 Portfoliotyöskentely sosiaali- ja terveydenhuollon johtajan pätevyys opinnoissa sekä erikoislääkäri- ja erikoishammaslääkäritutkinnoissa Ohjeita tuutorille ja koulutettavalle Taustaa Lisätiedot KÄYNNISTYSVAIHE. Aiheen valmistelu Ajankohta: syys-lokakuu/helmi-maaliskuu
1. Aiheen valmistelu Ajankohta: syys-lokakuu/helmi-maaliskuu valmistelee toimeksiannon. määrittää seuraavan kauden tarjonnan. Valitaan kehitysaiheet lle työstettäväksi. Yhteys n yhteyshenkilöön. Ollaan Lisätiedot Kokemusasiantuntijuus ja asiakkaiden osallistumisen toimintamalli
Palvelut asiakaslähtöiksi - Kärkihanke Kokemusasiantuntijuus ja asiakkaiden osallistumisen toimintamalli LAPIN työpaja 27.9.2106 Sosiaalineuvos Pirjo Sarvimäki Hankkeen tavoitteet Hankkeessa kehitetään Lisätiedot KASTE-OHJELMAN ALUEKIERROS POHJOIS- SUOMEN TILAISUUS Kaste-ohjelman tavoitteet ja keinot niiden saavuttamiseksi
KASTE-OHJELMAN ALUEKIERROS POHJOIS- SUOMEN TILAISUUS 31.8.2012 Kaste-ohjelman tavoitteet ja keinot niiden saavuttamiseksi Margit Päätalo Kaste-ohjelma, ohjelmapäällikkö Pohjois-Suomi Väkiluku Pohjois-Suomessa Lisätiedot Ajankohtaista ammattikoulutuksen laadunhallinnasta
Kansallinen laatuverkosto 3-2012 Keuda 12.10. 2012 klo 9.00-15.00 Ajankohtaista ammattikoulutuksen laadunhallinnasta Opetusneuvos Opetusneuvos Opetushallitus Email: leena.koski@oph.fi KESU 85. Vahvistetaan Lisätiedot Reflektiiviset rakenteet vaikuttavuuden edellytyksenä sosiaalipalveluissa
Reflektiiviset rakenteet vaikuttavuuden edellytyksenä sosiaalipalveluissa Kehittämispäällikkö Laura Yliruka 6.11.2015 Pääkaupunkiseudun sosiaalialan osaamiskeskus Socca 1 Ajassa liikkuvia teemoja (mukaillen Lisätiedot Arviointi'10 kehittävän arvioinnin prosessi. Helsinki Ylitarkastaja Henna Antila
Arviointi'10 kehittävän arvioinnin prosessi Helsinki 9.9.2010 Ylitarkastaja Henna Antila Kehittävä arviointi 1. Arvioinnin tehtävänä on aina jonkin kehittäminen Kehittävän arvioinnin lähtökohtana on tiedon Lisätiedot PoPSTer Viestintäsuunnitelma
PoPSTer Viestintäsuunnitelma PoPSTer POHJOIS-POHJANMAAN SOSIAALI- JA TERVEYDENHUOLTO OSANA TULEVAISUUDEN MAAKUNTAA Viestintäsuunnitelma 1. Viestinnän lähtökohdat ja periaatteet Sosiaali ja terveydenhuollon Lisätiedot Minna Savinainen Ergonomialla tuki-ja liikuntaelimistön sairaudet hallintaan elintarviketeollisuudessa
Ergonomialla tuki-ja liikuntaelimistön sairaudet hallintaan elintarviketeollisuudessa Työpajat 2014 Minna Savinainen, TtT, tft, erikoistutkija minna.savinainen@ttl.fi, Työterveyslaitos, Tampere Työterveyshuolto Lisätiedot Muutostyön tekeminen kunnassa
Muutostyön tekeminen kunnassa Hyvinvointi hakusessa riippuvuus riskinä Lappi/ Kainuu (Kaste-ohjelma) 2013-2015 26.-27.3.2014 / Hakusessa päivät, Rovaniemi Kainuun keittämisosio Kainuun maakunta ja kunnat Lisätiedot ASIAKASKOKEMUKSEN MITTAAMINEN
ASIAKASKOKEMUKSEN MITTAAMINEN Linnoitustie 4 Violin-talo 5 krs., FI-02600 Espoo www.triplewin.fi will invest into customer experience leadership Miten rakennetaan asiakaskokemuksen johtamiseen toimiva Lisätiedot HYVINVOINTI JA TERVEYS ON YHTEINEN TAVOITE Sosiaali- ja terveydenhuollon kansallinen kehittämisohjelma
HYVINVOINTI JA TERVEYS ON YHTEINEN TAVOITE Sosiaali- ja terveydenhuollon kansallinen kehittämisohjelma 2008-2011 Kaikille mahdollisuus terveyteen ja turvalliseen elämään Kaste-ohjelma on sosiaali- ja terveysministeriön Lisätiedot Sovari-vaikuttavuusmittarin hyödyntäminen työpajatoiminnassa
Sovari-vaikuttavuusmittarin hyödyntäminen työpajatoiminnassa Riitta Kinnunen, asiantuntija Valtakunnallinen työpajayhdistys ry Etelä-Suomen työpajojen ALU-STARTTI 27.1.2016 Sovari tuottaa laadullista vaikutustietoa Lisätiedot Hyvän johtamisen kriteerit Arviointityökalu
Hyvinvointia työstä Työterveyslaitos www.ttl.fi Ihmisten innostava johtaminen Jalmari Heikkonen, johtava asiantuntija 3.6.2014 Jalmari Heikkonen Työterveyslaitos www.ttl.fi Oikeudenmukaisuus Jaon oikeudenmukaisuus Lisätiedot JHS XXX ICT-palvelujen kehittäminen: Laadunvarmistus Liite 2: Tarkistuslistoja
JHS XXX ICT-palvelujen kehittäminen: Laadunvarmistus Liite 2: Tarkistuslistoja Versio: 0.9 Julkaistu: n.n.2011 Voimassaoloaika: toistaiseksi 1 Yleistä Palvelun kehitys jakautuu vaiheisiin, joiden väleissä Lisätiedot HOITOTYÖN STRATEGINEN TOIMINTAOHJELMA JA TOIMEENPANO VUOTEEN 2019 VARSINAIS-SUOMEN ALUE
HOITOTYÖN STRATEGINEN TOIMINTAOHJELMA JA TOIMEENPANO VUOTEEN 2019 VARSINAIS-SUOMEN ALUE HOITOTYÖN TOIMINTAMALLI VISIOMME VUOTEEN 2019 Tavoitteenamme on, että hoitotyön yhteisömme on alueellisesti vetovoimainen Lisätiedot Sekä opiskelijoiden että henkilöstön palautteiden ja raporttien kautta arvioidaan ulkomaanjaksojen tavoitteiden toteutumista.
Arviointi ja vaikuttavuus Erasmus+ ammatillinen koulutus Aloituskoulutus 9. 10.9.2015 Poimintoja Sekä opiskelijoiden että henkilöstön palautteiden ja raporttien kautta arvioidaan ulkomaanjaksojen tavoitteiden Lisätiedot Hyvinvointia ja laatua vanhuspalvelulain toimeenpano -hanke
KAINUUN SOTE KUNTAYHTYMÄ Hyvinvointia ja laatua vanhuspalvelulain toimeenpano -hanke Kainuun sosiaali- ja terveydenhuollon toimintasuunnitelma Marja-Liisa Ruokolainen Eija Tolonen, Jaana Mäklin, Lahja Lisätiedot Sairausvakuutuslaki muuttuu: työkyvyn hallinta ja varhainen tuki
Sairausvakuutuslaki muuttuu: työkyvyn hallinta ja varhainen tuki Koulutuskiertue Syksy 2010 Kela Uusi painotus lakisääteiseen toimintaan (Sata - komitea 26.5.2009 => linjaus) Työterveyshuollon työkykyä Lisätiedot Kotouttamisrahasto. Vuosiohjelma 2009
Kotouttamisrahasto Vuosiohjelma 2009 TOIMILINJA A1. Haavoittuvassa asemassa olevien kolmansien maiden kansalaisten tukeminen TOIMILINJA A2. Innovatiiviset neuvonnan ja kotoutumisen mallit TOIMILINJA B3 Lisätiedot Sosiaali- ja terveysalan kehittämisen ja johtamisen koulutus (YAKJAI15A3)
Laatukäsikirja - mikä se on ja miten sellainen laaditaan? Matkailun laatu laatukäsikirja osaksi yrityksen sähköistä liiketoimintaa Sähköinen aamuseminaari matkailualan toimijoille 24.8.2010 Riitta Haka Lisätiedot Keskeiset teemat Kysymysten laatiminen vertaisarviointikäynnille ja kysymys- ja haastattelutekniikat Johdatus aiheeseen ennakkotehtävän pohjalta
Koulutuspäivä: VERTAISARVIOINTI JA VERTAISARVIOIJANA TOIMIMINEN Koulutuspäivä 13.2.2012, klo 09.00 16.00 Keskeiset teemat Kysymysten laatiminen vertaisarviointikäynnille ja kysymys- ja haastattelutekniikat Lisätiedot Hankkeiden laadunvarmistus, arviointi
Informaatiotilaisuus valtionavustusta saaneiden hankkeiden koordinaattoreille ja/tai yhteyshenkilöille 29.9.2011 klo 11.30-12.00 Hankkeiden laadunvarmistus, arviointi Opetusneuvos Leena Koski Leena.Koski@oph.fi Lisätiedot Harkitsetko kehittämishanketta - 10 hyvää vinkkiä suunnitteluun. Seija Sukula Kehittämispäällikkö Kela
Harkitsetko kehittämishanketta - 10 hyvää vinkkiä suunnitteluun Seija Sukula Kehittämispäällikkö Kela 21.1.2015 Kelan rooli Kelalla lakisääteinen velvollisuus kehittää kuntoutusta Suomen merkittävimpiä Lisätiedot Hankkeiden toiminnan ja tuloksellisuuden arviointi
Hankkeiden toiminnan ja tuloksellisuuden arviointi TURVALLINEN HUOMINEN RAKENNETAAN TÄNÄÄN Rikoksentorjuntaseminaari turvallisesta kaupunkiympäristöstä ja syrjäytymisen ehkäisemisestä Avustusosasto, Tuomas Lisätiedot Työkyvyn hallinta, seuranta ja varhainen tuki. Työterveysyhteistyö ja työkyvyn ylläpitäminen korvaamisen edellytyksinä
Työkyvyn hallinta, seuranta ja varhainen tuki Työterveysyhteistyö ja työkyvyn ylläpitäminen korvaamisen edellytyksinä Koulutuskiertue 2012 1 Tavoitteemme on edistää yhteistä näkemystä työterveysyhteistyöstä Lisätiedot Mielenterveys- ja päihdetyö osana kunnan hyvinvointia
Mielenterveys- ja päihdetyö osana kunnan hyvinvointia - Opas strategiseen suunnitteluun Vs. ylihoitaja, projektopäällikkö Minna Laitila Etelä-Pohjanmaan sairaanhoitopiiri Välittäjä 2013:n Pohjanmaa-hanke Lisätiedot 12.1.2015. 1. Palvelu on helposti saatavaa, asiakaslähtöistä ja turvallista
1 (4) HOITO- JA HOIVATYÖN TOIMINTAOHJELMA 2015-2016 Väestön ikääntyminen, palvelu- ja kuntarakenteen muutos, palveluiden uudistamistarve, väestön tarpeisiin vastaavuus, kilpailu osaavasta työvoimasta ja Lisätiedot OKM:n laaturyhmän linjaukset Laadunhallintajärjestelmien itsearvioinnin toteutus ja kriteerien esittely
Työseminaari Vaasassa - Laadunhallintajärjestelmien itsearviointiosaaminen Vaasa 15.1.2015 klo 9.15-10.45 OKM:n laaturyhmän linjaukset Laadunhallintajärjestelmien itsearvioinnin toteutus ja kriteerien Lisätiedot SUUNTA TOIMINNAN JA ARVIOINNIN SUUNNITTELUN TYÖKALU
1 SUUNTA TOIMINNAN JA ARVIOINNIN SUUNNITTELUN TYÖKALU Suunta on työkalu, jota käytetään suunnittelun ja arvioinnin apuna. Se on käyttökelpoinen kaikille, jotka ovat vastuussa jonkun projektin, toiminnon, Lisätiedot Opetustoimen henkilöstön osaamisen kehittäminen 2014
Opetustoimen henkilöstön osaamisen kehittäminen 2014 HANKKEIDEN SEURANTA, ARVIOINTI JA TUOTOKSET Tiedotustilaisuus 1.11.2013 Opetusneuvos Mari Räkköläinen OPETUSTOIMEN HENKILÖSTÖN OSAAMISEN KEHITTÄMISEN Lisätiedot Arvioijan kolme huoneentaulua. Arvioinnin tuloksellisuuden ja henkilöstön sitouttamisen haaste
Arvioijan kolme huoneentaulua Arvioinnin tuloksellisuuden ja henkilöstön sitouttamisen haaste Henkilöstöön kuuluvat arvioinnin kannalta Organisaation toiminnan ylläpitäjää (valtio, kunta, kuntayhtymä, Lisätiedot JÄRJESTÖJEN YHTEISTYÖ JULKISEN SEKTORIN KANSSA JA RAY-RAHOITUS. Tuomas Koskela
JÄRJESTÖJEN YHTEISTYÖ JULKISEN SEKTORIN KANSSA JA RAY-RAHOITUS Tuomas Koskela RAY:n avustuslinjaukset 2016-2019 7.10.2016 JÄRJESTÖ-KUNTA YHTEISTYÖLLÄ PYSYVIÄ TULOKSIA Korostamme järjestöjen ja kuntien Lisätiedot VÄLI-SUOMEN IKÄKASTE ÄLDRE-KASTE II
VÄLI-SUOMEN IKÄKASTE ÄLDRE-KASTE II 2011-2013 viestintäsuunnitelma Vuokko Lehtimäki Anni Kuhalainen IKÄKASTE ÄLDRE-KASTE II (2011-2013) Hankkeen tarkoitus ja tavoitteet Ikäkaste Äldre-kaste II -hanke toteuttaa Lisätiedot Arviointi ja mittaaminen
Arviointi ja mittaaminen Laatuvastaavien koulutus 5.6.2007 pirjo.halonen@adm.jyu.fi 014 260 1180 050 428 5315 Arviointi itsearviointia sisäisiä auditointeja ulkoisia auditointeja johdon katselmusta vertaisarviointeja Lisätiedot Tarkastustoimen viestintäsuunnitelma
Tarkastustoimen viestintäsuunnitelma Helsingin kaupungin tarkastuslautakunnan ja -viraston sisäisen ja ulkoisen viestinnän linjaukset. Suunnitelma on otettu käyttöön tarkastusjohtajan päätöksellä 28.12.2015 Lisätiedot TOIMINTASUUNNITELMA 2015
EVIVA Ennaltaehkäisevä virikkeellinen vapaa-aika TOIMINTASUUNNITELMA 2015 Sisällysluettelo Tavoite ja päämäärä... 2 EVIVA toimintaohjelman hallinto... 2 Päätoimenpiteet 2015... 2 Arviointi ja seuranta Lisätiedot ForeMassi2025 Tiedotustilaisuus 3.5.2011. Teemu Santonen, KTT Laurea-ammattikorkeakoulu
ForeMassi2025 Tiedotustilaisuus 3.5.2011 Teemu Santonen, KTT Laurea-ammattikorkeakoulu Hankkeen tavoitteet Pitkän aikavälin laadullisen ennakoinnin verkostohanke Teemallisesti hanke kohdistuu hyvinvointi- Lisätiedot Tutustuminen Kuvastin-menetelmään
Socca Pääkaupunkiseudun sosiaalialan osaamiskeskus Tutustuminen Kuvastin-menetelmään Johtava tutkijasosiaalityöntekijä Laura Yliruka Socca 1 Mikä PKS-Praksiksen oppimisverkosto? 1/2 Pääkaupunkiseudun Praksiksessa Lisätiedot Lark työpaja
Lark työpaja 21.11.2016 Osallistaminen Palautejärjestelmän kehittäminen jaksopalaute Tuuli Ovaska Hanna-Liisa Ollila Kerätyn tiedon läpikäynti KEHITTÄMISKOHTA JA OSATAVOITTEET 3.3.2015 Mitä tietoa pitäisi Lisätiedot Arviointiverkosto. Toimintasuunnitelma. Kivipelto & Vuorenmaa päiv. 5.2.2009
Arviointiverkosto Toimintasuunnitelma Kivipelto & Vuorenmaa päiv. 5.2.2009 SISÄLTÖ 1 Arviointiverkoston tausta ja tarve... 3 2 Arviointiverkoston toiminta-alue ja kohderyhmät... 5 3 Arviointiverkoston Lisätiedot Suurkäyttäjien hoito- ja palveluketjujen rakentaminen Oulunkaarella HUCCO
Suurkäyttäjien hoito- ja palveluketjujen rakentaminen Oulunkaarella HUCCO Heavy Users Care Chains in OuluArc Tiedotussuunnitelma OULUNKAAREN SEUTUKUNTA Ii Pudasjärvi Utajärvi Vaala Yli-Ii Piisilta 1, 91100 Lisätiedot Ei näyttöä tai puheen tasolla
Jyväskylän yliopisto 1(5) Dokumenteilla tarkoitetaan suuntaa ohjaavia asiakirjoja, strategioita ja linjauksia. Keskeisiä ovat vain ko. auditointikohdetta koskevat ja ohjaavat dokumentit. Dokumentit voivat Lisätiedot Opinnäytetyöhankkeen työseminaarin avauspuhe 20.4.2006 Stadiassa Hoitotyön koulutusjohtaja Elina Eriksson
Kuinka vammaisen henkilön päätöksentekoa voidaan tukea? Maarit Mykkänen, Savon Vammaisasuntosäätiö Kehitysvammaliiton opintopäivät 2015 Tuetusti päätöksentekoon -projekti Projektin toiminta-aika: 2011-31.7.2015 Lisätiedot Osallisuus yhteiskunnassa ja palveluissa. Eila Linnanmäki ja Jarno Karjalainen Varrelta Virran seminaari Kajaani
Osallisuus yhteiskunnassa ja palveluissa Eila Linnanmäki ja Jarno Karjalainen Varrelta Virran seminaari 19.9.2013 Kajaani Osallisuuden käsitteestä Voidaan hahmottaa positiivisena vastaparina yksilön, perheen Lisätiedot Sähköinen asiointi ja palvelut Miten tästä eteenpäin?
Sähköinen asiointi ja palvelut Miten tästä eteenpäin? Kauko Hartikainen, Kuntaliitto Terveyskeskusten johdon neuvottelupäivät 10.2.2012 Tavoiteltavat toteutukset Realistisia ja konkreettisia Hyötyjä jo Lisätiedot KASTE / Kotona kokonainen elämä Tulokset 2015
KASTE / Kotona kokonainen elämä Tulokset 2015 Sara Haimi-Liikkanen Kehittämiskoordinaattori Etelä-Kymenlaakson toiminnallinen osakokonaisuus Asiakaspalaute osallistava haastattelu Vanhuspalvelulaissa (2013) Lisätiedot HYVINVOINTI JA TERVEYS ON YHTEINEN TAVOITE. Sosiaali- ja terveydenhuollon kansallinen kehittämisohjelma
HYVINVOINTI JA TERVEYS ON YHTEINEN TAVOITE Sosiaali- ja terveydenhuollon kansallinen kehittämisohjelma 2008-2011 Kaikille mahdollisuus terveelliseen ja turvalliseen elämään KASTE-ohjelma on sosiaali- ja Lisätiedot Lähemmäs. Marjo Lavikainen
Lähemmäs Marjo Lavikainen 20.9.2013 Lapsi- ja nuorisopolitiikan kehittämisohjelma 2012 2015 Opetus- ja kulttuuriministeriön julkaisuja 2012:6 Kehittämisohjelman valmistelu alkoi lasten ja nuorten verkkokuulemisella Lisätiedot LARK alkutilannekartoitus
1 LARK alkutilannekartoitus 1 Toimintojen tarkastelu kokonaisuutena Suunnittelu Koulutuksen järjestäjällä on dokumentoitu toimintajärjestelmä, jonka avulla se suunnittelee ja ohjaa toimintaansa kokonaisvaltaisesti Lisätiedot Kaste-ohjelma Lähisuhde- ja perheväkivallan ehkäisy
Kaste-ohjelma Lähisuhde- ja perheväkivallan ehkäisy Kajaani 10.9.2013 Leena Meriläinen, Kaste-ohjelma Ohjelmapäällikkö Me kaikki olemme vastuussa toisistamme, heikoimmistakin, jotta jokainen huomenna näkisi Lisätiedot LAVA Lapsivaikutusten arviointi seurakunnan päätöksenteossa
LAVA Lapsivaikutusten arviointi seurakunnan päätöksenteossa 3.10.2015 Pirjo Ojala Siilinjärven seurakunnan lapsiasiavaltuutettu Lasten- ja nuorisopsykiatrian erikoislääkäri YK:N LAPSEN OIKEUKSIEN SOPIMUS Lisätiedot Parempi Arki Väli-Suomen Kastehanke
Parempi Arki Väli-Suomen Kastehanke 1.3.2015 31.10.2017 Viestintäsuunnitelma Jessica Fagerström Satu Raatikainen 15.9.2015 Päivitetty 4.12.2015 Parempi Arki-hankkeen tausta, tavoitteet ja organisaatio Lisätiedot Osaamisen laadunhallinta 2. kierroksen auditoinneissa
Osaamisen laadunhallinta 2. kierroksen auditoinneissa Itsearviointi Itsearvioinnissa pyydetään tutkintotavoitteisen koulutuksen näyttöihin liittyen kuvaamaan, miten oppimistavoitteiden ja niiden määrittelyn Lisätiedot WWW-osoite Virallinen sähköpostiosoite Emoyhtiön konsernin nimi Yksikön nimi. Diaari /0/2014