Hankkeen arvioinnista on moneksi

Ammattikorkeakoulun tehtävänä on toteuttaa soveltavaa tutkimus-, kehittämis- ja innovaatiotoimintaa (TKI), joka toisaalta palvelee ammattikorkeakouluopetusta ja toisaalta edistää alueellista elinkeinoelämää (1). TKI-toiminnan keskiössä ovat erilaiset hankkeet, joilla pyritään tuottamaan ratkaisuja yhteiskunnallisiin ja elinkeinoelämän haasteisiin samalla, kun vastataan projektisuunnitelman ja muihin rahoittajan määrittelemiin tavoitteisiin. Hankkeen kokonaisvaltainen arviointi voi tulosten lisäksi kohdistua johtamiseen, vaikuttavuuteen ja toiminnan arviointiin hankkeen eri vaiheissa (2). Toisaalta arvioinnin kohteena voi olla hankkeessa opitun reflektointi ja osallisuuden kokemus.  

Jokainen hanke on erilainen – ei vain tavoitteiden vaan myös toimijaverkon osalta. Parhaimmillaan hanke tuottaa uusia ratkaisuja elinkeinoelämän ja ammattikorkeakouluun arkeen ja samalla kasvattaa kaikkien toimijoiden osaamista. 

Arviointi osana hankkeen toimintaa 

Hankkeen loppuarvioinnissa matkalla kertyneestä arviointiaineistosta koostetaan systemaattisen käsittelyn kautta kokonaiskuva, jonka myötä hankkeen tulokset ja hyvät käytänteet sekä myös kehittämiskohteet tulevat näkyväksi. Arviointi kohdistuu hankkeen tulosten, tavoitteiden, horisontaalisten periaatteiden lisäksi myös moninaiseen toiminnan arviointiin. 

Dallaten-hankkeessa toiminnan itsearviointia on tehty hankkeen elinkaaren eri vaiheissa, kolmella hanketoimijoille suunnatulla ja samanlaisena toistuvalla anonymisoidulla sähköisellä kyselyllä. Kyselyillä on arvioitu hankkeen johtamista, viestintää, yhteistyötä, työskentelyalustoja, toiminnallisia vahvuuksia ja kehittämiskohteita. Hankkeen aikana toteutettujen itsearviointien sekä kerättyjen tapahtumien ja koulutusten palautekyselyjen vastaukset ovat ohjanneet toimintaa matkan varrella. Tämän lisäksi kyselytuloksia hyödynnetään osana hankkeen toiminnan loppuarviointia. 

Hankkeeseen kytkeytynyt toimijajoukko oli taustoiltaan moninainen ja monialainen. Mukana oli edustajia eri ammattikorkeakouluista ja erilaisista lähtökohdista yrittäjyyteen ponnistaneita yrittäjiä. Toimijajoukkoa täydensi vapaaehtoisista senioreista koottu vaikuttajaryhmä. Arviointiaineistoja kerättäessä huomioitiin, että vapaaehtoisista senioreista kaikilla ei esimerkiksi ollut laitteita tai valmiuksia vastata sähköisiin kyselyihin.  

Hankkeen loppuarvioinnissa hyödynnetään myös ulkoista arviointia, joka toteutetaan osana HYTKE – kestävää hyvinvointia yhdessä tutkimalla ja kehittämällä – hankkeen Osallistuvan TKI-kumppanuuden arviointiviitekehyksen pilotointia (3). Osallistuva TKI-kumppanuus ohjaa kohdistamaan katseen yhdenvertaiseen osallistumiseen, moninaiseen osaamiseen sekä systeemiseen kehkeytymiseen.  

Loppuarviointiin osallistuivat samansisältöisillä kysymyksillä Haaga-Helian, Laurean ja Metropolian hanketoimijoiden lisäksi hankkeessa valmennuksessa olleet yritykset sekä hankkeen ohjausryhmä. Hankkeessa mukana ollut vapaaehtoisista senioreista koostunut vaikuttajaryhmä osallistettiin mukaan arviointiin osana vanhustyön opiskelijoiden tekemää opinnäytetyötä (4).  

Osallistuvan TKI-kumppanuuden viitekehys apuna aineiston jäsentämisessä 

Dallaten-hankkeessa matkan aikana kertynyt arviointiaineisto on luonteeltaan moninaista. Sirpaleiseksikin luonnehdittavaksi olevan aineiston jäsentämisessä ja analysoinnissa on hyödynnetty edellä mainittua osallistuvan TKI – kumppanuuden arviointiviitekehystä, joka ohjasi kohdistamaan katseen yhdenvertaiseen osallistumiseen, moninaiseen osaamiseen sekä systeemiseen kehkeytymiseen. 

Eri materiaalien tarkastelu saman viitekehyksen avulla auttoi nostamaan yhtymäkohtia tilanteessa, jossa arvioinnissa käytetty aineisto ei ole muodoltaan yhdenmukaista. Esimerkiksi hankkeeseen osallistuneille yrittäjille suunnatun palautekyselyn vastaukset saivat vahvistusta, kun vastauksia verrattiin seniorivaikuttajaryhmää koskevan opinnäytetyön johtopäätöksiin.  

Osallistuvan kumppanuuden arviointiviitekehys valikoitui työkaluksi vasta hankkeen loppuvaiheessa.

Hankematkaa reflektoidessa kävi ilmeiseksi, että osallistuvan kumppanuuden periaatteiden tarkoituksellinen soveltaminen hankkeen suunnittelusta alkaen – esimerkiksi ottamalla hankkeen kohderyhmään kuuluvia yrittäjiä mukaan jo suunnitteluvaiheeseen – olisi voinut olla erittäin hedelmällistä.

Viitekehys tarjosi kuitenkin arvokkaan tarkastelukulman tilanteessa, jossa osallistuvan kumppanuuden teemoista erityisesti syrjimättömyyden, tasa-arvon ja yhdenvertaisuuden huomiointi oli sisäänkirjoitettuna hankkeeseen rahoittajan määrittelemien horisontaalisten periaatteiden myötä.  

Arvioinnin tulokset kertovat onnistumisista 

Kun Dallaten-hankkeen arviointiaineistoja peilattiin osallistuvan TKI-kumppanuuden arviointiviitekehykseen, kävi ilmi, että yhdenvertaiseen osallistumiseen ja moninaiseen osaamiseen liittyvät seikat toteutuivat enimmäkseen hyvin tai erinomaisesti hankkeen toiminnassa, vaikka osallistuvan TKI-kumppanuuden mallia ei sovellettu alusta alkaen.

Yhdenvertaisen osallistumisen näkökulmasta tarkasteltuna myönteisiä seikkoja olivat   

• reilut toimintatavat kumppanien kesken 
• keskinäistä luottamusta ja arvostusta heijastavat ja vahvistavat toimintatavat 
• tavallisesti ulkopuolelle jäävien tahojen kutsuminen mukaan kumppaneiksi 
• yhteistoiminnan suunnitelmallisuus, koordinointi ja fasilitointi. 

 Moninaisen osaamisen tarkastelussa myönteisinä piirteinä Dallaten-hankkeessa pidettiin seuraavia asioita 

• yhteistyössä on mukana eritaustaisia ihmisiä ja monenlaista osaamista 
• kumppanien välisellä yhteistyöllä luodaan yhdyspintoja eri tahojen ja asiantuntijaverkostojen toimintaan 
• yhteistyön avulla tunnistetaan eri syitä ja tapoja, joista kumppanien kiinnostus ilmiötä kohtaan kumpuaa 
• yhteistoiminta suunnitellaan toimijoita yhdistävien arvojen varaan. 

Systeemistä kehkeytymistä käsittelevän osa-alueen arvioinnissa oli enemmän hajontaa. Toiminnassa tunnistettiin kuitenkin asioita, joita kannattaa vaalia hanketyössä jatkossakin: 

• kompleksisien asioiden ja ongelmien havainnollistaminen ja ratkominen 
• yhteistyö vaikuttavuuden vahvistamiseksi 
• jatkuvan oppimisen ja yhteisöllisen osaamisen vahvistaminen. 

Arviointi antaa eväitä oppimiseen 

Osallistuvan TKI-kumppanuuden viitekehys osana Dallaten-hankkeen loppuarviointia toimi erinomaisena kehittävän arvioinnin työkaluna. Arvioinnin yhteydessä esiin nousi joukko kysymyksiä, joiden pureskeluun on hyvä käyttää aikaa seuraavissa hankkeissa jo hankkeen suunnitteluvaiheesta alkaen:

• Millaisilla käytännön toimintatavoilla vuorovaikutuksen vastavuoroisuutta ja dialogisuutta voidaan edistää ja vahvistaa kumppaneiden välillä?
• Miten yhteistyömuotoja kehitetään osaamisen jakamista edistävään suuntaan?
• Millaisia esteitä erilaisilla kumppaneilla voi olla tuoda esiin erilaisia näkemyksiä?
• Onko yhteistyön muodoissa tai toimintatavoissa sellaisia malleja, jotka epäsuorasti ohjaavat toimijoita hakemaan konsensusta silloinkin, kun moninaiset näkökulmat veisivät asioita eteenpäin?
• Millaisilla toimilla yhteisen toiminnan systemaattisuutta ja pitkäjänteisyyttä voidaan vahvistaa?  

Osallistuvan TKI-kumppanuuden viitekehys tukee toimintakäytänteistä sopimista ja auttaa tekemään niitä näkyväksi. 

Kirjoittajat 

Anna Eskola, FM, toimii Dallaten-hankkeessa projektisuunnittelijana. Hänellä on useiden vuosien kokemus TKI-hankkeista sekä erilaisten toimintamallien kehittämistyöstä.  

Heidi Stenberg, KM, Lehtori, Th, tuotekehittäjä EAT, toimii Dallaten-hankkeen projektipäällikkönä tuoden toimintaan mukaan moninaisen osaamisen ja kokemuksen projektien johtamisesta, palveluiden kehittämisestä sekä myynnistä ja markkinoinnista eri toimialoilla.  

Lähteet 

1. Ammattikorkeakoululaki 14.11.2014/932 § 4 Luettavissa: https://www.finlex.fi/fi/laki/ajantasa/2014/20140932 
2. Koski L. toim. 2014. Hanketoiminnan ja hankkeiden vertaisarvioinnin arviointialueet ja –kriteerit (PDF).  Opetushallitus.
3. Sipari, S., Helenius, S., Vänskä, N., Foster, R., & Salonen, A. O. 2023. Osallistuva tutkimus-, kehittämis- ja innovaatiokumppanuus ammattikorkeakoulukontekstissa (journal.fi). Ammattikasvatuksen Aikakauskirja, 24(4), 10–27.
4. Niku H. & Lindqvist P. 2023. Vaikuttajaryhmä senioreiden äänenä: vaikuttajaryhmäläisten kokemuksia Dallaten-hankkeeseen osallistumisesta (theseus.fi).

Osallistuvaa TKI-kumppanuutta pilotoidaan osana Metropolian TKI-toiminnan profiilin kehittämistä, Opetus- ja kulttuuriministeriön tukemana. Lue lisää HYTKE-hankkeen sivulta.