Uppföljning och utvärdering av genomslag
Rådet för strategisk forskning (RSF) svarar för uppföljningen och utvärderingen av genomslaget hos RSF-finansierad forskning. Uppföljningen och utvärderingen kan omfatta både pågående och avslutade program och projekt. Syftet är att följa, utvärdera och synliggöra det vetenskapliga och samhälleliga genomslag som RSF-finansierad forskning har eftersträvat, uppnått och kan komma att uppnå i framtiden. Samtidigt vill man ta fram information som kan bidra till att utveckla finansieringen av strategisk forskning.
De första utvärderingarna genomfördes på programnivån 2020–2021, efter programmets slut, också med hjälp av externa experter. Från och med slutet av 2023 finns inte längre några separata programutvärderingar och, med undantag för självutvärdering, genomslaget kommer att följas och utvärderas över programgränserna.
Principerna för programutvärderingen finns i sin helhet i RSF:s finansieringsprinciper.
2023 avslutades två RSF-program:
- Anpassning som förutsättning för hållbar tillväxt (ADAPT, 2018–2023)
- Nycklar till hållbar tillväxt (GROWTH, 2018–2023).
Läs en sammanfattning (på finska) av resultaten och effekterna av dessa forskningsprogram:
Grundläggande information om dessa program finns på sidan Program och projekt under Avslutade program.
De enkätdata som samlats in för sammandraget har lämnats in i anonymiserat format till Finlands samhällsvetenskapliga dataarkiv (FSD) för eventuell vidare användning. Projektens och programdirektörernas genomslagsberättelser har med skribenternas tillstånd lagrats i Akademins materialbank och är tillgängliga för allmänheten. Annat material som använts i sammandraget kan fås via Finlands Akademis registratorskontor.
En utvärdering av fyra RSF-program genomfördes mellan 2022 och 2023, samordnad av ansvarsområdet för strategisk forskning:
- Jämlikhet i samhället, EQUA (2015–2021)
- Ett klimatneutralt och resurssnålt Finland, PIHI (2015–2021)
- Tekniska omvälvningar och institutioner i förändring, TECH (2015–2021)
- Föränderlig förvaltning och aktivt medborgarskap, CITIZEN (2017–2021).
Bekanta dig med utvärderingsrapporterna (på engelska):
- Equality in Society, EQUA (2015–2021). Evaluation of the strategic research programme (pdf, på engelska)
- A Climate-Neutral and Resource-Scarce Finland, PIHI (2015–2021). Evaluation of the strategic research programme (pdf, på engelska)
- Disruptive Technologies and Changing Institutions, TECH (2015–2021). Evaluation of the strategic research programme (pdf, på engelska)
- Changing Society and Active Citizenship, CITIZEN (2017–2021). Evaluation of the strategic research programme (pdf, på engelska)
Grundläggande information om dessa program finns på sidan Program och projekt under Avslutade program.
Så här genomfördes utvärderingen
Utvärderingen av EQUA-, PIHI-, TECH-, och CITIZEN-programmen genomfördes av fyra programspecifika expertpaneler bestående av utländska och finländska experter från programmets temaområde.
Utvärdering i expertpaneler
Var och en av de fyra expertpanelerna fick i uppgift att bedöma programmets genomförande, resultat och genomslag mot bakgrund av följande kriterier:
- främjande av flervetenskaplig forskning av hög kvalitet om problem och behov inom programmets temaområde
- skapande av konkreta åtgärder för att ta itu med dessa problem och behov i det finska samhället
- stärkande av forskar- och intressentgrupperna och deras kopplingar inom programmets temaområde.
På grundval av sina resultat tog panelerna också fram slutsatser och rekommendationer för den framtida utvecklingen av RSF-program.
Utvärderingsmaterial
Ansvarsområdet för strategisk forskning försåg varje expertpanel med omfattande dokumentation om bakgrunden, resultaten och effekterna av det program som utvärderades. I utvärderingsmaterialet ingick också resultaten av två enkäter, en riktad till projektrepresentanter och den andra till projektens viktigaste samarbetspartner. Dessutom intervjuade varje panel nyckelpersoner i programmet. Sammanfattningar av varje programs utvärderingsmaterial finns som bilagor till utvärderingsrapporterna.
De enkätdata som samlats in för utvärderingen har lämnats in i anonymiserat format till Finlands samhällsvetenskapliga dataarkiv (FSD) för eventuell vidare användning. Projektens och programdirektörernas genomslagsberättelser har med skribenternas tillstånd lagrats i Akademins materialbank och är tillgängliga för allmänheten. Annat utvärderingsmaterial kan fås via Finlands Akademis registratorskontor.
Utvärderingen av de fyra forskningsprogram som var i gång 2016–2019 var den första programutvärderingen som ansvarsområdet för strategisk forskning samordnade. Utvärderingen gällde följande program:
- Ett urbaniserande samhälle (URBAN)
- Hälsa, välfärd och levnadsvanor (HEALTH)
- Kunniga arbetstagare – framgångsrik arbetsmarknad (WORK)
- Säkerhet i en nätverksbaserad värld (SECURITY).
Läs mer om programmens utvärderingar:
- RSF-programmen 2016–2019: Självutvärderingar (pdf, på finska)
- RSF-programmen 2016–2019: Utvärderingsrapport om det samhälleliga genomslaget hos (pdf, på finska)
- RSF-programmen 2016–2019: Rapport om vetenskaplig verksamhet inom (pdf, på engelska)
De program som avslutades 2019 hittar du i rullgardinsmenyn nere på sidan Program och projekt.
Så här genomfördes utvärderingen
RSF-programmen HEALTH, SECURITY, URBAN och WORK utvärderades under 2020–2021 i tre faser.
Självutvärdering
Målet för den första fasen av programutvärderingen var att skapa en gemensam förståelse mellan programaktörerna om programmets verksamhet. Självutvärderingen genomfördes i form av programspecifika diskussionsmöten som resulterade i en analys av varje programs verksamhet. Vid diskussionerna behandlades alla mål för programutvärderingen. Promemoriorna från diskussionerna fungerade som material för utvärderingens följande fas.
Utvärdering av det samhälleliga genomslaget
I den andra fasen var målet att förstå RSF-programmens samhälleliga dimension. I utvärderingen av samhälleligt genomslag utnyttjades den så kallade IOOI-modellen (input-output-outcome-impact). Uppmärksamhet fästes vid olika genomslagskedjor, i synnerhet vid växelverkan med och förändringar i programmens intressentnätverk. Det samhälleliga genomslaget utvärderades av en utomstående utvärderare, Gaia-Consulting Oy.
Utvärdering av vetenskaplig verksamhet
I programutvärderingens tredje fas utvärderades programmens flervetenskapliga karaktär, vetenskapliga kvalitet samt kopplingarna mellan forskning och samhälleligt genomslag. I utvärderingen utnyttjades mångsidigt material. Utvärderingen genomfördes av en utomstående expertpanel.
Nyheter och blogginlägg om utvärdering av genomslaget hos strategisk forskning:
- Programutvärdering: den strategiska forskningen har stärkt tvärvetenskaplig forskning och beredskap för gemensam utveckling, 25.9.2023
- Fyra RSF-program är nu halvvägs – hur har projekten framskridit? Katri Huutoniemi och Otto Auranen 6.9.2022
- Strategisk forskning: Vad leder det till? Kyösti Husso ja Jyrki Hakapää 21.9.2021
- Utvärdering: mångvetenskaplig strategisk forskning stöder hela samhället, 14.6.2021
- Utvärderingsrapport: finansieringen av strategisk forskning har skapat mervärde för forskningen och samhället, 28.1.2021
- Vi står inför en övergripande utvärdering av forsknings- och interaktionsarbetet, Kyösti Husso 7.4.2020
- Spår efter resultaten från den strategiska forskningen, Jyrki Hakapää 22.8.2019
Mer information
- strateginentutkimus(at)aka.fi