Impact har længe betydet at vente på årsresultaterne. Det er ved at ændre sig.
Evidens og impact er blandt de mest brugte begreber i uddannelsesverdenen lige nu, og kravene til at dokumentere effekten af indsatser bliver stadig større. Tidligere blev initiativer ofte vurderet på, hvor mange de nåede ud til, og hvor positivt deltagerne selv beskrev deres oplevelse. I dag er det sjældent nok. Skoler, fonde og kommuner efterspørger i stigende grad dokumentation for reelle adfærdsændringer og målbare resultater, ikke kun rækkevidde eller selvrapporteret udbytte.
Det afspejler sig i måden, indsatser finansieres og evalueres på. Effektinvesteringer knytter finansiering til målbare resultater, og resultatbaserede kontrakter udløser først betaling, når bestemte mål er nået. Fonde og investorer stiller samtidig skarpere spørgsmål til den samfundsmæssige værdi, deres investeringer faktisk skaber.
Derfor er det svært i uddannelse
Det er vanskeligt at dokumentere impact på mange områder, men i uddannelse er udfordringen særlig stor. De resultater, vi i sidste ende ønsker at påvirke, kan være flere år undervejs. En indsats for inklusion kan eksempelvis først vise sig i testresultater, fremmøde, trivsel eller elevernes videre uddannelsesforløb efter lang tid. Det gør det svært at vurdere indsatsens effekt, mens den stadig er i gang, og endnu sværere at bruge resultaterne til at justere kursen undervejs.
Samtidig er det vanskeligt at isolere effekten af en enkelt indsats. Selv relativt tidlige resultatmål som testscorer og fravær påvirkes af mange forhold på én gang: ændringer i undervisningsmaterialer, nye kommunale initiativer, efteruddannelse af lærere og ændrede fokusområder på skolen.
At afgøre, hvilken forskel ét initiativ har gjort, kræver ofte omfattende undersøgelser, som både tager tid og koster penge. I mellemtiden kan initiativet selv have ændret sig, ikke mindst i en digital verden, hvor praksis og løsninger udvikler sig hurtigt.
Behovet for solid evidens forsvinder ikke. Tværtimod er det afgørende at fastholde fokus på, om indsatser faktisk gør en forskel. Men ved siden af de langsigtede effektmål vokser behovet for også at forstå, hvad der sker undervejs.
Fra sene resultater til tidlige signaler
De første tegn på forandring opstår ofte i klasserummet længe før, de kan aflæses i de traditionelle resultatmål. Humør, engagement og ændringer i samspillet mellem elever kan udvikle sig over uger eller måneder, før de viser sig i fremmødestatistikker, testresultater eller årsrapporter.
Disse tidlige signaler er tæt på den daglige praksis og kan være umiddelbart anvendelige for de lærere, der står midt i indsatsen. De kan give anledning til dialog, justeringer og nye handlinger, mens der stadig er mulighed for at påvirke udviklingen. Men de kan ikke stå alene. Et positivt skift i klassens humør dokumenterer ikke i sig selv en forbedring af faglige resultater, ligesom det ikke fortæller en bevillingsgiver, hvilken langsigtet samfundsmæssig værdi en indsats har skabt.
Her spiller de velkendte resultatmål fortsat en vigtig rolle. Skoler og kommuner følger blandt andet fravær, testresultater, overgange til ungdomsuddannelser og medarbejderomsætning. De er ofte sammenlignelige på tværs af skoler og tæt knyttet til de mål, som skoleledelser, forvaltninger og ministerier allerede følger.
Det er derfor ikke et spørgsmål om at vælge mellem tidlige signaler og langsigtede resultater. Det handler om at forbinde dem, så vi både kan følge udviklingen, mens den sker, og undersøge, om den på længere sigt fører til de ønskede resultater.
Hvad det betyder for klassen
En klasse behøver ikke vente til skoleårets afslutning for at få en fornemmelse af, om en ny tilgang gør en forskel. Hvis humøret eller engagementet ændrer sig positivt undervejs, kan lærer og elever følge udviklingen sammen og bruge den som afsæt for dialog og refleksion, længe før ændringen eventuelt kan ses i de årlige resultatmål.
Det giver mere end information. Det kan også styrke motivationen til at fastholde en ny praksis. Når en klasse kan se tegn på, at en fælles indsats gør en forskel, får den noget konkret at bygge videre på: Vi prøvede noget nyt, og vi kan se tegn på, at det hjælper.
Det kan være vigtigt, når den første begejstring har lagt sig, og det kræver en vedvarende indsats at gøre nye tilgange til en del af hverdagen. Løbende feedback giver læreren og klassen mulighed for at undersøge, hvad der ser ud til at fungere, og justere praksis undervejs.
Hvad det betyder for skolen
Løbende signaler fra klasserummene kan give skolen et tættere indblik i, hvordan en indsats udfolder sig i praksis, og om de forhold, den søger at påvirke, ser ud til at ændre sig. Det giver mulighed for at undersøge udviklingen, mens indsatsen stadig er i gang, frem for først at evaluere den, når årets samlede resultater foreligger.
Det betyder ikke, at skolen automatisk kan konkludere, hvilken indsats der har skabt en bestemt forbedring. Tidlige signaler kan påvirkes af mange forhold og skal fortolkes i den sammenhæng, de opstår i. Men de kan hjælpe skolen med at stille bedre spørgsmål, identificere mønstre og afgøre, hvor der er grund til at undersøge en indsats nærmere.
Dermed får skoleledelsen et stærkere grundlag for at beslutte, hvad der skal fastholdes, justeres eller undersøges yderligere. Når de tidlige signaler kombineres med langsigtede resultatmål og relevant evaluering, bliver det lettere at opbygge viden om, hvilke tilgange der ser ud til at gøre en forskel, under hvilke omstændigheder og for hvilke klasser.
„Eleverne kan se, hvordan hele klassen har det, uden selv at blive udstillet. Og når de data viser et skift i klassens trivsel, der holder over tid – ikke bare en god dag – så er det det, vi kalder et Mønsterbrud: reel, vedvarende forandring. Nu søger vi at observere og måle det Mønsterbrud og dets sammenhæng med andre centrale indikatorer i skolen: fremmøde, adfærd og læringsresultater.‟
— Lea Crusey, tidligere Teach For America-lærer og co-founder af WOOF
Et Mønsterbrud opstår, når en klasse bryder med et vedvarende trivselsmønster og bevæger sig mod et højere niveau med højere rapporteret humør. Det defineres ved, at klassens løbende gennemsnit for klassehumør stiger 0,2 point over klassens hidtil laveste løbende gennemsnit to tjek-ind i træk. For læreren er det et tidligt tegn på en positiv udvikling, som kan blive synlig på få uger.
