En positiv evaluering kan også være meningsfuld

I artiklen Evaluering som rituel eller kritisk refleksion? stillede Annemette Digmann og Egon Petersen spørgsmål ved, om EVA’s evaluering er en egentlig kritisk evaluering. Evalueringen er ifølge artiklen overvejende en rituel refleksion og en legitimering af de eksisterende diplomuddannelser i ledelse. Kritikken begrunder de gennem en række kommentarer og spørgsmål, som EVA gerne vil svare på her.

Du kan læse den kritiske artikel her: Evaluering som rituel eller kritisk refleksion?

Evalueringen er ikke sat i gang for sin egen skyld

Vores evaluering er positiv over for ledernes vurdering af de to lederuddannelser på diplomniveau, som vi har i fokus, men rituel og blot en legitimering af uddannelserne er den ikke.

Når Digmann og Petersen skriver, at evalueringen overvejende har karakter af at være en rituel refleksion, forudsætter det, at evalueringen er sat i gang for sin egen skyld – begrebet rituel refleksion indebærer, at evalueringen er gennemført for at kunne tilfredsstille omgivelsernes krav om evaluering, men uden at der er en egentlig interesse i at følge op på evalueringen. Men evalueringen er ikke gennemført for sin egen skyld. Derimod er målet med den at give beslutningstagere, offentlige arbejdsgivere og udbydere af diplomuddannelserne et indblik i brugen af diplomuddannelserne i ledelse og et mere oplyst grundlag for at beslutte, om uddannelsesretten skal fortsætte. Evalueringens resultater kan altså have den konsekvens, at uddannelsesretten enten videreføres eller afskaffes.

Idet Digmann og Petersen betegner EVA’s evaluering som en legitimering af de eksisterende diplomlederuddannelsers praksis, forudsætter det tilsvarende, at resultaterne er givet på forhånd. Men resultatet af evalueringen kunne udmærket have været et andet. Fx at de offentlige ledere kun i begrænset omfang vurderede, at uddannelsen var anvendelig i deres daglige ledelsespraksis. Et sådan resultat ville selv sagt ikke være med til at legitimere diplomuddannelserne, tværtimod. Det, der gør, at evalueringen ikke foreslår store ændringer i lederuddannelserne, er altså evalueringens positive resultater.

Fokus på diplomuddannelse

Netop fordi formålet med evalueringen var at vurdere den indførte uddannelsesret, fokuserer evalueringen på de to lederuddannelser på diplomniveau, der var omfattet af uddannelsesretten, dvs. diplomuddannelsen i ledelse (DIL) og den offentlige lederuddannelse (DOL).

Digmann og Petersen kritiserer evalueringen for at underkende vigtigheden af andre lederudviklingsaktiviteter og for at se forskelsløst på de eksisterende lederuddannelser. Men her glemmer de at tage højde for evalueringens formål og grundlag. Når evalueringen alene fokuserer på de formelle diplomuddannelser, handler det fra vores side tale om at afgrænse evalueringens fokus i tråd med formålet.  Og når evalueringen ikke skelner mellem de to lederuddannelser (DIL og DOL), er det fordi, det endnu ikke var praktisk muligt, da vi gennemførte evalueringen. Antallet af kursister, der havde været gennem DOL, var på tidspunktet ikke stort nok til, at vi kunne sammenligne de to uddannelser.

Lederne som de bedste informanter – i denne evaluering

Evalueringen fokuserer alene på de offentlige lederes egen vurdering af lederuddannelsernes betydning. Digmann og Petersen stiller det kritiske spørgsmål, om ledernes egne oplevelser giver et dækkende billede af effekten af uddannelsesretten for organisationen som helhed?

Vi har vurderet, at det er lederne selv, der er de bedste informanter til at besvare de spørgsmål, som evalueringen har i fokus. Dvs. hvilken betydning uddannelserne har haft for ledernes egen praksis, og hvordan den læring, der finder sted i løbet af uddannelsesforløbet, omsættes og anvendes i en daglig ledelsespraksis. Vi har vurderet, at lederne selv er de bedste til at foretage disse vurderinger, fordi lederne mest præcist kan vurdere, hvordan indholdet af uddannelsesforløbet bliver brugt i deres daglige ledelsespraksis. Samtidig har rationalet også været, at hvis lederne ikke selv oplever, at uddannelserne har nogen nævneværdig betydning, så har uddannelsesforløbet nok heller ikke betydet det store for hele organisationen.

Ideelt set ville det være oplagt også at spørge medarbejdere og ledernes ledere om deres syn på uddannelsens betydning. Set fra en metodisk vinkel kan det imidlertid være vanskeligt for både medarbejdere og ledernes ledere at afgøre, om det var uddannelsesforløbet, der skabte en forandring i ledelsesstilen, eller om eventuelle forandringer i ledelsesstil skyldes andre faktorer, fx ændrede økonomiske rammer eller justering af praksis med afsæt i erfaringer. 

Evalueringen har dog ikke haft som ambition at afgøre, hvilken værdi uddannelserne har givet organisationen som helhed – selvom dette også kunne være spændende at afdække i en fremtidig evaluering.

Sammenhæng mellem diplomuddannelser og praksis

Digmann og Petersen rejser også spørgsmålet om, hvordan lederuddannelserne klarer den opgave, der ligger i at skabe en sammenhæng mellem det, lederne lærer på uddannelsen, og lederens eget arbejdsliv.

Digmann og Petersen sætter spørgsmålstegn ved, om lederne overhovedet har haft behov for at lære det, der bliver undervist i, og om kan de se nytten af det, der læres i forhold til deres arbejdssituation.

Transfer – altså det at overføre viden til praksis – er altid en udfordring, også på lederuddannelser på diplomniveau. I evalueringens design havde vi derfor netop fokus på i hvilken grad den tilegnede viden kunne omsættes til praksis.

Vores evaluering viser, at der er en god sammenhæng mellem undervisningen på lederuddannelserne og ledernes arbejdsliv.  98 % af lederne, der har taget (dele af) en diplomuddannelse, angiver, at uddannelsesforløbet i høj eller nogen grad har været relevant for deres daglige arbejde, mens 93 % af lederne angiver, at de i høj eller i nogen grad anvender det, de har lært i deres nuværende arbejde som ledere. Vi tillader os at tolke svarene som et udtryk for, at lederne oplever, at uddannelserne understøtter et behov, og at læring fra uddannelserne anvendes i den daglige ledelsespraksis. Denne tolkning understøttes af fokusgruppeinterview, hvor ledere fremhæver uddannelsernes betydning for, at de kan træde i karakter som ledere.

Om medarbejdere og lederes ledere vurderer det samme som de ledere, vi har spurgt, og hvordan uddannelser kan tilrettelægges, så sammenhængen mellem læring på uddannelsen og det daglige lederarbejde bliver endnu stærkere, er interessante spørgsmål, som kommende studier af lederudvikling og lederuddannelse må afdække.

Læs duplik fra august 2012

Her kan du læse Annemette Digmanns og Egon Petsersens duplik fra august 2012

Læs flere af Lederwebs artikler om evaluering:

Evaluering som kritisk eller rituel refleksion?

Evalueringsfeber