13.09.2013 Views

Utvärdering som stöd för förändring av högre utbildning ...

Utvärdering som stöd för förändring av högre utbildning ...

Utvärdering som stöd för förändring av högre utbildning ...

SHOW MORE
SHOW LESS

You also want an ePaper? Increase the reach of your titles

YUMPU automatically turns print PDFs into web optimized ePapers that Google loves.

____________________________________________________________________________<br />

Studies in Educational Policy and Educational Philosophy<br />

Läsrum, Artikel 2007:1<br />

_______________________________________________________________<br />

Mona Fjellström<br />

Umeå universitet<br />

<strong>Utvärdering</strong> <strong>som</strong> <strong>stöd</strong> <strong>för</strong> <strong>för</strong>ändring <strong>av</strong> <strong>högre</strong> <strong>utbildning</strong><br />

- produktkontroll eller <strong>stöd</strong> <strong>för</strong> lärande<br />

Abstract<br />

The increasingly ritualized and instrumental evaluation of higher education,<br />

mainly initiated from above, has resulted in few considering what is needed if<br />

evaluations are truly to support the development of higher education or whose<br />

information need must be fulfilled in order to support change. From the complex<br />

context of higher education I argue for making evaluations a faculty responsibility.<br />

Change in higher education presupposes that evaluations answer<br />

crucial questions for those that can accomplish change. Making faculty responsible<br />

should both develop the teacher’s ability to work with educational development<br />

and to a greater extent enable education specific definitions of educational<br />

quality.<br />

Inledning<br />

Över hela världen ses utvärdering idag <strong>som</strong> en viktig garant <strong>för</strong> hög kvalitet<br />

och kontinuerlig utveckling <strong>av</strong> <strong>högre</strong> <strong>utbildning</strong>. De flesta länder har utvecklat<br />

någon form <strong>av</strong> kvalitetsgranskningsinstitut, antingen privata eller statliga, <strong>som</strong><br />

har till uppgift att regelbundet granska all <strong>högre</strong> <strong>utbildning</strong>. Syftet med granskningarna<br />

är att åstadkomma en informationsgrund <strong>för</strong> <strong>för</strong>ändring men det är<br />

viktigt att vara medveten om att utvärdering <strong>av</strong> kvalitet inte är detsamma <strong>som</strong><br />

<strong>för</strong>bättring <strong>av</strong> kvalitet. I Sverige har den generella och oproblematiserade tilltron<br />

till utvärdering <strong>som</strong> <strong>för</strong>ändringsdrivande instrument yttrat sig bland annat i<br />

att Högskoleverket (HSV) fått uppdraget att både kontrollera och stötta utvecklingen<br />

<strong>av</strong> <strong>högre</strong> <strong>utbildning</strong> genom program- och ämnesutvärderingar. Att<br />

HSV:s insatser bidrar till att bygga upp lärosätenas administrativa processer<br />

och ger viss insyn i högskolan är odiskutabelt (se t.ex. Harvey, 2006) men från<br />

detta är ett långt steg till en <strong>för</strong>ändrad <strong>utbildning</strong>spraktik. Kvalitet i högskolan<br />

handlar inte om uppbyggnad <strong>av</strong> byråkratiska system och resultaten <strong>av</strong> kvalitetsgranskningar<br />

utan om <strong>för</strong>mågan att beakta många olika intressenters (både<br />

inre och yttre) <strong>för</strong>väntningar och att internt kunna arbeta med <strong>utbildning</strong>s<strong>för</strong>ändring.<br />

Kvalitet i <strong>högre</strong> <strong>utbildning</strong> kan inte begränsas till ett fåtal generella<br />

aspekter giltiga över lång tid och definierade <strong>av</strong> ett fåtal aktörer, kvalitet utgörs<br />

<strong>av</strong> en mångfald <strong>utbildning</strong>sspecifika aspekter <strong>som</strong> ständigt om<strong>för</strong>handlas<br />

mellan många olika intressenter. På samma sätt <strong>som</strong> studenter idag utbildas <strong>för</strong><br />

att kunna problematisera och hantera ett alltmer komplext och <strong>för</strong>änderligt yrkesliv<br />

behöver de direkt <strong>utbildning</strong>sansvariga, de <strong>som</strong> skapar och genom<strong>för</strong> <strong>utbildning</strong>,<br />

utveckla sin <strong>för</strong>måga att själva arbeta med <strong>utbildning</strong>sutveckling.<br />

1


Uppgiften är att både <strong>för</strong>hålla sig till <strong>för</strong>ändring, inta en prövande hållning till<br />

den <strong>utbildning</strong> de arbetar med, samt att åstadkomma <strong>för</strong>ändring.<br />

Syftet med denna artikel är diskutera följande frågor: (i) vad behövs <strong>för</strong> att utvärdering<br />

skall kunna bidra till utvecklingen <strong>av</strong> <strong>högre</strong> <strong>utbildning</strong> och (ii) <strong>av</strong> och<br />

<strong>för</strong> vem skall sådana utvärderingar genom<strong>för</strong>as?<br />

<strong>Utvärdering</strong> - en del <strong>av</strong> den pedagogiska vardagen<br />

I boken Att utvärdera <strong>utbildning</strong>, Del 1, skrev Franke-Wikberg och Lundgren;<br />

”att utvärdera undervisning och <strong>utbildning</strong> har blivit en alltmer betydelsefull del <strong>av</strong><br />

den pedagogiska vardagen” (1980, <strong>för</strong>ord s 1) och ingen inom högskolan idag<br />

torde säga emot det påståendet. Sedan publiceringen <strong>av</strong> deras text har det på<br />

övergripande politisk nivå skrivits promemorior, offentliga utredningar, propositioner,<br />

<strong>för</strong>ordningar och en lag <strong>som</strong> berör utvärdering (ofta kopplat till begreppet<br />

kvalitetsutveckling) <strong>av</strong> <strong>högre</strong> <strong>utbildning</strong> 1 . Högskoleverket 2 har sedan<br />

mitten <strong>av</strong> 1990-talet fått alltmer omfattande uppdrag att granska <strong>högre</strong> <strong>utbildning</strong><br />

och det blir allt vanligare att våra högskole<strong>utbildning</strong>ar utvärderas <strong>av</strong><br />

olika internationella organ. Det har också tagits beslut om lokala utvärderingsstrategier<br />

på olika lärosäten, fakulteter, institutioner och enskilda <strong>utbildning</strong>sprogram.<br />

På lärosätena utvärderas kurser, program, lärosäten och tematiska<br />

frågor <strong>av</strong> olika slag. Ofta utvärderar även den enskilde läraren sina enskilda<br />

undervisningsmoment. En stor mängd ämnesexperter, programkommittéer,<br />

kursansvariga, lärare, studentkårer/-<strong>för</strong>eningar och studenter är aktiva i utvärderingsarbetet<br />

och studenterna deltar i en stor mängd utvärderingar under sin<br />

<strong>utbildning</strong>stid, allt oftare även efter <strong>utbildning</strong>en i alumnutvärderingar.<br />

Karlsson (1998) har beskrivit utvärdering <strong>som</strong>; ”en rationell handling <strong>som</strong> visar<br />

att man är beredd till omprövning <strong>av</strong> beslut, vill lära <strong>av</strong> misstag och åstadkomma<br />

<strong>för</strong>bättringar”. Innebörder <strong>som</strong> signalerar <strong>för</strong>nuft, reflektion, medinflytande,<br />

en prövande hållning, aktivitet och framåtsyftning. Detta stämmer<br />

väl överens med den <strong>för</strong>härskande synen på utvärdering <strong>som</strong> ett neutralt,<br />

rationellt och ”policyoptimistiskt” verktyg (Lindensjö & Lundgren, 1992).<br />

Genom att utgå från överenskomna kvaliteter och ställa rätt frågor får vi de<br />

rätta svaren och kan rätta vårt handlande efter det.<br />

Men utvärdering <strong>av</strong> <strong>utbildning</strong> har också innebörder <strong>av</strong> redovisningsansvar<br />

(accountability), styrning, byråkrati, produktivitet, maktutövning,<br />

standardiserade metoder, normativa kriterier, exkluderande <strong>av</strong> röster och brist<br />

på kontextanknytning främst främjande strategier <strong>som</strong> ”teach to the test” och<br />

”window dressing” (Segerholm, 2002; HSV 2002:20 R; Wahlén, 2004;<br />

Segerholm & Åström, 2004; Friedman & Johansson Dahre, 2004; Milberg,<br />

2006; Hall, 2006; Tholin, 2006; Hall, 2007). Dessa innebörder ger uttryck <strong>för</strong><br />

att det inte finns en enkel överenskommelse om vad <strong>som</strong> är kvalitet i <strong>högre</strong> <strong>utbildning</strong><br />

eller om vilka frågor <strong>som</strong> är relevanta att ställa. Inte heller är kopplingen<br />

mellan utvärderingsresultat och handling den rationellt <strong>för</strong>espeglade.<br />

Att innebörden är så mångfasetterad och motsägelsefull hänger bland annat<br />

samman med position och sammanhang - vem <strong>som</strong> ser på utvärderingen; om<br />

man är utvärderaren (eller den <strong>som</strong> beslutar om att utvärderingen skall genom-<br />

2


<strong>för</strong>as), den <strong>som</strong> deltar i utvärderingen <strong>som</strong> informationskälla, den <strong>som</strong> <strong>för</strong>väntas<br />

agera utifrån resultaten, den <strong>som</strong> har nytta <strong>av</strong> informationen <strong>som</strong> produceras,<br />

om man är en del <strong>av</strong> den verksamhet <strong>som</strong> blir utvärderad eller om man berörs<br />

<strong>av</strong> utvärderingen men inte får möjlighet att delta. Innebörden är färgad <strong>av</strong><br />

individuella såväl <strong>som</strong> kollektiva erfarenheter, kunskaper, värderingar och ett<br />

specifikt socialt sammanhang (Guba & Lincoln, 1989, s 38-45; Simons 1999)<br />

Att utvärdering <strong>av</strong> <strong>högre</strong> <strong>utbildning</strong> initieras och genom<strong>för</strong>s <strong>av</strong> så många olika<br />

aktörer och på så många nivåer innebär att utvärderingar genom<strong>för</strong>s med<br />

många olika syften och därmed tillvägagångssätt och resultat. Vanligt återkommande<br />

syften är <strong>stöd</strong> <strong>för</strong> utveckling (uttryckt <strong>som</strong> <strong>för</strong>bättrad eller hög kvalitet),<br />

kontroll, uppföljning, informationsspridning samt studentinflytande. I sin<br />

bok från 1980 beskrev Franke-Wikberg och Lundgren hur syftet styr såväl vad<br />

<strong>som</strong> granskas, hur utvärderingen genom<strong>för</strong>s <strong>som</strong> <strong>för</strong> vem den görs. De kunde<br />

dessutom, lik<strong>som</strong> Guba & Lincoln (1989), House (1993), Karlsson (1995) och<br />

Stufflebeam (1999) visa att olika utvärderingsmodeller och praktiker hänger<br />

samman med den underliggande synen på: vetenskap, verksamheten <strong>som</strong><br />

granskas, och hur man bedriver <strong>för</strong>ändring.<br />

<strong>Utvärdering</strong>smodeller – spår att välja<br />

Pedagogisk utvärdering definierades <strong>av</strong> Franke-Wikberg & Lundgren (1980, s<br />

10) <strong>som</strong>: ”Att värdera och uttala sig om resultatet <strong>av</strong> ett program <strong>för</strong> uppfostran<br />

eller undervisning”. Franke-Wikberg & Lundgren var vid denna tidpunkt delaktiga<br />

i den internationella formuleringen <strong>av</strong> en mer processinriktad och kvalitativ<br />

syn på utvärdering <strong>av</strong> <strong>utbildning</strong> och har lämnat betydande bidrag till den<br />

svenska utvärderingsforskningen och praktiken 3 . Definitionen kan läsas <strong>som</strong> en<br />

<strong>av</strong> många faser i ett fortgående samtal om utvärdering. Ansatser <strong>för</strong> värdering<br />

har kompletterats med ansatser <strong>för</strong> <strong>för</strong>ståelse och lärande, uttala sig om har<br />

vidgats till en inriktning mot dialog, fokuseringen på resultat har kompletterats<br />

med <strong>för</strong>utsättnings- och processbeskrivningar och det <strong>som</strong> studeras kan lika<br />

gärna vara <strong>för</strong>eställningar om till exempel <strong>utbildning</strong>, lärande eller kommande<br />

yrkeskr<strong>av</strong> <strong>som</strong> rationellt planerade program. Det <strong>som</strong> kvarstår någorlunda<br />

o<strong>för</strong>ändrat är att utvärderingen är inriktad på aktiviteter <strong>för</strong> uppfostran eller<br />

undervisning. Det <strong>som</strong> kommer att <strong>av</strong>göra vilka val <strong>som</strong> görs <strong>av</strong> alla de ovan<br />

uppräknade är ”beställarens” alternativt utvärderarens intentioner, kunskaper<br />

och värderingar i ett specifikt sammanhang. Franke-Wikberg & Lundgren<br />

(1980) lyfter också fram betydelsen <strong>av</strong> grundfrågorna; <strong>för</strong> vem och <strong>av</strong> vem, och<br />

hur svaren på dessa frågor påverkar en utvärdering. Av detta följer att det är<br />

ganska vanskligt om inte ogörligt att formulera en generell definition <strong>av</strong> utvärdering.<br />

Definitionen <strong>av</strong> utvärdering måste göras vid varje enskilt tillfälle och<br />

utgående från de syften och metoder <strong>som</strong> väljs (Guba & Lincoln,1989, s 21).<br />

Detta innebär i sin tur att en utvärdering kan genom<strong>för</strong>as <strong>för</strong> att stötta <strong>för</strong>ändring<br />

men den kan lika gärna, <strong>som</strong> innebörderna ovan visade, syfta till att kontrollera,<br />

styra, visa upp eller legitimera något.<br />

Den utvärderingspraktik vi ser i Sverige i dag är resultatet <strong>av</strong> en snart 150-årig<br />

praktik initierad <strong>av</strong> politiska eller överordnade administrativa/byråkratiska instanser,<br />

influerad <strong>av</strong> många olika vetenskapliga discipliner och såväl nationella<br />

<strong>som</strong> internationella erfarenheter. Från en start i folkskoleinspektörernas sum-<br />

3


mativa utvärdering <strong>av</strong> enskilda elevers kunskaper och färdigheter har utvärdering<br />

under 1900-talets senare hälft kommit att handla allt mer om systemutvärderingar<br />

<strong>av</strong> <strong>utbildning</strong>sprogram eller hela <strong>utbildning</strong>sinstitutioner. Samspelet<br />

mellan den politiska och den vetenskapliga sfären har präglat såväl synen<br />

på utvärdering <strong>som</strong> själva praktiken från en tid till en annan. En stark och<br />

grundläggande <strong>för</strong>eställning, inte minst bland ledningsansvariga, har hela tiden<br />

varit att utvärdering är ett redskap <strong>för</strong> att åstadkomma <strong>för</strong>ändring, på individ-<br />

eller systemnivå. Detta trots att det idag finns åtskillig dokumenterad kunskap<br />

<strong>som</strong> visar att <strong>för</strong>ändring <strong>av</strong> <strong>utbildning</strong> inte kan <strong>för</strong>klaras med enkla input-outputmodeller<br />

(se t.ex. Sannerstedt, 1992).<br />

Även om man kan beskriva utvecklingen <strong>av</strong> utvärderingspraktiken <strong>som</strong> en<br />

fortgående problematisering och kunskapsuppbyggnad (Franke-Wikberg &<br />

Lundgren, 1980; Guba & Lincoln, 1989; Karlsson, 1995) så kan man också se<br />

att så kallat ”tidiga generationers” (Guba & Lincoln, 1989) synsätt och utvärderingsmodeller<br />

idag lever parallellt och till och med sammanvävs med ”senare<br />

generationers” modeller. Frågan är om man verkligen kan beskriva det <strong>som</strong> en<br />

stegvis, logisk utveckling eller om det mer handlar om periodvis uppblommande<br />

varianter knutna till tid, plats och samhälleliga <strong>för</strong>eställningar/värderingar<br />

(Franke-Wikberg & Johansson, 1975; Karlsson, 2003)<br />

alternativt ett offentligt och vetenskapligt samtal om utvärdering <strong>som</strong> har begränsad<br />

betydelse <strong>för</strong> praktiken (Khakee, A. 2003)? I sin <strong>av</strong>handling från 1996<br />

öppnar Karlsson <strong>för</strong> en alternativ <strong>för</strong>ståelse <strong>av</strong> ”utvecklingen” genom att beskriva<br />

både den kronologiska utvecklingen <strong>av</strong> utvärderingspraktiken i Sverige<br />

och USA samt det han kallar utvecklingslinjer (Karlsson, 1995, s 54-68) 4 .<br />

Dessa utvecklingslinjer, <strong>som</strong> innehållsligt kan beskrivas med hjälp <strong>av</strong> Franke-<br />

Wikberg och Lundgrens (1980) grundfrågor: var<strong>för</strong>, vad, <strong>för</strong> vem, <strong>av</strong> vem, hur<br />

och när, visar på växelvisa, överlappade och sammanflätade <strong>för</strong>ändringar. Förändringar<br />

<strong>som</strong> speglar <strong>för</strong>ändringar i <strong>för</strong>hållandet mellan de politiska systemen<br />

och den <strong>högre</strong> <strong>utbildning</strong>en men också den ökande betydelsen <strong>av</strong> ytterligare en<br />

grupp aktörer; intressenterna i en vidare mening.<br />

I de kategoriseringar <strong>som</strong> är gjorda <strong>av</strong> olika utvärderingsmodeller kan man<br />

ändå urskilja två huvudspår: de produktinriktade-normativa och de <strong>för</strong>ståelseinriktade-intuitiva<br />

modellerna. I den fortsatta presentationen kommer jag att<br />

beskriva dem <strong>som</strong> två tydligt skilda kategorier. Det är dock viktigt att poängtera<br />

att det i praktiken ofta genom<strong>för</strong>s utvärderingar <strong>som</strong> är en mer eller mindre<br />

medveten mix <strong>av</strong> flera olika modeller och kategorier. Praktiken kan alltså i<br />

varje enskilt fall ses <strong>som</strong> ett spår <strong>som</strong> ritas genom att de olika linjerna/frågorna<br />

var<strong>för</strong>, vad, <strong>för</strong> vem, <strong>av</strong> vem, hur och när sammanfogas på olika sätt.<br />

Det produktinriktade-normativa spåret<br />

De produktinriktade-normativa utvärderingsmodellerna är fram<strong>för</strong>allt inriktade<br />

på att bedöma resultat, effektivitet eller nytta och bedömningen görs mot kriterier<br />

<strong>som</strong> anses allmänt vedertagna eller vetenskapligt giltiga. Syftet med dessa<br />

modeller är att kontrollera och styra verksamheter genom att erbjuda beslutsfattare<br />

objektiva underlag <strong>för</strong> beslut. Beslutsunderlagen består <strong>av</strong> jäm<strong>för</strong>elser<br />

mellan olika system, mellan resultat och kostnader <strong>för</strong> olika verksamheter eller<br />

mellan uppsatta mål och faktiska resultat. Huvudsakligen används kvantitativa<br />

4


ansatser och utvärderaren i dessa modeller är en eller flera externa personer<br />

(utvärderingsexperter) <strong>som</strong> anses besitta den rätta tekniska kompetensen <strong>för</strong> att<br />

kunna genom<strong>för</strong>a de mätningar <strong>som</strong> behövs. Dessa modeller används fram<strong>för</strong>allt<br />

<strong>för</strong> summativa utvärderingar, vilket innebär att man kontrollerar resultaten i<br />

slutet <strong>av</strong> en period eller då målen skall vara uppnådda. Det värderande omdömet<br />

är inte sällan utformat <strong>som</strong> en rankinglista eller en betygsskala och kan<br />

också vara kopplat till olika former <strong>av</strong> sanktionssystem.<br />

Produktinriktade-normativa modeller utgår från en teknisk-instrumentell rationalitet<br />

i synen på det <strong>som</strong> utvärderas och hur resultaten <strong>av</strong> utvärderingen<br />

kommer till användning. Vetenskapligt hämtar de främst sin inspiration från<br />

positivistisk teori och kvantitativ metodik. Politiskt är de en del <strong>av</strong> en administrativ-byråkratisk<br />

styrning och del <strong>av</strong> en rationellt planerad ingenjörskonst<br />

<strong>för</strong> samhällets bästa. Med <strong>stöd</strong> <strong>av</strong> vetenskapligt framtagna objektiva data får<br />

överordnade beslutsfattare insyn och möjlighet att ta beslut <strong>som</strong> via den befintliga<br />

organisationsstrukturen och beslutsordningen <strong>för</strong>ändrar verksamheten i<br />

önskad riktning. Förhållandet mellan utvärderingsbeställare och utvärderare<br />

betraktas <strong>som</strong> okomplicerat där beställaren beslutar om frågorna och utvärderaren<br />

med sin tekniska metodkompetens levererar svaren (Franke-Wikberg &<br />

Lundgren, 1980).<br />

Fram till 1970-talet var det framallt dessa modeller <strong>som</strong> låg till grund <strong>för</strong> styrning<br />

och planering <strong>av</strong> <strong>utbildning</strong>. Med <strong>stöd</strong> <strong>av</strong> resultat från individuella kunskapsprov<br />

eller betyg samt genomströmningsstatistik togs beslut om dimensionering,<br />

inriktning, tillträde och innehåll. I Sverige har tillämpningen <strong>av</strong> dessa<br />

modeller, ikraft <strong>av</strong> en stark demokratisk tradition <strong>av</strong> dialog <strong>för</strong>e beslut (”den<br />

svenska modellen”), kombinerats med olika former <strong>av</strong> intressent<strong>för</strong>faranden<br />

<strong>för</strong> att fånga upp berörda aktörers <strong>för</strong>eställningar om önskvärda mål (Lindberg<br />

& Wikander, 1991). Metodval, insamlad information och utvärderarroll har<br />

dock följt spåret med produktinriktade-normativa modeller.<br />

Inom tillverkningsindustrin är tillämpningen <strong>av</strong> produktinriktade-normativa<br />

modeller tydligt kopplat till ledarskap och styrning och etablerat under benämningen<br />

scientific management. Denna idé om en vetenskapligt grundad ledning<br />

<strong>av</strong> <strong>för</strong>etag är i sin tur grunden <strong>för</strong> olika kvalitetssäkringssystem (exempelvis<br />

Total Quality Management, ISO 9000 och Utmärkelsen Svensk Kvalitet) <strong>som</strong><br />

under inflytandet <strong>av</strong> New Public Management under 1990-talet språkligt även<br />

blivit alltmer vanligt inom utvärdering <strong>av</strong> <strong>utbildning</strong> (se t.ex Dahlberg m fl,<br />

2001). Att ord <strong>som</strong> kvalitetssäkringssystem syns allt oftare kopplat till <strong>högre</strong><br />

<strong>utbildning</strong> kan ses <strong>som</strong> ett led i utvecklingen <strong>av</strong> en starkare administrativ-byråkratisk<br />

kontroll över en decentraliserad <strong>utbildning</strong>ssfär <strong>som</strong> blivit alltmer<br />

kostsam.<br />

Vid utvärdering <strong>av</strong> <strong>utbildning</strong> med en produktinriktad-normativ modell ses <strong>utbildning</strong><br />

<strong>som</strong> en fastställd produkt i överensstämmelse med vedertagna intressen,<br />

ett instrument <strong>som</strong> kombinerar de administrativa och pedagogiska delarna<br />

<strong>för</strong> att forma individer och samhälle i viss riktning (Levine, 2002). Med<br />

en <strong>utbildning</strong>steknologisk planeringsmodell kan man via en rationell process<br />

inkluderande analys, mål, genom<strong>för</strong>ande och utvärdering, styra <strong>utbildning</strong>s-<br />

5


system. De viktiga frågorna är om <strong>utbildning</strong>en svarar upp mot uppsatta mål<br />

eller hur den står sig i jäm<strong>för</strong>else med andra <strong>utbildning</strong>ar.<br />

Kritiken <strong>av</strong> de produktinriktade-normativa utvärderingsmodellerna kan sammanfattas<br />

under tre huvudteman: (i) allt<strong>för</strong> inriktade på styrning/ledning och<br />

därmed okänsligt <strong>för</strong> alla processer <strong>som</strong> ej är planerade eller organiserade, (ii)<br />

en o<strong>för</strong>måga att beakta värdepluralism vilket i praktiken innebär att aktörer<br />

med makt får tolknings<strong>för</strong>eträde samtidigt <strong>som</strong> många andra aktörers synpunkter/värderingar<br />

ignoreras helt, och (iii) en övertro på en enda, <strong>av</strong>kontextualiserad<br />

kvantitativ, metod (Guba & Lincoln, 1989, s 31-38).<br />

Det <strong>för</strong>ståelseinriktade-intuitiva spåret<br />

Spåret med <strong>för</strong>ståelseinriktade-intuitiva utvärderingsmodeller utgår från ståndpunkten<br />

att bedömningen <strong>av</strong> något påverkas <strong>av</strong> det sammanhang det ingår i,<br />

samt att det finns olika <strong>för</strong>ståelser och värderingar <strong>av</strong> det <strong>som</strong> bedöms (Guba &<br />

Lincoln, 1981, s 39-52). Syftet med dessa modeller är att synligöra och <strong>för</strong>stå<br />

fenomen/sammanhang <strong>för</strong> att möjliggöra <strong>för</strong>ändring. Fokus ligger på att beskriva<br />

processer och används följaktligen främst <strong>för</strong> formativa utvärderingar.<br />

<strong>Utvärdering</strong>sresultaten uppfattas inte <strong>som</strong> direkt instrumentellt användbara<br />

utan <strong>som</strong> en grund <strong>för</strong> diskussioner och tolkningar.<br />

I dessa utvärderingsmodeller är varken bedömningskriterier eller utvärderingsmetoder<br />

på <strong>för</strong>hand givna utan behöver formuleras på nytt vid varje utvärdering.<br />

Kriterierna kan formuleras antingen genom att utvärderaren <strong>som</strong> en<br />

expert på området formulerar en <strong>för</strong>ståelseram med kriterier <strong>för</strong> det <strong>som</strong> skall<br />

bedömas eller genom att olika intressenter får möjlighet att påverka vilka kriterier<br />

<strong>som</strong> är viktiga att bedöma – där<strong>av</strong> inslaget <strong>av</strong> så kallad intuitiv bedömning.<br />

Såväl kvantitativ <strong>som</strong> kvalitativ metod används beroende på vilka kriterier <strong>som</strong><br />

visar sig angelägna men modellerna lägger en stor tonvikt vid kvalitativa data<br />

<strong>som</strong> kan ge så fylliga beskrivningar <strong>som</strong> möjligt. Resultaten, <strong>som</strong> består <strong>av</strong> beskrivningar<br />

eventuellt kompletterade med bedömningar och <strong>för</strong>slag till åtgärder,<br />

legitimeras antingen genom utvärderingsexpertens kunskaper och noggranna<br />

redogörelse <strong>för</strong> utgångspunkter och tillvägagångssätt eller genom de<br />

medverkande intressenternas legitima kunskaper och synpunkter. Utvärderaren<br />

kan i dessa modeller ha många olika roller, <strong>som</strong> till exempel expert, kritisk vän<br />

(peer), domare (mellan olika aktörers synsätt) eller <strong>som</strong> processledare utan någon<br />

bedömande funktion.<br />

Förståelseinriktade-intuitiva modeller utgår från en kommunikativ-kritisk rationalitet<br />

(Lauvås & Handal, 2001) där både mål, processer och resultat kan<br />

granskas, tolkas och problematiseras. Huvudsakligen hämtas den vetenskapliga<br />

inspirationen från hermeneutiska, konstruktivistiska eller postmoderna teorier<br />

och metoder. Politiskt utgör de en del <strong>av</strong> en diskurs om individens rätt till inflytande<br />

över sina liv, möjligheten till en jämbördig dialog mellan olika intressenter<br />

och en liberal demokrati. Olika grupper <strong>av</strong> aktörer, till exempel<br />

medarbetare, brukare, <strong>av</strong>nämare, beslutsfattare, intressentorganisationer och<br />

media-aktörer, ges möjlighet att delta i både utvärderingsprocess och bedömning<br />

<strong>av</strong> resultat. Förändring genereras både genom den deltagaraktiva pro-<br />

6


cessen och <strong>som</strong> resultat <strong>av</strong> de slutliga bedömningarna samt på flera nivåer <strong>av</strong><br />

många olika aktörer.<br />

Att utvärdera <strong>utbildning</strong> med en <strong>för</strong>ståelseinriktad-intuitiv ansats innebär att<br />

<strong>utbildning</strong> betraktas <strong>som</strong> en dynamisk ständigt pågående process <strong>av</strong> personlig<br />

och kulturell utveckling (Levine, 2002) <strong>som</strong> påverkas/skapas <strong>av</strong> flera aktörer<br />

och ingående ett visst sammanhang. Franke-Wikberg & Lundgren konstaterade<br />

dock att både de produktinriktade-normativa och de <strong>för</strong>ståselseinriktade-intutitiva<br />

utvärderingsmodellerna oftast ”accepterar <strong>utbildning</strong>s- och samhällssystemet<br />

<strong>som</strong> sådant” (1980, s 118).<br />

Kritiken <strong>av</strong> de <strong>för</strong>ståelseinriktad-intuitiva modellerna fokuserar; (i) svårigheten<br />

i att identifiera vilka intressenter och individer <strong>som</strong> skall medverka och hur<br />

dessa kan ses <strong>som</strong> något annat än enskilda individer, (ii) att modellerna blundar<br />

<strong>för</strong> skillnader i makt/språk mellan olika aktörer genom att dialogen beskrivs<br />

<strong>som</strong> jämbördig utan att vara det i reell (kompetens, språk, makt, mm) mening,<br />

(iii) utvärderarens oklara roll samt (iv) att det är ett oklart samband mellan processen<br />

och hur den i sin tur leder till <strong>för</strong>ändring.<br />

Spåret <strong>för</strong> utvärdering <strong>av</strong> <strong>högre</strong> <strong>utbildning</strong> i Sverige idag<br />

I Sverige har utvärderingar <strong>av</strong> <strong>högre</strong> <strong>utbildning</strong> <strong>för</strong>t en ganska osynlig tillvaro<br />

fram till nittio-talets decentralisering och omvandlingen <strong>av</strong> lärosätena till myndigheter.<br />

Förändringarna <strong>som</strong> innebar en större självständighet <strong>för</strong> lärosätena<br />

g<strong>av</strong> också upphov till ökad konkurrens och ett kr<strong>av</strong> på marknadsanpassning.<br />

Statens omfattande byråkrati <strong>för</strong> direkt styrning omvandlades i rask takt till en<br />

motsvarande byråkrati <strong>för</strong> utvärderingsverksamhet med den uttryckta ambitionen<br />

att genom myndighetsstyrda utvärderingar stötta det lokala utvecklingsarbetet.<br />

Förutom den direkta kontrollverksamheten återfinns syftet att Högskoleverkets<br />

granskningar skall bidra till att implementera en systematiskt utvärderande<br />

och kvalitetsutvecklande kultur inom högskolan. Granskningarna<br />

skall bidra till att höja de <strong>utbildning</strong>sansvarigas kompetens i såväl pedagogiskt<br />

utvecklingsarbete <strong>som</strong> att kunna bedöma <strong>utbildning</strong>skvalitet (Nilsson &<br />

Wahlén, 2000).<br />

Den valda utvärderingsstrategin är på papperet en balansgång mellan det produktinriktade-normativa<br />

spåret och det <strong>för</strong>ståelseinriktade-intuitiva men i<br />

praktiken är processens alla steg noggrant reglerade <strong>av</strong> HSV till både innehåll,<br />

form och aktörer. Förfarandet <strong>som</strong> skall efterlikna granskningen <strong>av</strong> vetenskaplig<br />

verksamhet är etiketterat <strong>som</strong> en självvärdering med peer-granskning men<br />

har få liknelser med en professions-driven nyfikenhet, dialog mellan jämbördiga<br />

eller pedagogiskt <strong>för</strong>ändringsarbete. Kritiken <strong>av</strong> granskningssystemet,<br />

<strong>som</strong> visar på upplevelser <strong>av</strong> byråkrati, maktutövning, standardiserade metoder,<br />

normativa kriterier, exkluderande <strong>av</strong> röster och brist på kontextanknytning<br />

främst främjande strategier <strong>som</strong> ”teach to the test” och ”window dressing”<br />

(Segerholm, 2002; HSV 2002:20 R; Wahlén, 2004; Segerholm & Åström,<br />

2004; Friedman & Johansson Dahre, 2004; Milberg, 2006; Hall, 2006; Tholin,<br />

2006; Hall, 2007) belyser utvärderingarnas produktinriktade-normativa inriktning<br />

och problemet med att använda sådana granskningar <strong>som</strong> <strong>stöd</strong> <strong>för</strong> <strong>för</strong>änd-<br />

7


ing. Kritiken belyser med skärpa skillnaden mellan utvärdering <strong>av</strong> kvalitet och<br />

<strong>för</strong>ändring <strong>av</strong> kvalitet (Rolf, Ekstedt & Barnett, 1993, s 178-196).<br />

Det HSV gör är att granska och uttala sig om kvaliteten i vissa utvalda kriterier<br />

men steget från detta till att stötta <strong>för</strong>ändring <strong>av</strong> <strong>högre</strong> <strong>utbildning</strong> är långt.<br />

Segerholm (2002) och Segerholm & Åström (2004) har beskrivit hur det utan<strong>för</strong><br />

den direkt berörda gruppen <strong>som</strong> skriver självvärderingen och träffar HSV:s<br />

granskargrupp är få <strong>som</strong> tar del <strong>av</strong> utvärderingsmaterialet (självvärdering och<br />

slutrapport) och ännu färre <strong>som</strong>, med <strong>stöd</strong> <strong>av</strong> utvärderingsrapporten, utvecklar<br />

sin undervisning – alltså det <strong>som</strong> studenterna möter. En inte ovanlig erfarenhet/reflektion<br />

är dessutom att den ”likar granskar likar”-utformade granskningen<br />

utmynnar i ett - jaha. Resultaten presenterar övervägande redan välkänd<br />

kunskap i en begränsad krets <strong>av</strong> aktörer (Lindberg & Wikander, 1991; Tholin,<br />

2006). Intresset fokuseras i enlighet med det produktinriktade-normativa spåret<br />

kring huruvida <strong>utbildning</strong>sprogrammet klarat sig bra, att jäm<strong>för</strong>a med ”fått<br />

godkänt på tentamen”. En spegling <strong>av</strong> detta kan man se i både universitetens<br />

och medias rapportering <strong>av</strong> granskningarna. En vanlig rubrik är:<br />

”Ämne/Program X får godkänt/gott betyg, alternativt underkänt/underbetyg”.<br />

Bilden <strong>som</strong> framtonar är utvärderingar <strong>som</strong> styrs uppifrån/utifrån (Barnett,<br />

1994) och <strong>som</strong> inte utgår från de <strong>utbildning</strong>sansvarigas specifika informationsbehov<br />

eller de faktiska <strong>för</strong>utsättningarna <strong>för</strong> att bedriva <strong>för</strong>ändring <strong>av</strong> <strong>utbildning</strong>.<br />

Faktum är att vi, trots det omfattande utvärderandet, fortfarande har<br />

mycket begränsad kunskap om vad <strong>som</strong> är god kvalitet i de många olika högskole<strong>utbildning</strong>arna<br />

eller hur utvärderingsverksamhet kan stötta <strong>för</strong>ändring <strong>av</strong><br />

<strong>högre</strong> <strong>utbildning</strong>. En process <strong>som</strong> syftar till att <strong>för</strong>ändra (<strong>för</strong>bättra?) kvaliteten i<br />

<strong>högre</strong> <strong>utbildning</strong> måste utgå från <strong>för</strong>utsättningarna <strong>för</strong> den pedagogiska verksamheten<br />

och dess specifika, och mycket varierande sammanhang.<br />

Högre <strong>utbildning</strong> i en superkomplex värld<br />

Sedan andra världskriget har de västeuropeiska, däribland de svenska, universiteten<br />

målmedvetet styrts <strong>för</strong> att utveckla idén om välfärdsstaten och kunskapssamhället<br />

i sina respektive länder (Bauer m fl, 1999, Barnett, 2000,<br />

Kwiek, 2005, Trowler, 1998). Den nationella kontexten påverkade inledningsvis<br />

utvecklingen och <strong>för</strong> Sveriges del innebar det att <strong>för</strong>ändringarna <strong>av</strong> <strong>högre</strong><br />

<strong>utbildning</strong> utformades i sam<strong>för</strong>stånd med universiteten. Trots att en del <strong>för</strong>ändrings<strong>för</strong>slag<br />

<strong>för</strong>anledde vissa protester från akademin fanns det ett tydligt socialt<br />

kontrakt mellan staten och universiteten.<br />

Relations between the academic oligarchy and leading politicians were cordial as<br />

they appeared to work hand in hand towards a common goal. (Bauer m.fl, 1999, s<br />

47).<br />

I några decennier <strong>av</strong>sattes näst intill obegränsade resurser. Med målet att utveckla<br />

befolkningens kunskaper <strong>för</strong> skapandet <strong>av</strong> ett nytt samhälle och accelererande<br />

välstånd var all ökning <strong>av</strong> godo: fler studenter, fler <strong>utbildning</strong>sprogram/kurser,<br />

nya pedagogiska tekniker, fler institutioner, fler lärare och mer<br />

undervisning. När denna fria tillväxt inte resulterade i den utveckling <strong>som</strong> var<br />

<strong>för</strong>utspådd kom staten att alltmer reglera <strong>för</strong>utsättningarna och målen <strong>för</strong> ex-<br />

8


pansionen. Stora <strong>för</strong>ändringar genom<strong>för</strong>des <strong>av</strong> universitetens struktur och<br />

innehåll. Beslutsstrukturen såväl inom <strong>som</strong> utan<strong>för</strong> universiteten <strong>för</strong>ändrades.<br />

Från att ha varit en renodlat kollegial affär blev beslutsfattandet inom <strong>högre</strong> <strong>utbildning</strong><br />

en arena <strong>för</strong> dialog och sam<strong>för</strong>ståndslösningar mellan lärare, studenter<br />

och näringslivs<strong>för</strong>eträdare. I fältet mellan universiteten och staten skapades allt<br />

efterhand nya medierande och beslutande instanser 5 .<br />

Vid den tid då Franke-Wikberg & Lundgren (1980) skrev sin ovan nämnda bok<br />

om pedagogisk utvärdering fanns en växande kritik kring det centralstyrda <strong>utbildning</strong>ssystemets<br />

samhällsnytta - en legitimitetskris <strong>som</strong> bland annat skulle<br />

lösas med att göra högskolans verksamhet mer genomskinlig (UPU 1970, Prop<br />

1988/89:65). Perioden <strong>av</strong> centralisering efterträddes <strong>av</strong> decentralisering och<br />

alltmer ökande kr<strong>av</strong> på högskolorna att själva driva och ansvara <strong>för</strong> verksamhetens<br />

”kvalitetsutveckling”. Kr<strong>av</strong>en på kvalitetsutveckling åtföljdes <strong>av</strong> kr<strong>av</strong><br />

på ökad produktivitet, internationalisering, konkurrens, marknadsanpassning,<br />

profilering och marknads<strong>för</strong>ing samtidigt med ansvaret <strong>för</strong> att organisatoriskt<br />

och personellt på bästa sätt använda en snabbt minskande statlig grundbudget.<br />

Högskolans uppdrag var att inte längre tillfredställa enbart nationella politiska<br />

behov utan att identifiera nya kunskap- och <strong>utbildning</strong>s-”marknader” samt att<br />

professionellt <strong>för</strong>hålla sig till alla de aktörer <strong>som</strong> är betydelse <strong>för</strong> <strong>utbildning</strong>arnas<br />

framgång.<br />

…the processes of globalization disentangle the university from the state, turn the<br />

university potentially into a major contributor to global economic competition and<br />

increasingly impose on it corporate models of organisation (Kwiek, 2005, s 333)<br />

Samtidigt <strong>som</strong> denna utveckling verkade ge tillbaka inflytande till akademikerna<br />

6 innebar den kr<strong>av</strong> på att överblicka och agera på arenor <strong>som</strong> inte var deras<br />

traditionella arenor. Dessa <strong>för</strong>ändringar <strong>av</strong> <strong>för</strong>utsättningarna <strong>för</strong> den <strong>högre</strong><br />

<strong>utbildning</strong>en, <strong>som</strong> skett i stora delar <strong>av</strong> västvärlden (om än i varierande takt och<br />

delvis med olika <strong>för</strong>tecken), har sin grund i övergripande <strong>för</strong>ändringar <strong>av</strong> samhället,<br />

nya kunskaper, och <strong>för</strong>eställningar om <strong>högre</strong> <strong>utbildning</strong>. Förändringarna,<br />

<strong>som</strong> är ett resultat <strong>av</strong> både politiska mål, kunskapsutvecklingen och samhällets/arbetslivets<br />

alltmer diversifierade <strong>utbildning</strong>sbehov, har inneburit både<br />

mass<strong>utbildning</strong> samt en tillväxt med fragmentisering <strong>av</strong> <strong>högre</strong> <strong>utbildning</strong><br />

(Trowler, 1998). Många nya aktörer påverkar <strong>för</strong>utsättningarna <strong>för</strong> <strong>högre</strong> <strong>utbildning</strong><br />

genom sin syn på, eller sitt bidrag till högskolan och följaktligen blir<br />

det viktigt med omvärldsbevakning och en närmare dialog med de intressenter<br />

<strong>som</strong> direkt påverkar den egna verksamheten.<br />

Att högskolans i allt <strong>högre</strong> grad blivit beroende <strong>av</strong> en mångfald ”yttre” intressenter<br />

<strong>för</strong> sin framgång får konsekvenser <strong>för</strong> de <strong>utbildning</strong>sansvariga lärarna. I<br />

alla tider har de <strong>som</strong> utformar och genom<strong>för</strong> <strong>högre</strong> <strong>utbildning</strong> haft en hög grad<br />

<strong>av</strong> professionell autonomi kopplad till högskolans ansvar <strong>för</strong> kunskapsbildandet.<br />

Utgångspunkten är att lärarna, i kraft <strong>av</strong> sin ämneskompetens, är bäst<br />

skickade att välja ut relevant ämnesinnehåll och lämpliga undervisningsmetoder.<br />

På detta sätt har <strong>utbildning</strong>sverksamheten kommit att formas <strong>av</strong><br />

forskningsverksamheten där varje ämne bidrar med sina <strong>av</strong>gränsade spetskunskaper.<br />

Den starka ämnesidentiteten får dock konsekvenser <strong>för</strong> en alltmer<br />

komplex och <strong>för</strong>änderlig <strong>högre</strong> <strong>utbildning</strong>. Becher & Trowler (2001) har visat<br />

9


att akademiker upplever och agerar tydligt varierade identiteter (tribes). Att<br />

vara lärare i matematik upplevs, och uttrycks inte, <strong>som</strong> detsamma <strong>som</strong> att vara<br />

lärare i sjukgymnastik. Grunden <strong>för</strong> detta är <strong>för</strong>eställningar om det egna ämnet,<br />

ämnets betydelse i större sammanhang samt den kultur <strong>som</strong> utvecklats i den<br />

grupp där man är verksam. Trowler beskriver det <strong>som</strong> att: ”Academics position<br />

themselves against a ‘story’ about their disciplinary culture” (1998, s 64).<br />

Liedman & Olausson har använt termen ”fryst ideologi” (1988, s 20-21).<br />

Dessa ämnesspecifika kulturer får stor betydelse <strong>för</strong> program<strong>utbildning</strong>ar där<br />

många olika ämnen och därmed identiteter skall samverka. För de programkommittéer<br />

<strong>som</strong> ansvarar <strong>för</strong> olika <strong>utbildning</strong>sprogram innebär de olika kulturerna<br />

att det i praktiken saknas en gemensam grund <strong>för</strong> hur man skall betrakta<br />

omgivningens kr<strong>av</strong> och vilka målsättningar <strong>som</strong> är relevanta <strong>för</strong> <strong>utbildning</strong>en.<br />

Det är inte ovanligt att man saknar ett gemensamt språk <strong>för</strong> lärande och undervisning,<br />

och dessutom har olika <strong>utbildning</strong>skulturer och organisationer. Inom<br />

varje ämneskultur verkar man enligt en övertygelse skapad inom ämnet och<br />

inte inom, eller <strong>för</strong>, den kanske yrkesspecifika <strong>utbildning</strong> man medverkar i. För<br />

att åstadkomma önskvärd och systematisk <strong>för</strong>ändring behöver någon form <strong>av</strong><br />

gemensam <strong>för</strong>ståelse åstadkommas. I en marknads- och konkurrensutsatt högskoleverklighet<br />

är ämneskompetensen inte tillräcklig <strong>som</strong> grund <strong>för</strong> <strong>utbildning</strong>sansvar.<br />

Till den måste fogas en <strong>för</strong>måga att fånga upp och tolka ett brett<br />

spektrum <strong>av</strong> inre och yttre signaler, att kontinuerligt följa upp och utvärdera<br />

samt att kunna bedriva <strong>utbildning</strong>sutveckling i samarbete med många olika<br />

aktörer. Den professionella lärarautonomin behöver helt enkelt utvidgas utan<strong>för</strong><br />

ramen <strong>av</strong> forskarinriktad ämnesidentitet till att bli en mer specifik <strong>utbildning</strong>sprofessionell<br />

identitet.<br />

Inom loppet <strong>av</strong> några decennier har den <strong>högre</strong> <strong>utbildning</strong>ens ”landskap”<br />

(Trowler, 1998, s 30) <strong>för</strong>ändrats <strong>av</strong>sevärt och inte på något sätt i en entydig<br />

eller uppenbart rationell riktning. Det starka kontraktet från efterkrigstiden<br />

mellan universiteten och nationalstaten har ersatts <strong>av</strong> en glokal kontext och behovet<br />

att sluta kontrakt med en mångfald aktörer både i den omedelbara närheten<br />

och på den globala arenan. De beskrivna faktorerna bidrar, genom att<br />

omfatta både yttre och inre sammanhang, till det Barnett beskrivit <strong>som</strong> en<br />

superkomplex värld där universiteten är en del.<br />

In short, professional life is increasingly becoming a matter not just of handling<br />

overwhelming data and theories within a given frame of reference (a situation of<br />

complexity) but also a matter of handling multiple frames of understanding, of<br />

action and self-identity. The fundamental frameworks by which we might understand<br />

the world are multiplying and are often in conflict (Barnett, 2000, s 6)<br />

Superkomplexiteten ger en upplevelse <strong>av</strong> osäkerhet, o<strong>för</strong>utsägbarhet, <strong>för</strong>änderlighet<br />

och ifrågasättande hos personer både inom och utom högskolan,<br />

sammantaget en stor utmaning <strong>för</strong> dem <strong>som</strong> ansvarar <strong>för</strong>, och genom<strong>för</strong>, olika<br />

<strong>utbildning</strong>ar. I skärningspunkten mellan den egna ämneskulturen och ett snabbt<br />

<strong>för</strong>änderligt större sammanhang slits lärarna, de <strong>som</strong> skall generera <strong>för</strong>ändringarna,<br />

mellan å ena sidan ett val mellan att envist kämpa <strong>för</strong> den traditionella<br />

storyn fokuserad på självständighet och kunskapsutveckling eller leverera det<br />

alla vill ha (vilket kan ses <strong>som</strong> att sälja sin akademiska själ). Eller å andra<br />

sidan; valet mellan att justera verksamheten stegvis inom den traditionella sto-<br />

10


yn eller att skapa <strong>av</strong> en i grunden ny självbild 7 . Den senare <strong>för</strong>eställningen om<br />

<strong>för</strong>ändring <strong>som</strong> gradvis justering eller genomgående <strong>för</strong>ändring kan stöttas genom<br />

holistiska och lokalt initierade utvärderingsstrategier. Strategier <strong>som</strong> med<br />

utgångspunkt i <strong>för</strong>ståelseinriktade-intuitiva ansatser öppnar <strong>för</strong> problematisering,<br />

dialog och reflektion.<br />

De <strong>som</strong> har ansvaret <strong>för</strong> att utveckla och <strong>för</strong>ändra högskole<strong>utbildning</strong> behöver<br />

bli bättre på att dels <strong>för</strong>stå sitt inre sammanhang (organisation och kultur), dels<br />

de yttre sammanhangen och vilka <strong>för</strong>väntningar <strong>som</strong> finns på högskolornas roll<br />

däri. Trowler (1998), Ehn (2001) och Baume & Kahn (2004), tar upp bristen på<br />

akademisk ”självinsikt” och vikten <strong>av</strong> att starta <strong>för</strong>ändringsinsatser i en <strong>för</strong>ståelse<br />

<strong>av</strong> det inre sammanhanget. Barnett (2000) betonar att självinsikten också<br />

inbegriper en <strong>för</strong>ståelse <strong>av</strong> de yttre sammanhangen – universitetet i världen,<br />

lapptäcket <strong>av</strong> diskurser, och det i sin tur pekar på det uppenbara behovet <strong>av</strong> dialog<br />

med det yttre sammanhanget – de så kallade intressenterna. På samma sätt<br />

<strong>som</strong> man idag resonerar om lärande mer generellt så finns möjligheten till utveckling<br />

i dels en upptäckt <strong>av</strong> den egna <strong>för</strong>ståelsen men också i mötet med nya<br />

frågor och fenomen.<br />

<strong>Utvärdering</strong> <strong>som</strong> stöttar <strong>för</strong>ändring<br />

I en utvärderingsvardag <strong>som</strong> kan tas allt<strong>för</strong> given finns det all anledning, inte<br />

minst <strong>för</strong> politiska befattningsh<strong>av</strong>are, olika professionella <strong>utbildning</strong>saktörer<br />

och HSV, att stanna upp och begrunda Franke-Wikberg och Lundgrens (1980)<br />

frågor: var<strong>för</strong>, vad, <strong>för</strong> vem, <strong>av</strong> vem, hur och när. Är det verkligen så att det<br />

myndighetsstyrda utvärderingssystem vi ser idag är det bästa tänkbara <strong>för</strong> syftet<br />

”att <strong>stöd</strong>ja utveckling” <strong>av</strong> <strong>högre</strong> <strong>utbildning</strong>? Är det inte snarare orimligt att<br />

anta att en myndighetsstyrd normativ långtidsanvänd utvärderingsmodell skulle<br />

kunna erbjuda konstruktivt <strong>stöd</strong> i ett sammanhang <strong>som</strong> är ständigt <strong>för</strong>änderligt<br />

och superkomplext. Inte heller framstår det tillräckligt att granskningen <strong>av</strong><br />

<strong>högre</strong> <strong>utbildning</strong> sker, med forskningen <strong>som</strong> <strong>för</strong>ebild, genom ett på <strong>för</strong>hand<br />

styrt samtal mellan ”likar”. Vid HSV:s Kvalitetskonferens 2007 i Umeå hävdade<br />

Harvey att peer reviews, på grund <strong>av</strong> granskarnas bristande utvärderingskompetens,<br />

ofta är amatörmässiga, <strong>för</strong>domsfulla och oetiska (Harvey, 2007).<br />

Det <strong>som</strong> behövs är snarare lokalt ”ägda” strategier <strong>som</strong> öppnar <strong>för</strong> komplexitet<br />

och utmaningar. Strategier <strong>som</strong> gör det möjligt <strong>för</strong> dem <strong>som</strong> är tvungna att<br />

hantera alla osäkerheter, de <strong>utbildning</strong>sansvariga lärarna, att upptäcka och <strong>för</strong>stå<br />

just sin <strong>utbildning</strong>s inre och yttre sammanhang. Att vara ansvarig <strong>för</strong> ett <strong>utbildning</strong>sprogram<br />

och dess utveckling idag är en stor utmaning och i de flesta<br />

fall har de ansvariga personerna liten eller ganska ringa kunskap om hur man<br />

bedriver utveckling <strong>av</strong> <strong>utbildning</strong>. Om utvärderingar skall kunna fylla någon<br />

<strong>utbildning</strong>s<strong>för</strong>ändrande funktion till exempel genom att bidra till nya definitioner<br />

<strong>av</strong> <strong>utbildning</strong>skvalitet i <strong>högre</strong> <strong>utbildning</strong> måste de vara utformade så att<br />

de stöttar en utvidgad lärarprofessionalitet utgående från pedagogiska frågeställningar<br />

(Simons, 2004). Dessa professionsutvecklande utvärderingsprocesser,<br />

med fokus mer på lärande än granskande, måste utformas och kontrolleras<br />

<strong>av</strong> och <strong>för</strong> de <strong>som</strong> skall genom<strong>för</strong>a <strong>för</strong>ändringarna. <strong>Utvärdering</strong> <strong>av</strong><br />

<strong>högre</strong> <strong>utbildning</strong> måste utformas <strong>som</strong> redskap <strong>för</strong> upptäckter, <strong>för</strong>ståelse och<br />

11


lärande. Ett <strong>av</strong> de starkaste korten <strong>för</strong> detta är just det <strong>som</strong> <strong>högre</strong> <strong>utbildning</strong> är<br />

ett signum <strong>för</strong> – enlightenment (Weiss, 1999; Barnett, 2000) 8 .<br />

Enlightenment är ett begrepp <strong>som</strong> används <strong>av</strong> både Barnett och utvärderingsforskaren<br />

Weiss. Barnett menar att utvärdering <strong>för</strong> enlightenment syftar till<br />

ökad själv<strong>för</strong>ståelse och genom det möjliggör <strong>för</strong>ändringar (Barnett, 1994, s<br />

165). Weiss har beskrivit begreppet enlightenment <strong>som</strong> “the percolation of new<br />

information, ideas and perspectives into the arenas in which decisions are<br />

made” (Weiss, 1999, s 471).<br />

Weiss ser enlightenment <strong>som</strong> en långsiktig kognitiv och affektiv process <strong>av</strong><br />

problematisering, reflektion och dialog mellan många olika aktörer i en viss<br />

kontext och ett visst sammanhang.<br />

… the ideas from evaluation seep into people’s consciousness and alter the way<br />

that issues are framed and alternatives designed. What once were taken-forgranted<br />

assumptions are now re-examined. Issues that used to be given high priority<br />

are now seen to be less important. New issues, previously unrecognized, move<br />

up the policy agenda. (Weiss, 1999, s 471-472)<br />

Barnett framhåller att enlightenment beskriver det <strong>som</strong> är <strong>högre</strong> <strong>utbildning</strong>s<br />

kärna; kreativitet åtföljd <strong>av</strong> kritik (creativity accompanied by critique, Barnett,<br />

2000, s 69). Han menar att det är <strong>högre</strong> <strong>utbildning</strong>s stora styrka; nyfikenheten,<br />

det utforskande samtalet 9 och kulturen <strong>av</strong> nätverkande, <strong>som</strong> ger <strong>för</strong>utsättningarna<br />

<strong>för</strong> att hantera superkomplexiteten genom såväl inåt- <strong>som</strong> utåtriktade aktiviteter.<br />

Syftet med utvärderingar <strong>som</strong> <strong>stöd</strong> <strong>för</strong> <strong>för</strong>ändring kan inte vara att etablera<br />

sanningar och illusionen <strong>av</strong> kontroll utan mer att bidra till utvecklingen<br />

genom att utforska, <strong>för</strong>stå och hantera den komplexa verkligheten.<br />

What is both necessary and possible – just – is an enlightened societal self-monitoring.<br />

The university can become a pivotal institution in this process of collective<br />

self-enlightenment (Barnett, 2000, s 69).<br />

Enlightenment fokuserar på aspekter <strong>som</strong> (i) mötet med ny information, idéer<br />

och perspektiv, (ii) kreativitet, i meningen att kunna problematisera, analysera<br />

och dra slutsatser och (iii) relationer i form <strong>av</strong> dialog. För att en process <strong>av</strong> enlightenment<br />

skall kunna skapas krävs fler inblandade aktörer än idag. Tillvägagångssättet<br />

med peer-granskningar erbjuder inte ett tillräckligt perspektiv- och<br />

informationstillskott. Fler <strong>av</strong> den <strong>högre</strong> <strong>utbildning</strong>ens intressenter måste få bidra<br />

i problematisering och analys och <strong>för</strong> detta krävs både en genuin intressentansats<br />

och att valet <strong>av</strong> viktiga intressenter görs <strong>av</strong> de <strong>utbildning</strong>sansvariga.<br />

Sociala verksamheter, <strong>som</strong> <strong>utbildning</strong>, är dynamiska och <strong>för</strong>ändring uppkommer<br />

genom gemensamma problemlösande aktiviteter (inte något någon levererar<br />

<strong>för</strong> andra att agera efter), en respekt <strong>för</strong> andra perspektiv och utveckling<br />

<strong>av</strong> ny kunskap <strong>som</strong> är <strong>för</strong>ankrad i såväl tid/plats <strong>som</strong> värderingar. Det innebär<br />

dock inte en fullständig pluralism, utan <strong>för</strong>utsätter att de medverkande tillsammans<br />

reflekterar, kritiserar och argumenterar <strong>för</strong> att nå fram till det <strong>som</strong> vid<br />

det aktuella tillfället ses <strong>som</strong> mest rationellt. Karlsson (2003) har lyft fram<br />

detta <strong>som</strong> en viktig aspekt på en utvärderingsansats han benämnt ”transforma-<br />

12


tive participatory evaluation” och <strong>som</strong> hör hemma i det <strong>för</strong>ståelseinriktade-intuitiva<br />

spåret.<br />

Weiss (1986) hävdar att det är kvaliteten i dialogen och en verksamhets specifika<br />

<strong>för</strong>utsättningar <strong>som</strong> kommer att <strong>av</strong>göra om och när, informationen leder<br />

till <strong>för</strong>ändrade eller nya aktiviteter. Detta innebär att det är den granskade verksamhetens,<br />

högskolans i detta fall, kunskapsbehov, handlingsmönster och<br />

<strong>för</strong>ståelser <strong>som</strong> både <strong>av</strong>gör vad <strong>som</strong> är en kvalitativt god dialog och om utvärderingen<br />

kommer att generera någon <strong>för</strong>ändring.<br />

Fokuseringen på process mer än produkt – den slutliga rapporten med bedömningar<br />

och <strong>för</strong>slag, öppnar <strong>för</strong> att resultaten blir mångfacetterade, kommer<br />

fortlöpande och har olika riktningar. Forss, Rebien och Carlsson (2002) har<br />

beskrivit fem typer <strong>av</strong> processresultat; learning to learn, developing networks,<br />

creating shared understanding, strengthening the project and boosting morale.<br />

Denna bild <strong>av</strong> vad utvärdering kan ge dem <strong>som</strong> arbetar med <strong>utbildning</strong> har<br />

kompletterats <strong>av</strong> Greene 10 <strong>som</strong> betonar betydelsen <strong>av</strong> den relationella aspekten;<br />

..teaching and learning [in evaluation] are not only cognitive, communicative and<br />

instrumental, but more centrally relational, social, moral-ethical, interactional,<br />

dialogic. (Greene 2002, s)<br />

Att utvärdering kan ha rollen mer <strong>som</strong> bränsle <strong>för</strong> kloka samtal och nya frågor<br />

än <strong>som</strong> fakta och kontroll, kan upplevas både okontrollerat och svårhanterligt<br />

men i stort all forskning vi har idag visar på att komplexa sociala <strong>för</strong>ändringar<br />

inte är en process <strong>som</strong> kan styras med stimulus-respons- eller teknologiska<br />

modeller. I beskrivningen <strong>av</strong> högskolans sammanhang ovan framgår att det inte<br />

är någon entydig och enkel värld högskolan agerar i. Målet med utvärdering<br />

<strong>som</strong> <strong>stöd</strong> <strong>för</strong> utveckling <strong>av</strong> högskolan måste där<strong>för</strong> vara att utveckla de <strong>utbildning</strong>sansvarigas<br />

kompetens i såväl utvärdering, pedagogiskt utvecklingsarbete<br />

<strong>som</strong> att kunna bedöma <strong>utbildning</strong>skvalitet. Skall ett överordnat granskningssystem<br />

fylla någon funktion i ett sådant sammanhang skulle det vara genom att<br />

det utformas så att själva utvärderingsarbetet bedrivs på lokal nivå och att<br />

myndighetens roll är att bedöma:<br />

… that programmes be held accountable for asking difficult questions, for doing<br />

and using evaluation to identify learnings, and for acting upon this information.<br />

(Perrin, 2002)<br />

Förutom de frågetecken <strong>som</strong> ännu finns kring <strong>för</strong>ståelseinriktat-intuitiva lokalt<br />

kontrollerade utvärderingsansatser, och <strong>som</strong> bara kan besvaras genom mer<br />

praktisk erfarenhet, är utmaningarna <strong>för</strong> dessa ansatser enligt Torres & Preskill<br />

(2001) många i universitetens dagliga verksamhet. Utmaningar <strong>som</strong> de nämner<br />

är: resultathungriga politiska och ekonomiska aktörer, brist på tid och <strong>stöd</strong> <strong>för</strong><br />

reflektion och dialog, en ledning <strong>som</strong> är ovan vid att faktiskt använda utvärderingsresultat<br />

<strong>för</strong> organisatorisk själv<strong>för</strong>ståelse och beslutsfattande, överbelastad<br />

personal <strong>som</strong> bara ser utvärdering <strong>som</strong> ”ännu en uppgift att klara <strong>av</strong>”, brist på<br />

utvärderingskompetens att tillgå i processen, svagt <strong>stöd</strong> <strong>för</strong> att överhuvudtaget<br />

bidra till organisatoriskt lärande och <strong>för</strong>ändring samt dåligt <strong>stöd</strong> från ledningsnivå.<br />

13


En sådan verklighet, även om den beskrivna är amerikansk, kan kännas nog så<br />

bekant <strong>för</strong> många högskolelärare och det stora problemet med den är att den<br />

utgår från en produktinriktad-normativ och byråkratisk syn på <strong>högre</strong> <strong>utbildning</strong>.<br />

Ett synsätt <strong>som</strong> <strong>för</strong>stärks och bekräftas <strong>av</strong> HSV:s nationella granskningar.<br />

Risken med den strategi <strong>för</strong> ämnes- och programgranskningar <strong>som</strong> ser ut att<br />

genom<strong>för</strong>as framöver är dessvärre att den <strong>för</strong>stärker och befäster en utvärderingsvardag<br />

där pedagogisk utvärdering är utformad efter forskningens (eller<br />

kanske till och med industrins) premisser och genom<strong>för</strong>s <strong>som</strong> en byråkratiskt<br />

administrativ procedur med starka drag <strong>av</strong> examinations<strong>för</strong>farande. Om utvärderingar<br />

verkligen skall kunna fylla en funktion <strong>som</strong> <strong>stöd</strong> <strong>för</strong> <strong>för</strong>ändring <strong>av</strong><br />

<strong>högre</strong> <strong>utbildning</strong> måste de utgöra en del <strong>av</strong> det professionella <strong>utbildning</strong>såtagandet<br />

och utformas så att de kan utgöra ett redskap <strong>för</strong> lärande och professionell<br />

utveckling <strong>av</strong>, och <strong>för</strong>, de ansvariga lärarna.<br />

1<br />

Se t. ex. Prop 1988/89:65, SOU 1992:1, Prop 1992/93:1, Prop 1992/93:169, SOU 1993:102,<br />

Prop 1993/94:177, Prop 1994/95:100, Ds 1998:51, Prop 1999/2000:28, Ds 2000:25, Prop<br />

2001/02:15, Lag 2000:260, Förordning 1996:568 och 2000:651.<br />

2<br />

Som inleddes <strong>av</strong> Universitets- och högskoleämbetets (UHÄ) och<br />

Universitetskanslersämbetets (UKÄ) utvärderings- och uppföljningsuppdrag.<br />

3<br />

Förutom ett stort antal skrifter och artiklar kan även nämnas deras nationellt inflytelserika<br />

arbete med utvärdering på Högskoleverket respektive Skolverket.<br />

4<br />

En liknande beskrivning <strong>av</strong> utvecklingslinjer finns också i Franke-Wikberg & Johanssons<br />

<strong>av</strong>handling från 1975 (1975, s 16-19).<br />

5<br />

Universitetskanslern, Universitets- och Kanslersämbetet, Universitets- och högskoleämbetet,<br />

Högskoleverket, Högskolans grund<strong>utbildning</strong>sråd.<br />

6<br />

Och skulle kunna uppfattas <strong>som</strong> ett erbjudande om ’constructive partnership’ från statens sida<br />

(Bauer m.fl, 1999, s 75-76).<br />

7 Jag omfattar dock inte den radikala tesen – death and resurrection, <strong>som</strong> Barnett presenterar<br />

(2000).<br />

8 Begreppet enlightenment är inte synonymt med 1700-talets upplysningsbegrepp och<br />

åtkomsten <strong>av</strong> sanning/objektivitet utan ett samlingsbegrepp <strong>för</strong> en utforskande/prövande<br />

hållning, dialog och gemensam om<strong>för</strong>handling <strong>av</strong> betydelser och värden.<br />

9 Ehn (2001) tar upp det <strong>som</strong> den mycket verbala miljön (s 16). Något <strong>som</strong> han visar kan både<br />

brukas och missbrukas.<br />

10 Mark & Henry (2004, s 46) har utvecklat en modell <strong>för</strong> att beskriva hur samtliga dessa<br />

aspekter kan utgöra resultatet <strong>av</strong> utvärdering.<br />

14


Referenser<br />

Barnett, R. (1994) Power, Enlightenment and Quality Evaluation. European<br />

Journal of Education, 29 (2): 165-179.<br />

Barnett, R. (2000) Realizing the University. Buckingham: SRHE and Open<br />

University Press.<br />

Bauer, M., Askling, B., Gerard Marton, S. & Marton, F. (1999) Transforming<br />

Universities. Higher Education Policy Series 48, London: Jessica Kingsly<br />

Publishers.<br />

Baume, D. & Kahn, P. (2004) Enhancing Staff & Educational Development.<br />

(kap 1 och 8). London: RoutledgeFalmer.<br />

Becher, T. & Trowler, P. (2001) Academic Tribes and Territories.<br />

Buckingham: SRHE and Open University Press.<br />

Dahlberg, G., Moss, P. & Pence, A. (2001) Från kvalitet till meningsskapande.<br />

Stockholm: HLS Förlag.<br />

Ehn, B. (2001) Universitetet <strong>som</strong> arbetsplats. Lund: Studentlitteratur.<br />

Forss, K., Rebien, C. C. & Carlsson, J. (2002) Process Use of Evaluations.<br />

Evaluation, 8(1): 29-45.<br />

Franke-Wikberg, S. & Johansson, M. (1975) <strong>Utvärdering</strong> <strong>av</strong> undervisning.<br />

Umeå: Umeå universitet, Pedagogiska institutionen.<br />

Franke-Wikberg, S. & Lundgren, U. P. (1980) Att värdera <strong>utbildning</strong> Del 1.<br />

Stockholm: Wahlström & Widstrand.<br />

Friedman, J. & Johansson Dahre, U. (2004) Om högskoleverkets<br />

utvärderingsrutiner. Debatt. Universitetsläraren, 14/2004. Stockholm:<br />

Sveriges universitetslärar<strong>för</strong>bund.<br />

Greene, J. C. (2002) EES 2002 Dialogue: Evaluation as Education. Sevilla,<br />

Spanien: Paper presenterat på European Evaluation Society-konferens 2002.<br />

Guba, E. G. & Lincoln, Y. S. (1981) Effective Evaluation. San Francisco:<br />

Jossey-Bass.<br />

Guba, E. G. & Lincoln, Y. S. (1989) Fourth Generation Evaluation. Newbury<br />

Park, Ca: Sage.<br />

Hall, P. (2006) ”Kvalitetsarbete” är inte utvärdering utan maktutövning.<br />

Debatt. Universitetsläraren, 17/2006. Stockholm: Sveriges<br />

universitetslärar<strong>för</strong>bund.<br />

Hall, P. (2007) Kvalitetssäkring byråkratiserar. Debatt. Universitetsläraren,<br />

1/2007. Stockholm: Sveriges universitetslärar<strong>för</strong>bund.<br />

Harvey, L. (2006) Impact of Quality Assurance: Overview of a discussion<br />

between representatives of external quality assurance agencies. Quality in<br />

Higher Education 12(3): 287-290.<br />

Harvey, L. (2007) Devaluing quality. Umeå, Sverige: Huvudtalare på<br />

Högskoleverkets kvalitetskonferens 2007.<br />

http://www.hsv.se/omhogskoleverket/konferenser/kvalitetskonferens.4.539a<br />

949110f3d5914ec800061523.html (2007-10-19)<br />

Högskoleverket (2002) Metautvärdering <strong>av</strong> högskoleverkets modell <strong>för</strong><br />

kvalitetsbedömning <strong>av</strong> <strong>högre</strong> <strong>utbildning</strong>. Högskoleverkets rapportserie<br />

2002:20 R. Stockholm: Högskoleverket.<br />

House, E. R. (1993) Professional evaluation. Social impact and political<br />

consequences. Newbury Park, Ca: Sage.<br />

Karlsson, O. (1995) Att utvärdera – mot vad? Stockholm: HLS Förlag.<br />

15


Karlsson, O. (1998) Paper utan titel presenterat på seminarium vid UCER.<br />

Umeå: Umeå universitet, Umeå Centre for Evaluation Research.<br />

Karlsson, O. (2003) Evaluation Politics in Europe: Trends and Tendencies.<br />

Studies in Educational Policy and Educational Philosophy. E-tidskrift<br />

2003:1. http://www.upi.artisan.se/Pages/cgibin/PUB_Latest_Version.exe?allFrameset=1&pageId=2<br />

(2007-02-07)<br />

Khakee, A. (2003) The Emerging Gap between Evaluation Research and<br />

Practice. Evaluation 9 (3): 340-352.<br />

Kwiek, M. (2005) The University and the State in a Global Age: renegotiating<br />

the traditional social contract. European Educational Research Journal,<br />

4(4) 324-341.<br />

Lauvås, P & Handal, G. (2001) Handledning och praktisk yrkesteori. Lund:<br />

Studentlitteratur.<br />

Levine, T. (2002) Stability and change in curriculum evaluation. Studies in<br />

Educational Evaluation, 28: 1-33.<br />

Liedman, S-E. & Olausson, L. (1988) (eds) Ideologi och institution. Om<br />

forskning och <strong>högre</strong> <strong>utbildning</strong> 1880-2000. Stockholm: Carlssons bok<strong>för</strong>lag.<br />

Lindberg, L. & Wikander, L. (1991) Delaktighet och återkoppling. Pedagogisk<br />

forskning I Uppsala 100. Uppsala: Uppsala universitet, Pedagogiska<br />

institutionen.<br />

Lindensjö, B. & Lundgren, U. P. (1992) Att utvärdera utvärdering, i Selander,<br />

S. (red) Forskning om <strong>utbildning</strong>. Stockholm: Brutus Östlings bok<strong>för</strong>lag.<br />

Milberg, P. (2006) Reflektioner kring en HSV-utvärdering. Debatt.<br />

Universitetsläraren, 13/2006. Stockholm: Sveriges universitetslärar<strong>för</strong>bund.<br />

Nilsson, K-A. & Whalén, S. (2000) Institutional Response to the Swedish<br />

Model of Quality Assurence. Quality in higher Education 6(1): 7-18.<br />

Perrin, B. (2002) Towards a new view of accountability. Sevilla: Paper<br />

presenterat på European Evaluation Society Conference 2002.<br />

Proposition 1988/89: 65.<br />

Rolf, B., Ekstedt, E. & Barnett, R. (1993) Kvalitet och kunskapsprocess i <strong>högre</strong><br />

<strong>utbildning</strong>. Nora: Nya Doxa.<br />

Sannerstedt, A. (1992) Politisk styrning <strong>av</strong> skolan: svårigheter och möjligheter,<br />

i Selander, S. (red) Forskning om <strong>utbildning</strong>. Stockholm: Brutus Östlings<br />

bok<strong>för</strong>lag.<br />

Segerholm, C. (2002) National Evaluations as governing instruments: how do<br />

they govern? Evaluation, 7(4) 427-438.<br />

Segerholm, C. & Åström, E. (2004) Evaluation and the hidden curriculum.<br />

Exploring evaluation effects in educational practice. Berlin: Paper<br />

presenterat på European Evaluation Society Conference 2004.<br />

Simons, H. (1999) Cultural Codes – Who Holds the Key? Evaluation, 5(1) 23-<br />

41.<br />

Simons, H. (2004) Utilizing evaluation evidence to enhance professional<br />

practice. Evaluation, 10 (4) 410-429.<br />

SOU (1992) Frihet, ansvar, kompetens. Grund<strong>utbildning</strong>ens villkor i<br />

högskolan, SOU 1992:1. Stockholm: Utbildningsdepartementet.<br />

Stufflebeam, D. L. (1999)<br />

Tholin, J. (2006) Hemmablind utvärdering <strong>av</strong> högskolan. Debatt. Göteborgs-<br />

Posten, 2006-11-13.<br />

16


Torres, R. T. & Preskill, H. (2001) Evaluation and Organizational Learning:<br />

Past, Present and Future. American Journal of Evaluation, 22(3): 387-395.<br />

Trowler, P. (1998) Academics Responding to Change. Buckingham: SRHE and<br />

Open University Press.<br />

UPU (1970) Den akademiska undervisningen, Principbetänkande <strong>av</strong>givet <strong>av</strong><br />

universitetspedagogiska utredningen (UPU VII) 1970. Stockholm:<br />

Universitetskanslersämbetet.<br />

Wahlén, S. (2004) Does national Quality monitoring make a difference?<br />

Quality in Higher Education, 10(2) 139-147.<br />

Weiss, C. H. (1986) The Circuitry of Enlightenment. Knowledge: Creation,<br />

Diffusion, Utilization, 8(2): 274-281.<br />

Weiss, C. H. (1999) The Interface between Evaluation and Public Policy,<br />

Evaluation 5(4): 468-486.<br />

_______________________________________________________________________________________________<br />

© Texten får fritt kopieras <strong>för</strong> icke kommersiella ändamål under <strong>för</strong>utsättning att fullständig referens anges.<br />

Fjellström, Mona : <strong>Utvärdering</strong> <strong>som</strong> <strong>stöd</strong> <strong>för</strong> <strong>för</strong>ändring <strong>av</strong> <strong>högre</strong> <strong>utbildning</strong><br />

- produktkontroll eller <strong>stöd</strong> <strong>för</strong> lärande<br />

I Studies in Educational Policy and Educational Philosophy:<br />

Läsrum, Artikel 2007:1. .<br />

_______________________________________________________________________________________________<br />

17

Hooray! Your file is uploaded and ready to be published.

Saved successfully!

Ooh no, something went wrong!