Bedömnings- och utvärderingsmetoder inom uppdragsarkeologin ...

7. Modelltest
För att pröva modellers betydelse för utfallet har genomförda anbudsförfaranden
prövats i en annan modell, där detta varit möjligt. Alla anbud
som utvärderats genom poängvägningsmodellen har studerats avseende
lämplighet/möjlighet att tydliggöra skillnader i procentsättning av kriterierna.
Avsikten var att pröva hur stor påverkan modellen har för valet av
undersökare/anbud, liksom den påverkan procentsättningen har för utfallet.
Det var därför lättast att använda en genomförd utvärdering enligt poängvägningsmodellen,
där värdering var poängsatt/betygsatt och kriterierna
värderade i procent enligt angivelserna i förfrågningsunderlaget.
Vid prövning av annan matematisk utvärderingsmodell, liksom annan
procentsättning av kriterierna, har ingen omvärdering av respektive länsstyrelses
ursprungliga bedömning gjorts. Den tidigare genomförda utvärderingen
och gjorda bedömningen/betygssättningen har därmed legat som
grund för värderingen i den nya modellen. Då länsstyrelserna inte lägger
samma innebörd i de huvudkriterier som utvärderats och viktats matematiskt
har jämförelser, liksom omberäkningar av genomförda upphandlingar, ibland
varit komplicerad. Jämförbarheten är därmed inte helt likvärdig, vilket kan
ha påverkat resultatet.
7.1 Test 1 – Poängvägningsmodellen
Som första test prövades att förändra procentsättningen av ett antal anbud
enligt poängvägningsmodellen. De anbud som inte prövats i ”nya” procentsatser
är de som vid utvärderingen endast viktats avseende Genomförande
och Pris, då jämförelsen med andra länsstyrelsers viktning av kriterier varit
svår att översätta på ett likvärdigt sätt. Likaså har de ärenden där lägsta pris
och högsta betyg i genomförande sammanfaller inte studerats närmare,
då utfallet inte skulle förändras vid ny viktning eller i de fall där endast en
anbudsgivare gått vidare till prisjämförelse. Avseende övriga länsstyrelsers
anbudsförfaranden där poängvägningsmodellen använts har alla dessa
utvärderingar studerats för ny viktning för att klargöra hur utfallet påverkas
av i förfrågningsunderlaget angivna procentsatser. Av dessa har 12 stycken
testats i nya procentsatser, alternativt att lägsta pris tagits bort för att pröva
om utfallet förändras avseende rangordning eller ny anbudsvinnare. De
viktningar som prövats är de som var använda vid upphandlingar under
2009, avseende särskild undersökning och ser ut enligt följande:
Utvärderingskriterier Vikt Vikt Vikt Vikt
Kompetens Företag/personal 20 % 25 % 20 % 10 %
Vetenskaplig relevans 25 % 30 % 30 % 20 %
Genomförande 25 % 25 % 30 % 35 %
Kostnad 30 % 20 % 20 % 35 %
Ett urval av dessa redovisas vid respektive exempel nedan.
Utvärderingskriterier Vikt Vikt Vikt
Kompetens Företag/personal 30 % 20 % 0 %
Kvalitet/Genomförande 40 % 55 % 50 %
Kostnad 30 % 25 % 50 %