Utvärderingsforskning: Definition, metoder och exempel

Vad är utvärderingsforskning?

Utvärderingsforskning, även känd som programutvärdering, hänvisar till forskningens syfte i stället för till en specifik metod. Utvärderingsforskning är den systematiska bedömningen av värdet eller förtjänsten av den tid, de pengar, den ansträngning och de resurser som används för att uppnå ett mål.

Utvärderingsforskning är nära besläktad med men skiljer sig något från mer konventionell social forskning. Den använder många av de metoder som används i traditionell social forskning, men eftersom den äger rum i en organisatorisk kontext kräver den teamkompetens, interpersonella färdigheter, ledningsförmåga, politisk smarthet och andra färdigheter som social forskning inte behöver i någon större utsträckning. Utvärderingsforskning kräver också att man har intressenternas intressen i åtanke.

Utvärderingsforskning är en typ av tillämpad forskning, och därför är den avsedd att ha någon effekt i verkligheten. Många metoder som undersökningar och experiment kan användas för att göra utvärderingsforskning. Processen för utvärderingsforskning som består av dataanalys och rapportering är en rigorös, systematisk process som innebär att man samlar in data om organisationer, processer, projekt, tjänster och/eller resurser. Utvärderingsforskning förbättrar kunskap och beslutsfattande och leder till praktiska tillämpningar.

Varför bedriva utvärderingsforskning?

Det gemensamma målet för de flesta utvärderingar är att utvinna meningsfull information från målgruppen och ge värdefulla insikter till utvärderare, t.ex. sponsorer, givare, klientgrupper, administratörer, personal och andra relevanta intressenter. Oftast uppfattas feedback som användbar om den bidrar till beslutsfattandet. Utvärderingsforskning skapar dock inte alltid en effekt som kan tillämpas någon annanstans, ibland misslyckas den med att påverka kortsiktiga beslut. Det är också lika sant att det till en början kan tyckas att den inte har något inflytande, men att den kan få ett fördröjt inflytande när situationen är mer gynnsam. Trots detta finns det en allmän överenskommelse om att utvärderingsforskningens främsta mål bör vara att förbättra beslutsfattandet genom ett systematiskt utnyttjande av mätbar återkoppling.

Nedan följer några av fördelarna med utvärderingsforskning

Genom att få insikter om ett projekt eller program och dess verksamhet

Utvärderingsforskning gör att du kan förstå vad som fungerar och vad som inte fungerar, var vi har varit, var vi befinner oss och vart vi är på väg. Du kan ta reda på vilka områden som kan förbättras och identifiera styrkor. Det hjälper dig alltså att ta reda på vad du behöver fokusera mer på och om det finns några hot mot din verksamhet. Du kan också ta reda på om det för närvarande finns dolda sektorer på marknaden som ännu inte har utnyttjats.

Förbättra praxis

Det är viktigt att mäta dina tidigare prestationer och förstå vad som gick fel för att kunna leverera bättre tjänster till dina kunder. Om det inte är en tvåvägskommunikation finns det inget sätt att förbättra det du har att erbjuda. Utvärderingsforskning ger dina anställda och kunder en möjlighet att uttrycka hur de känner sig och om det finns något de skulle vilja ändra. Den gör det också möjligt för dig att ändra eller anta en praxis så att den ökar chanserna till framgång.

Bedöm effekterna

När du har utvärderat insatserna kan du se hur väl du uppfyller mål och delmål. Utvärderingar låter dig mäta om de avsedda fördelarna verkligen når målgruppen och i så fall hur effektivt.

Bygg upp kapacitet

Utvärderingar hjälper dig att analysera efterfrågemönstret och förutsäga om du kommer att behöva mer medel, uppgradera färdigheter och förbättra effektiviteten i verksamheten. Det låter dig hitta luckor i kedjan från produktion till leverans och möjliga sätt att fylla dem.

Metoder för utvärderingsforskning

Alla marknadsundersökningsmetoder innebär att man samlar in och analyserar data, fattar beslut om informationens giltighet och drar relevanta slutsatser av den. Utvärderingsforskning omfattar planering, genomförande och analys av resultaten som inkluderar användning av datainsamlingstekniker och tillämpning av statistiska metoder.

Några av de utvärderingsmetoder som är ganska populära är inputmätning, output- eller prestandamätning, effekt- eller resultatbedömning, kvalitetsbedömning, processutvärdering, benchmarking, standarder, kostnadsanalys, organisatorisk effektivitet, metoder för programutvärdering och LIS-centrerade metoder. Det finns också några typer av utvärderingar som inte alltid resulterar i en meningsfull bedömning, t.ex. beskrivande studier, formativa utvärderingar och genomförandeanalyser. Utvärderingsforskning handlar mer om utvärderingens informationsbehandlings- och återkopplingsfunktioner.

Dessa metoder kan grovt delas in i kvantitativa och kvalitativa metoder.

Kvantitativa metoder

Resultatet av de kvantitativa forskningsmetoderna är ett svar på nedanstående frågor och används för att mäta något konkret.

Hur många?
Vem var inblandade?
Hur blev resultatet?
Hur blev priset?

Det bästa sättet att samla in kvantitativa uppgifter är genom undersökningar, frågeformulär och enkäter. Du kan också skapa för- och eftertester, granska befintliga dokument och databaser eller samla in kliniska data.

Enkäter används för att samla in åsikter, feedback eller idéer från dina anställda eller kunder och består av olika frågetyper. De kan genomföras av en person ansikte mot ansikte eller per telefon, per post eller online. Onlineundersökningar kräver inget mänskligt ingripande och är mycket effektivare och mer praktiska. Du kan se undersökningsresultaten på instrumentpanelen i forskningsverktygen och gräva djupare med hjälp av filterkriterier baserade på olika faktorer som ålder, kön, plats osv. Du kan också behålla enkätlogik, t.ex. förgreningar, kvoter, kedjeundersökningar, slingor osv. i enkätfrågorna och minska tiden för att både skapa och besvara enkäten. Du kan också generera ett antal rapporter som innehåller statistiska formler och presentera data som lätt kan absorberas på mötena. Om du vill veta mer om hur forskningsverktyget fungerar och om det passar dig, registrera dig för ett gratis konto nu.

Skapa ett gratis konto!

Kvantitativa data mäter djupet och bredden av ett initiativ, t.ex. antalet personer som deltog i det ideella evenemanget, antalet personer som anmälde sig till en ny kurs vid universitetet. Kvantitativa data som samlas in före och efter ett program kan visa dess resultat och inverkan.

När det gäller kvantitativa data som ska användas för utvärderingsforskning beror noggrannheten på hur väl urvalet representerar populationen, hur lätt det är att analysera och hur konsekventa de är. Kvantitativa metoder kan misslyckas om frågorna inte är korrekt formulerade och inte distribueras till rätt målgrupp. Kvantitativa data ger inte heller någon förståelse för sammanhanget och är kanske inte lämpliga för komplexa frågor.

Lär dig mer: Kvantitativ marknadsundersökning: Läs mer: Kvantitativ marknadsundersökning: Den kompletta guiden

Kvalitativa metoder

Kvalitativa forskningsmetoder används när kvantitativa metoder inte kan lösa problemet, dvs. de används för att mäta immateriella värden. De besvarar frågor som

Vad är mervärdet?
Hur nöjd är du med vår tjänst?
Hur sannolikt är det att du skulle rekommendera oss till dina vänner?
Vad kommer att förbättra din upplevelse?

Kvalitativa data samlas in genom observation, intervjuer, fallstudier och fokusgrupper. Stegen för att skapa en kvalitativ studie innebär att undersöka, jämföra och kontrastera samt förstå mönster. Analytiker avslutar efter identifiering av teman, gruppering av liknande data och slutligen reducering till punkter som är meningsfulla.

Observationer kan hjälpa till att förklara beteenden samt det sociala sammanhanget som i allmänhet inte upptäcks av kvantitativa metoder. Observationer av beteende och kroppsspråk kan göras genom att titta på en deltagare, spela in ljud eller video. Strukturerade intervjuer kan genomföras med människor ensamma eller i en grupp under kontrollerade förhållanden, eller så kan man ställa öppna kvalitativa forskningsfrågor till dem. Kvalitativa forskningsmetoder används också för att förstå en persons uppfattningar och motivationer.

Styrkan i denna metod är att gruppdiskussioner kan ge idéer och stimulera minnen med ämnen som kaskaderas allteftersom diskussionen äger rum. Noggrannheten hos kvalitativa data beror på hur väl kontextuella data förklarar komplexa frågor och kompletterar kvantitativa data. Den hjälper till att få svar på ”varför” och ”hur” efter att ha fått svar på ”vad”. Begränsningarna med kvalitativa data för utvärderingsforskning är att de är subjektiva, tidskrävande, kostsamma och svåra att analysera och tolka.

Lär dig mer: Kvalitativ marknadsundersökning: Det är möjligt att använda enkätprogram för båda utvärderingsforskningsmetoderna. Du kan använda ovanstående exempelfrågor för utvärderingsforskning och skicka en enkät på några minuter med hjälp av forskningsprogram. Genom att använda ett verktyg för forskning förenklas processen från att skapa en enkät, importera kontakter, distribuera enkäten och generera rapporter som underlättar forskningen.

Exempel på utvärderingsforskning

Evalueringsforskningsfrågorna lägger grunden för en framgångsrik utvärdering. De definierar de ämnen som kommer att utvärderas. Att ha utvärderingsfrågor redo sparar inte bara tid och pengar, utan gör det också lättare att bestämma vilka uppgifter som ska samlas in, hur de ska analyseras och hur de ska rapporteras.

Utvärderingsforskningsfrågor måste utvecklas och överenskommas i planeringsstadiet, men färdiga forskningsmallar kan också användas.

Exempel på forskningsfrågor för utvärdering av processer:

Hur ofta använder du vår produkt på en dag?
Har alla intressenter gett sitt godkännande?
Kan du rapportera problemet från systemet?
Kan du skicka feedback från systemet?
Har varje uppgift utförts enligt standardrutinerna?
Vad var hindren för genomförandet av varje uppgift?
Fanns det några förbättringsområden som upptäcktes?

Exempel på forskningsfrågor för utvärdering av resultat:

Hur nöjd är du med vår produkt?
Gjorde programmet avsedda resultat?
Vilka var de oavsiktliga resultaten?
Har programmet ökat deltagarnas kunskaper?
Är deltagarna i programmet anställningsbara innan kursen startade?
Har deltagarna i programmet färdigheter som gör att de kan hitta ett arbete efter kursens slut?
Är deltagarnas kunskaper bättre jämfört med dem som inte deltog i programmet?