Hvad er evalueringsforskning?
Evalueringsforskning, også kendt som programevaluering, henviser til forskningsformålet i stedet for til en specifik metode. Evalueringsforskning er den systematiske vurdering af værdien eller fortjenesten af den tid, de penge, den indsats og de ressourcer, der er brugt for at nå et mål.
Evalueringsforskning er nært beslægtet med, men adskiller sig en smule fra mere konventionel social forskning. Den anvender mange af de samme metoder, som anvendes i traditionel socialforskning, men fordi den foregår i en organisatorisk sammenhæng, kræver den teamfærdigheder, interpersonelle færdigheder, ledelsesfærdigheder, politisk klogskab og andre færdigheder, som socialforskning ikke har så meget brug for. Evalueringsforskning kræver også, at man har interessenternes interesser for øje.
Evalueringsforskning er en form for anvendt forskning, og det er derfor meningen, at den skal have en vis effekt i den virkelige verden. Der kan bruges mange metoder som f.eks. undersøgelser og eksperimenter til at lave evalueringsforskning. Processen for evalueringsforskning, der består af dataanalyse og rapportering, er en stringent, systematisk proces, der indebærer indsamling af data om organisationer, processer, projekter, tjenester og/eller ressourcer. Evalueringsforskning forbedrer viden og beslutningstagning og fører til praktiske anvendelser.
Hvorfor lave evalueringsforskning?
Det fælles mål for de fleste evalueringer er at udtrække meningsfulde oplysninger fra målgruppen og give værdifuld indsigt til evaluatorer såsom sponsorer, donorer, klientgrupper, administratorer, personale og andre relevante grupper af vælgere. Oftest opfattes feedback som nyttig, hvis den bidrager til beslutningstagningen. Men evalueringsforskning skaber ikke altid en virkning, der kan anvendes andre steder, og nogle gange formår den ikke at påvirke kortsigtede beslutninger. Det er også lige så sandt, at det i begyndelsen kan se ud til, at den ikke har nogen indflydelse, men at den kan få en forsinket virkning, når situationen er mere gunstig. På trods af dette er der generel enighed om, at hovedmålet med evalueringsforskning bør være at forbedre beslutningstagningen gennem systematisk udnyttelse af målbar feedback.
Nedenfor er nogle af fordelene ved evalueringsforskning
- Få indsigt i et projekt eller program og dets drift
Evalueringsforskning lader dig forstå, hvad der virker, og hvad der ikke virker, hvor vi var, hvor vi er, og hvor vi er på vej hen. Du kan finde ud af, hvilke områder der kan forbedres, og identificere styrker. Så det vil hjælpe dig med at finde ud af, hvad du skal fokusere mere på, og om der er nogen trusler mod din virksomhed. Du kan også finde ud af, om der i øjeblikket er skjulte sektorer på markedet, som endnu ikke er udnyttet.
- Forbedre praksis
Det er vigtigt at måle dine tidligere resultater og forstå, hvad der gik galt, så du kan levere bedre tjenester til dine kunder. Medmindre der er tale om en tovejskommunikation, er der ingen mulighed for at forbedre det, du har at tilbyde. Evalueringsundersøgelser giver dine medarbejdere og kunder en mulighed for at give udtryk for, hvordan de har det, og om der er noget, de gerne vil ændre. Det giver dig også mulighed for at ændre eller indføre en praksis, så den øger chancerne for succes.
- Vurder virkningerne
Når indsatsen er evalueret, kan du se, hvor godt du opfylder mål og delmål. Evalueringer giver dig mulighed for at måle, om de tilsigtede fordele virkelig når ud til målgruppen, og hvis ja, hvor effektivt.
- Opbygning af kapacitet
Evalueringer hjælper dig med at analysere efterspørgselsmønstret og forudsige, om du vil få brug for flere midler, opgradere færdigheder og forbedre effektiviteten af driften. Det giver dig mulighed for at finde hullerne i kæden fra produktion til levering og mulige måder at udfylde dem på.
Metoder til evalueringsforskning
Alle markedsundersøgelsesmetoder indebærer indsamling og analyse af data, beslutningstagning om validiteten af oplysningerne og udledning af relevante slutninger heraf. Evalueringsforskning omfatter planlægning, gennemførelse og analyse af resultaterne, som omfatter brug af dataindsamlingsteknikker og anvendelse af statistiske metoder.
Nogle af de evalueringsmetoder, som er ret populære, er inputmåling, output- eller præstationsmåling, effekt- eller resultatvurdering, kvalitetsvurdering, procesevaluering, benchmarking, standarder, omkostningsanalyse, organisatorisk effektivitet, programevalueringsmetoder og LIS-centrerede metoder. Der findes også nogle få typer af evalueringer, som ikke altid resulterer i en meningsfuld vurdering, f.eks. beskrivende undersøgelser, formative evalueringer og implementeringsanalyser. Evalueringsforskning handler mere om evalueringens informationsbehandlings- og feedbackfunktioner.
Disse metoder kan overordnet klassificeres som kvantitative og kvalitative metoder.
Kvantitative metoder
Resultatet af de kvantitative forskningsmetoder er et svar på nedenstående spørgsmål og bruges til at måle noget håndgribeligt.
- Hvor mange?
- Hvem var involveret?
- Hvad var resultaterne?
- Hvilken pris var det?
Den bedste måde at indsamle kvantitative data på er ved hjælp af undersøgelser, spørgeskemaer og meningsmålinger. Du kan også oprette præ- og posttests, gennemgå eksisterende dokumenter og databaser eller indsamle kliniske data.
Surveys bruges til at indsamle holdninger, feedback eller idéer fra dine medarbejdere eller kunder og består af forskellige spørgsmålstyper. De kan gennemføres af en person ansigt til ansigt eller pr. telefon, pr. post eller online. Onlineundersøgelser kræver ikke indgriben af et menneske og er langt mere effektive og praktiske. Du kan se undersøgelsesresultaterne på et dashboard af forskningsværktøjer og grave dybere ved hjælp af filterkriterier baseret på forskellige faktorer som f.eks. alder, køn, placering osv. Du kan også bevare undersøgelseslogik som f.eks. forgreninger, kvoter, kædeundersøgelser, looping osv. i undersøgelsesspørgsmålene og reducere tiden til både at oprette og besvare undersøgelsen. Du kan også generere en række rapporter, der involverer statistiske formler, og præsentere data, der let kan optages på møderne. Hvis du vil vide mere om, hvordan forskningsværktøjet fungerer, og om det er egnet til dig, skal du oprette en gratis konto nu.
Opret en gratis konto!
Kvantitative data måler dybden og bredden af et initiativ, f.eks. antallet af personer, der deltog i et nonprofit-arrangement, antallet af personer, der tilmeldte sig et nyt kursus på universitetet. Kvantitative data, der er indsamlet før og efter et program, kan vise dets resultater og virkning.
Nøjagtigheden af de kvantitative data, der skal bruges til evalueringsforskning, afhænger af, hvor godt stikprøven repræsenterer populationen, hvor let det er at analysere dem og deres konsistens. Kvantitative metoder kan mislykkes, hvis spørgsmålene ikke er formuleret korrekt og ikke er distribueret til den rette målgruppe. Kvantitative data giver heller ikke en forståelse af konteksten og er måske ikke egnede til komplekse spørgsmål.
Læs mere: Kvantitativ markedsundersøgelse: The Complete Guide
Kvalitative metoder
Kvalitative forskningsmetoder anvendes, hvor kvantitative metoder ikke kan løse problemet, dvs. de anvendes til at måle immaterielle værdier. De besvarer spørgsmål som
- Hvad er merværdien?
- Hvor tilfreds er du med vores service?
- Hvor sandsynligt er det, at du vil anbefale os til dine venner?
- Hvad vil forbedre din oplevelse?
Kvalitative data indsamles ved hjælp af observation, interviews, casestudier og fokusgrupper. Trinene for at skabe en kvalitativ undersøgelse indebærer at undersøge, sammenligne og kontrastere og forstå mønstre. Analytikere konkluderer efter identifikation af temaer, gruppering af lignende data og endelig reduktion til punkter, der giver mening.
Observationer kan være med til at forklare adfærd samt den sociale kontekst, der generelt ikke opdages ved kvantitative metoder. Observationer af adfærd og kropssprog kan foretages ved at observere en deltager, optage lyd eller video. Strukturerede interviews kan gennemføres med personer alene eller i en gruppe under kontrollerede forhold, eller der kan stilles åbne kvalitative forskningsspørgsmål til dem. Kvalitative forskningsmetoder bruges også til at forstå en persons opfattelser og motivationer.
Styrken ved denne metode er, at gruppediskussioner kan give ideer og stimulere erindringer med emner, der kaskaderes efterhånden som diskussionen finder sted. Præcisionen af kvalitative data afhænger af, hvor godt kontekstuelle data forklarer komplekse spørgsmål og supplerer kvantitative data. Det hjælper med at få svar på “hvorfor” og “hvordan”, efter at man har fået et svar på “hvad”. Begrænsningerne ved kvalitative data til evalueringsforskning er, at de er subjektive, tidskrævende, dyre og vanskelige at analysere og fortolke.
Lær mere: Kvalitativ markedsundersøgelse: The Complete Guide
Survey-software kan bruges til begge evalueringsforskningsmetoder. Du kan bruge ovenstående eksempler på spørgsmål til evalueringsforskning og sende en undersøgelse på få minutter ved hjælp af forskningssoftware. Ved at bruge et værktøj til forskning forenkles processen lige fra oprettelse af en undersøgelse, import af kontakter, distribution af undersøgelsen og generering af rapporter, der hjælper med forskningen.
Eksempler på evalueringsforskning
Evalueringsforskningsspørgsmål danner grundlaget for en vellykket evaluering. De definerer de emner, der vil blive evalueret. At have evalueringsspørgsmål klar sparer ikke kun tid og penge, men gør det også lettere at beslutte, hvilke data der skal indsamles, hvordan de skal analyseres, og hvordan de skal rapporteres.
Evalueringsforskningsspørgsmål skal udvikles og aftales i planlægningsfasen, men der kan også anvendes færdige forskningsskabeloner.
Eksempler på forskningsspørgsmål til procesevaluering:
- Hvor ofte bruger du vores produkt på en dag?
- Er der indhentet godkendelser fra alle interessenter?
- Kan du rapportere problemet fra systemet?
- Kan du indsende feedback fra systemet?
- Var hver enkelt opgave udført i overensstemmelse med standardproceduren?
- Hvilke barrierer var der for gennemførelsen af hver enkelt opgave?
- Er der blevet opdaget forbedringsområder?
Evaluering af resultater – eksempler på forskningsspørgsmål:
- Hvor tilfreds er du med vores produkt?
- Har programmet givet de tilsigtede resultater?
- Hvilke var de utilsigtede resultater?
- Har programmet øget deltagernes viden?
- Var deltagerne i programmet beskæftigelsesegnet, inden kurset startede?
- Har deltagerne i programmet de nødvendige færdigheder til at finde et job efter kursets afslutning?
- Er deltagernes viden bedre i forhold til dem, der ikke deltog i programmet?