Statistisk signifikansRediger
Statistisk signifikans anvendes ved hypotesetestning, hvor nulhypotesen (at der ikke er nogen sammenhæng mellem variabler) testes. Der vælges et signifikansniveau (oftest α = 0,05 eller 0,01), som angiver sandsynligheden for, at en sand nulhypotese fejlagtigt forkastes. Hvis der er en signifikant forskel mellem to grupper ved α = 0,05, betyder det, at der kun er 5 % sandsynlighed for at opnå de observerede resultater under den antagelse, at forskellen udelukkende skyldes tilfældigheder (dvs. at nulhypotesen er sand); det giver ingen indikation af størrelsen eller den kliniske betydning af forskellen. Når der opnås statistisk signifikante resultater, taler de for en forkastelse af nulhypotesen, men de beviser ikke, at nulhypotesen er falsk. Ligeledes beviser ikke-signifikante resultater ikke, at nulhypotesen er sand; de giver heller ikke noget bevis for sandheden eller falskheden af den hypotese, som forskeren har opstillet. Statistisk signifikans vedrører kun foreneligheden mellem de observerede data og det, der ville være forventet under den antagelse, at nulhypotesen er sand.
Praktisk signifikansRediger
I bred brug besvarer den “praktiske kliniske signifikans” spørgsmålet, hvor effektiv interventionen eller behandlingen er, eller hvor stor en ændring behandlingen medfører. I forbindelse med afprøvning af kliniske behandlinger giver praktisk signifikans optimalt set kvantificeret information om betydningen af et fund ved hjælp af målestokke som effektstørrelse, number needed to treat (NNT) og forebyggende fraktion. Praktisk signifikans kan også formidle semikvantitative, sammenlignende eller gennemførlighedsvurderinger af nytteværdi.
Effektstørrelse er en type praktisk signifikans. Den kvantificerer det omfang, i hvilket en prøve afviger fra forventningerne. Effektstørrelse kan give vigtige oplysninger om resultaterne af en undersøgelse og anbefales at blive medtaget ud over statistisk signifikans. Effektstørrelser har deres egne kilder til bias, er underlagt ændringer baseret på populationens variabilitet af den afhængige variabel og har tendens til at fokusere på gruppeeffekter og ikke på individuelle ændringer.
Men selv om klinisk signifikans og praktisk signifikans ofte anvendes synonymt, betegner en mere teknisk restriktiv brug dette som fejlagtigt. Denne tekniske brug inden for psykologi og psykoterapi er ikke kun et resultat af en omhyggeligt udarbejdet præcision og partikularitet i sproget, men den muliggør et perspektivskifte fra gruppeeffekter til det specifikke ved ændring(er) inden for et individ.
Specifik brugRediger
I modsætning hertil, når den anvendes som et teknisk udtryk inden for psykologi og psykoterapi, giver klinisk signifikans oplysninger om, hvorvidt en behandling var effektiv nok til at ændre en patients diagnostiske etiket. Med hensyn til kliniske behandlingsundersøgelser besvarer klinisk signifikans spørgsmålet: “Er en behandling effektiv nok til at få patienten til at blive normal ?”
For eksempel kan en behandling ændre depressive symptomer signifikant (statistisk signifikans), ændringen kan være et stort fald i depressive symptomer (praktisk signifikans – effektstørrelse), og 40 % af patienterne opfylder ikke længere de diagnostiske kriterier for depression (klinisk signifikans). Det er meget muligt at have en behandling, der giver en signifikant forskel og mellemstore eller store effektstørrelser, men som ikke flytter en patient fra dysfunktionel til funktionel.
Inden for psykologi og psykoterapi blev klinisk signifikans først foreslået af Jacobson, Follette og Revenstorf som en måde at besvare spørgsmålet, om en terapi eller behandling er effektiv nok til, at en klient ikke opfylder kriterierne for en diagnose. Jacobson og Truax definerede senere klinisk signifikans som “det omfang, i hvilket terapi flytter en person uden for den dysfunktionelle population eller inden for den funktionelle population”. De foreslog to komponenter i dette indeks for forandring: patientens eller klientens status efter endt terapi og “hvor meget forandring der er sket i løbet af terapien.”
Klinisk signifikans er også en overvejelse, når man fortolker resultaterne af den psykologiske vurdering af en person. Ofte vil der være en forskel i scorer eller subscorer, som er statistisk signifikant, hvilket er usandsynligt, at den udelukkende er opstået ved en tilfældighed. Det er imidlertid ikke alle disse statistisk signifikante forskelle, der er klinisk signifikante, idet de hverken forklarer eksisterende oplysninger om klienten eller giver en nyttig retning for intervention. Forskelle, der er små i størrelsesorden, mangler typisk praktisk relevans og er sandsynligvis ikke klinisk signifikante. Forskelle, der er almindelige i befolkningen, er sandsynligvis heller ikke klinisk signifikante, fordi de måske blot afspejler et niveau af normal menneskelig variation. Derudover søger klinikere efter oplysninger i vurderingsdataene og klientens historie, der bekræfter relevansen af den statistiske forskel, for at etablere forbindelsen mellem præstationen på den specifikke test og den enkeltes mere generelle funktionsmåde.