Hva er inter-rater-pålitelighet og hva er typene og eksemplene på inter-rater-pålitelighet?
Intervurderers pålitelighet refererer til nivået som flere vurderere, dommere, inspektører eller takstmenn er enige om. Flere observatører involvert i observasjonsforskning vil gjøre vurderinger om observert atferd.
Observatørene vil være mer bekymret om de blir enige om et felles resultat eller ikke. Ulike inspektører som observerer for å få resultater vil ha forskjellige vurderinger.
Det er imidlertid viktig at enighetsnivået forbedres, da det øker den interne påliteligheten til en studie.
Hva er Inter-Rater-pålitelighet?
Intervurderers pålitelighet refererer til nivået som flere vurderere, dommere, inspektører eller takstmenn er enige om. Den måler samsvaret mellom subjektive vurderinger fra dommere, inspektører eller takstmenn.
La oss si at to eksperter ble sendt til sykehus for å observere ventetider og utseendet til venterom og undersøkelsesrom. Hvis de to ekspertene som er involvert i denne observasjonen er enige om alle punktene, vil inter-rater-pålitelighet være perfekt.
Høy inter-rater-pålitelighet betyr at to eller flere rater-vurderinger for samme vare er konsistente, mens lav reliabilitet indikerer at de er inkonsekvente.
For eksempel vurderer dommere ofte kvaliteten på akademiske skriveprøver ved å rangere prestasjoner fra 1-5.
Å få tilgang til inter-rater-pålitelighet er svært viktig for å forstå hvordan målesystemer sannsynligvis vil feilklassifisere en vare.
Les også: Hva er de sosiologiske konseptene? (Tips til studenter)
Inter-Rater vs. Intra-Rater pålitelighet
Intervurderers pålitelighet refererer til nivået som flere vurderere, dommere, inspektører eller takstmenn er enige om. Det er en forskjell mellom inter-rater-pålitelighet og intra-rater-pålitelighet.
Når en person dømmer en begivenhet over en lengre periode, er det viktig at de ikke er partiske i sine vurderinger.
Lærere forventes å gradere hver elevs arbeid i henhold til dette uavhengig av hvilken tid på dagen eller semesteret timene ble tatt. Det definerer pålitelighet mellom vurderer.
En enkel måte å sjekke for denne typen validitet er å bruke test-retest-designet. Det samme verket vil bli presentert for dommeren mer enn én gang for å sjekke om verket vil få samme poengsum.
Typer Inter-Rater-pålitelighet
Generelt er det to enkle metoder for å evaluere inter-rater-pålitelighet, som er prosentavtalen og Cohens Kappa.
Prosentavtale
Dette innebærer ganske enkelt å telle prosentandelen av ganger to vurderere ble enige om. Tallet vil variere fra 0-100 og når det er nærmere 100, desto større er enigheten.
Cohens Kappa
Prosentavtale og Cohens Kappa er veldig like. Formelen som brukes tar imidlertid hensyn til at vurderere noen ganger vil ha en felles enighet i seg selv.
Formelen vil sannsynligvis gi et tall som strekker seg fra 0 til 1 og jo nærmere 1, desto større grad av enighet.
Eksempler på pålitelighet mellom vurderinger
Inter-rater-pålitelighet måler samsvaret mellom vurderinger fra flere dommere eller vurderere, og her er noen eksempler;
Observasjonsforskning moderering
Observere hvordan par i et kjøpesenter samhandler mens to observatører vurderer oppførselen deres basert på hengivenhet eller nøytral.
Les også: Konsepter og konvensjoner for regnskap: Alt du trenger å vite
Karaktermoderasjon ved universitetet
Dette innebærer at erfarne lærere setter karakter på essayene til studenter som har sendt inn søknader om opptak til et akademisk program.
Få en ekstern ekspertgjennomgang av nye eksamener
Vanligvis spør en matematikklærer med mange års erfaring om å vurdere vanskelighetsgraden til spørsmål i en ny eksamen.
Erfarne og uerfarne profesjonelle som sammenligner notater
Be også eksperter i sykepleieryrket om å score ytelsen til nye sykepleiere som deltar i flere simulerte medisinske nødsituasjoner.
Erfarne fagfolk Vurdering Uerfarne kolleger.
Traineer som utfører HLR i førstehjelpskurs og deres prestasjoner blir vurdert av erfarne ambulansepersonell.
Mer detaljerte Intra-Rater pålitelighetseksempler
Flere forskere har tidligere utført observasjonsforskning for å forstå atferd.
Koding av de språklige mønstrene for foreldre/barn-interaksjoner
Det er viktig at forskere og lærere forstår faktorene som er involvert i språklig utvikling. Å få en bedre forståelse vil gi forskerne litt innsikt i en av de essensielle ferdighetene i barns utvikling.
Gode verbale ferdigheter spiller en viktig rolle for å utmerke seg i akademiske og generelt i livet.
På grunn av dette er mange forskere fortsatt viet til dette studieområdet. Observasjon av samspillet mellom foreldre og spedbarn har gitt mer nøyaktige data gjennom årene.
For å få resultater kan forskere ha trent observatører til å observere atferd nøye i hjemmene.
Når en forelder og et barn engasjerer seg i ulike samhandlingsaktiviteter, vil oppførselen deres bli observert av trente observatører og poengsum vil bli registrert.
Forskeren vil vurdere inter-rater-påliteligheten til sine vurderinger for å sikre at registrerte poengsum er pålitelige.
Ainsworth Strange Situations Test
Den kjente amerikansk-kanadisk utviklingspsykolog, Dr. Mary Ainsworth, skapte en laboratoriemetode for å evaluere tilknytningsstilen til spedbarn.
En enkel måte å overvåke barnets oppførsel på er å observere alt bak et toveis speil. De trente observatørene som sitter bak toveisspeilet vil vurdere barnets handling når moren kommer tilbake.
Bedømme påliteligheten til en dommer ved en smakskonkurranse
Resultatet av en smakskonkurranse vil enten markedsføre et produkt eller sette bedrifter ut av drift.
Siden det er så mye som står på spill ved dette arrangementet, er det flere grunner til å tvile på dommernes troverdighet. En enkel beslutning kan påvirke salget av et produkt i markedet.
For å sikre at dommerne ikke er forutinntatte i vurderingene, ble et annet panel på fire dommere invitert til å smake på replikatprøver av 30 drikkevarer som deltok i en California-konkurranse.
Rundt 68 dommere deltok i gjennomføringen hvert år og de vurderte produktene på samme skala i konkurransen. Bare rundt 10 % av dommerne gjentok vurderingene de ga under konkurransen.
Les også: Eksempler på institusjonell rasisme (tips for studenter)
Bandura Bobo dukkestudie
I løpet av 1960-tallet ble en av de mest innflytelsesrike studiene innen psykologi utført av den kanadisk-amerikanske psykologen Dr. Albert Bandura.
De studie involvert lar små barn se en video der en voksen er aggressiv eller ikke-aggressiv mot en Bobo-dukke.
Barna ble tatt med til et eget rom med Bodo-dukken og de ble observert nøye mens de lekte med den.
Bedømme Synkronsvømming
Under synkronsvømmekonkurranser blir ytelsen gjennomgått og vurdert av et dommerpanel. Antall dommere kan være mer enn 20 under en konkurranse for å vurdere kvaliteten på rutiner.
Les også: Eksempler på sjekker og saldoer (tips for studenter)
Hvordan beregne inter-rater-pålitelighet
Det er flere metoder for å beregne intra-rater pålitelighet, som inkluderer;
- Prosentavtale
- Cohens Kappa
- Krippendorffs alfa
- Spearman's Rho
Ofte Stilte Spørsmål
Nedenfor er vanlige spørsmål om eksempler på pålitelighet mellom vurderere.
Hva er forskjellen mellom test-retest og intra-rater-pålitelighet?
Test-retestdesign og inter-rater-pålitelighet er i stand til å sjekke om en person vil få samme poengsum til forskjellige tider. Mens testdesignet for retest brukes til å teste påliteligheten til en hvilken som helst objektivt scoret test, tester inter-rater-reliabiliteten om scoreren vil gi en lignende poengsum under en subjektiv vurdering.
Hva er interscorer-pålitelighet?
I en situasjon der mer enn én person overvåker vurderinger eller vurdering av folk, er det viktig at de tar de riktige og lignende avgjørelsene.
Interscorers reliabilitet er et mål på graden av enighet mellom dommere.
konklusjonen
Intervurderers pålitelighet refererer til nivået som flere vurderere, dommere, inspektører eller takstmenn er enige om. Folk vil akseptere resultatet av psykologisk forskning, da de for det meste stoler på evalueringen av trente observatører.
Vurdere er opplært riktig i hva de skal observere og hvordan de skal klassifisere observasjonene sine effektivt. De må forstå hvordan de skal klassifisere sine observasjoner før data samles inn.
Anbefalinger
- 10 franskmenns fysiske egenskaper og trekk
- Hva er eksemplene på sosial ulikhet? (Tips til studenter)
- 20 eksempler på moral og etikk (tips til studenter)
- 45 beste talenteksempler (tips for studenter)
- Topp tegn på at barnet ditt trenger matematikkundervisning
Referanser
- Hjelpsomme professorer: 15 Eksempler på pålitelighet mellom vurderinger
- Statistikkbyjim: Inter-Rater Reliability: Definisjon, eksempler og vurdering
- Study.com: Hva er Inter-Rater-pålitelighet?
- Link.Springer: Inter-rater pålitelighet
- ScienceDirect: Interbehandleravtale og interbehandlerpålitelighet: Nøkkelkonsepter, tilnærminger og applikasjoner
- SimplyPsychology: Banduras Bobo Doll Experiment on Social Learning
Legg igjen en kommentar