Dit is een site voor studenten van de Open Universiteit. Voordat je een vraag kunt stellen moet je even een account aanmaken (dit systeem is niet gekoppeld aan je OU studentnummer en wachtwoord).

Welkom bij het vraag- en antwoord systeem van de onderzoeks-practica van de studie psychologie bij de Open Universiteit.

Houd er, als je een vraag stelt, rekening mee dat je de richtlijnen volgt!

Analyse gegevens opdracht om reliability toetscriteria van rubric te testen. [gesloten]

0 leuk 0 niet-leuks
Ik heb gegevens verzameld van 2 opdrachten met 36 en 37 participanten, beoordeeld aan de hand van een rubric met 4 toetscriteria. Van ieder participant heb ik geslacht, 4x een score op toetscriteria 1 t/m 4 bij docent RC, een cijfer bij RC, 4x een score op toetscriteria 1 t/m 4 bij docent WE, een cijfer bij WE.

Voor analyse heb ik de correlaties tussen de scores en het cijfer van docent RC vergeleken met die van docent WE, voor inter-rater reliability.

Dat levert Pearson's r op: uit cursus OU 2014 Kwantitatieve Data-Analyse, bron Samenhang tussen twee variabelen: correlatieanalyse, blad 4, maak ik de waarden op: .10-.40 zwak positief, .40-.70 middelmatig positief, .70-.90 sterk positief;

VRAAG: welke conclusie kan ik verbinden aan waarden van Pearson's r: dat een sterk positief verband wijst op een samenhang tussen scores en als dat het geval is dat het toetscriterium uit de rubric dus een geschikt criterium is?

Daarnaast heb ik met dezelfde gegevens de ICC (IntraClass Correlation) berekend, model two-way mixed, type absolute agreement en ook type consistency; de hoogst gevonden ICC's liggen tussen .600 en .700; er zijn er twee boven .700, nl. .739 en .750;

VRAAG: hoe moet ik die gevonden waardes interpreteren? Is een waarde tussen .600 en .700 bruikbaar als indicatie dat de twee scores van de raters op een toetscriterium uit de rubric wijzen op de geschiktheid van het toetscriterium?

VRAAG: Is er nog een andere statistische analyse mogelijk voor deze gegevens, om reliability te bekijken?
Gesloten met het bericht: Deze vraag is dermate omvangrijk dat deze buiten de 'scope' van deze site valt. Bespreek dit met je begeleider, en als die er niet uitkomt, laat je begeleider dan een statistisch consult aanvragen met een van de methodologen/statistici van de faculteit.
gevraagd 28 juni 2017 in Methodologie door 851751351 (120 punten)
gesloten 29 juni 2017 door gjp
...