Reliabilitets-, validitets- och diskriminationsmått för kriterierelaterade prov

• Denna undersökning har teoretiskt och empiriskt behandlat reliabilitets-, validitets- och diskriminationsrnått i anslutning till kriterierelaterade prov. Syftet med den empiriska studien var att undersöka relationer mellan olika diskriminationsrnått och vilka reliabilitets- och validi-tetseffekter som urval av uppgifter med dessa mått medförde. De olika diskriminationsmåtten var överlag måttligt interkorrelerade. Särskilt intressant att observera var de måttliga interkorrelationerna mellan de tre diskriminationsmåtten definierade som differensen i lösningaproportion mellan a) de 27 % bästa och de 27 % sämsta individerna utifrån eftertestningens resultat, b) resultaten på för-, och eftermätning och c) resultaten från en expertgrupp och en icke-expertgrupp. Reliabiliteten definierad som överensstämmelsen mellan resultaten vid två mättillfällen påverkades positivt oavsett vilket av de tre diskriminationsmåtten a), b) eller c) som användes för urval av uppgifter. Beträffande de beslutsorienterade reliabilitets-måtten var emellertid effekterna något olika för olika uppgiftsurval. Resultaten visade också att en ökning av reliabiliteten inte nödvändigtvis be-höver innebära en ökning av validiteten definierad som skillnaden mellan resultaten på en för- och eftermätning. Avslutningsvis behandlas begränsningar i undersökningen och förslag till-fortsatta prövningar ges.

• This study has, theoretically and empirically, dealt with reliability, validity and discrimination measures in connection with criterion-referenced tests. The purpose of the empirical study was to investigate relations between different discrimination' measures and what effects on reliability and validity that selection of items gave with the help of these measures. The different discrimination measures were on the whole moderately intercorre-lated. It was especially interesting to observe the moderate intercorrelations between the three discrimination measures defined as the differences in item difficulty between a) the upper and lower 27 per cent of the subjects according to the results of the posttest, b) the results of the pre- and posttests and c) the results from an expert group as well as a non-expert one. The reliability defined as the agreement between the results of two posttests was positively influenced no matter which one of the three discrimination measures a), b) or c)that was used for the selection of the items. As for the decision-oriented reliability measures the effects were, however, somewhat different for the 'different selections of items. Moreover, the results showed that an increase in reliability does not necessarily imply an increase in validity defined "as the difference between the results of pre- and posttests. Finally restrictions of the study are dealt with and suggestions for further investigations are made.

Ämnesord

SAMHÄLLSVETENSKAP  -- Utbildningsvetenskap -- Pedagogik (hsv//swe)

SOCIAL SCIENCES  -- Educational Sciences -- Pedagogy (hsv//eng)

Publikations- och innehållstyp

vet (ämneskategori)

rap (ämneskategori)