title: Die psychometrische Qualität von Realkennzeichen
title: Psychometric Characteristics of the Criteria Based Content Analysis
Creators: name: Steck, Peter
name: Hermanutz, Max
name: Lafrenz, Bianca
name: Schwind, Domenica
name: Hettler, Stefanie
name: Maier, Barbara
name: Geiger, Susanne
Publisher: name: Hochschule Hannover
Year: 2010
Subjects: subject: 150 Psychologie

description: Die vorliegende Arbeit fasst zwei Untersuchungen zu psychometrischen Eigenschaften der in der aussagepsychologischen Diagnostik verwendeten merkmalsorientierte Inhaltsanalyse zusammen. Die erste Untersuchung war Teil einer größeren Laborstudie zur Validität inhaltsanalytischer Beurteilungen der Wahrhaftigkeit von Zeugenaussagen mit 60 Versuchspersonen, die verschiedenen Bedingungen von Wahr- und Falschaussagen zugeordnet waren, die zweite, eine Felduntersuchung, erfasste 138 Gutachten eines gerichtspsychologischen Institutes. In beiden Studien wurden die Items der merkmalsorientierten Inhaltsanalyse, die so genannten Realkennzeichen, einer Itemanalyse nach dem Modell der klassischen Testtheorie mit Reliabilitätsschätzung für den Score aggregierter Realkennzeichen unterzogen. Die Ergebnisse differierten beträchtlich: Während in der Laborstudie nur ein Teil der für die Realkennzeichen errechneten Trennschärfekoeffizienten das vorgegebene Signifikanzniveau (p &lt; .05) erreichte und die Reliabilitätsschätzung mit rtt = .56 niedrig ausfiel, wurden in der Feldstudie fast durchgehend signifikante Trennschärfen ermittelt, und die Reliabilitätsschätzung entsprach mit rtt = .84 dem bei Persönlichkeitstests üblichen Niveau. Durch Itemselektion konnte in beiden Fällen die Reliabilität nur geringfügig gesteigert werden. Die in der Laborstudie errechnete Interraterreliabilität für den Score aggregierter Realkennzeichen betrug r = .98. In der Feldstudie wurde über eine logistische Regression ein Cut-Off-Wert errechnet, der von psychologischen Gutachtern als wahr eingeschätzten Aussagen von als falsch beurteilten trennte. Dieser Cut-Off-Wert lag zwischen fünf und sechs erfüllten Realkennzeichen. Unter der experimentellen Manipulation des Wahrheitsgehaltes von Aussagen in der Laborstudie konnte die Validität der merkmalsorientierten Inhaltsanalyse nur partiell bestätigt werden. Diese trennte zwar wahre und erfundene Aussagen signifikant voneinander, nicht aber wahre Aussagen von Täuschungen mit realem Erlebnishintergrund.
description: The present article combines two studies on psychometric characteristics of the Criteria Based Content Analysis (CBCA) used in the psychological assessment of testimonies. The first study was part of a larger laboratory study on the validity of content analytic judgments of the credibility of testimonies. This study was conducted with 60 subjects who were assigned to different conditions of true und false testimonies. The second study, a field study, covered 138 expert reports from a forensic psychological institution. An item analysis according to the model of the classical test theory, with reliability estimation for the score of the aggregated credibility criteria, was made with the CBCA items in both studies. The results varied considerably: Whereas only a part of the discriminative power coefficient calculated for the credibility criteria reached the given significance level (p