Die Matrizenkonstruktionsaufgabe

Abstract

Figurale Matrizenaufgaben stellen eine bedeutsames Aufgabenformat im Bereich der Diagnostik kognitiver Fähigkeiten dar. Während die Konstruktion der Aufgabenstämme in der Literatur relativ gut dokumentiert ist, finden sich nur wenige Hinweise zur Konstruktion der für die Vorgabe benötigten Distraktoren. Dies erweist sich als problematisch, da ein Einfluss der Distraktorgestaltung auf das Bearbeitungsverhalten von Testpersonen vermutet werden kann. Die Matrizenkonstruktionsaufgabe stellt ein alternatives Format zur Vorgabe figuraler Matrizen dar. In diesem müssen die Testpersonen die Lösung der Aufgaben in einer computerisierten Testumgebung selbst konstruieren, weshalb auf die Verwendung von Distraktoren verzichtet werden kann. Im Rahmen der Studie wurden einer Stichprobe von 318 Studierenden 40 Matrizenkonstruktionsaufgaben vorgegeben. Die Ergebnisse deuten auf eine gute psychometrische Eignung des Aufgabenformats hin: Es konnte eine große Bandbreite an Aufgabenschwierigkeiten realisiert werden. Die Aufgaben erfassen eine latente Fähigkeitsdimension und weisen eine gute Konstrukt- und Kriteriumsvalidität auf. In der Diskussion werden Perspektiven zur Weiterentwicklung des Aufgabenformats besprochen.

Complex problem solving and intelligence: A meta-analysis

“…Analyzing the behavioral patterns that individuals engage in when dealing with CPS tasks provides insights that go beyond mere final outcome scores and provides access to aspects of the cognitive process underlying specific problem solving behavior. Such in-depth log-file analyses have become technically feasible for CPS research (Scherer, Greiff, & Hautamäki, 2015) and could be extended to intelligence testing (Kröner, 2001) in which the possibilities of computer-based assessment such as log-file data are not fully used yet (Becker, Preckel, Karbach, Raffel, & Spinath, 2015). Getting access to the behaviors displayed and strategies employed by participants in assessments of intelligence could lead to a more thorough understanding of not only the assessment instruments themselves but more importantly of the whole construct of intelligence.…”

Effects of Response Format on Psychometric Properties and Fairness of a Matrices Test: Multiple Choice vs. Free Response

“…Whereas, all of these results on sex differences were derived from matrices tests based on MC response format, only few studies have employed matrices tests based on FR format so far. They reported small sex differences in favor of men (e.g., Becker et al, 2014) or no significant differences between men and women (e.g., Piskernik, 2013). To examine the potential role of response format for the emergence of sex differences, matrices tests must be presented in an item-equivalent MC and FR version.…”

Preventing Response Elimination Strategies Improves the Convergent Validity of Figural Matrices

“…Nevertheless, a time limit of 90 s per item was implemented to ensure time economy and to guarantee that every respondent had the opportunity to work on every item. The time limit was determined on the basis of the response times observed in one of our previous studies [22]. In that study, the vast majority of participants responded well below 90 s, even when no time limit was given.…”

“…Stevenson, Hickendorff, Resing, Heiser, and de Boeck [20], as well as Piskernik and Debelak [21], developed computerized matrix-like reasoning tasks for which the response has to be constructed. In a recent study involving figural matrices, we too developed an item format that works without distractors and offers an objective way to obtain and score the testees' responses [22]. The format, which we call the construction task, is presented in Figure 2.…”