Search

Developmental psychology 57 (2021) 8, S. 1372-1386, High sleep quality has been associated with beneficial outcomes across the life span. Intensive longitudinal studies suggest that these beneficial effects can also be observed on a day-to-day level. However, the dynamic interplay between subjective sleep quality and affective well-being in children's daily life has only rarely been investigated. The aims of the present work were (a) to replicate findings from a prior ambulatory assessment study in this area (Könen et al., 2016), (b) to explore the effect of subjective sleep quality on well-being throughout the day, and (c) to examine the reciprocal relation between subjective sleep quality and well-being in more detail. Data from two ambulatory assessment studies with children between 8 and 11 years (N = 108/84, with assessments over 28/21 consecutive days) consistently showed that positive affect was higher and negative affect was lower after nights with better sleep quality, and that the effects of subjective sleep quality were stronger on well-being assessed in the morning compared with later in the day. Results from dynamic structural equation models revealed reciprocal effects of subjective sleep quality and positive affect. Negative affect was not consistently related to worse subsequent sleep quality after controlling for positive affect and prior night's sleep quality. Results suggest a close relation of sleep quality and positive affect, which strengthens the idea behind interventions targeting both, children's sleep and well-being. Differences between children in the dynamic interplay between sleep and affect may be important predictors of long-term outcomes. (DIPF/Orig.)

The Journal of educational psychology 113 (2021) 5, S. 861-878, Efficiency in reading component skills is crucial for reading comprehension, as efficient subprocesses do not extensively consume limited cognitive resources, making them available for comprehension processes. Cognitive efficiency is typically measured with speeded tests of relatively easy items. Observed responses and response times indicate the latent variables of ability and speed. Interpreting only ability or speed as efficiency may be misleading because there is a within-person dependency between both variables (speed-ability tradeoff [SAT]). Therefore, the present study measures efficiency as ability conditional on speed by controlling speed experimentally with item-level time limits. The proposed timed ability measures of reading component skills are expected to have a clearer interpretation in terms of efficiency and to be better predictors for reading comprehension. To support this claim, this study investigates two component skills, visual word recognition and sentence-level semantic integration (sentence reading), to understand how differences in ability in a timed condition are related to differences in ability and speed in a traditional untimed condition. Moreover, untimed and timed reading component skill measures were used to explain reading comprehension. A German subsample from Programme for International Student Assessment (PISA) 2012 completed the reading component skills tasks with and without item-level time limits and PISA reading tasks. The results showed that timed ability is only moderately related to untimed ability. Furthermore, timed ability measures proved to be stronger predictors of sentence-level and text-level reading comprehension than the corresponding untimed ability and speed measures, although using untimed ability and speed jointly as predictors increased the amount of explained variance. (DIPF/Orig.)

Schweizerische Zeitschrift für Bildungswissenschaften 44 (2022) 2, S. 167-179, Der Zusammenhang zwischen sprachlicher und mathematischer Kompetenz wurde für Schülerinnen und Schüler des dritten Schuljahres im Hinblick auf zwei Sprachmasse und drei mathematische Inhaltsbereiche untersucht (N = 215). Dabei zeigen sich für beide Sprachmasse erhebliche Zusammenhänge mit den Leistungen bei mathematischen Textaufgaben, aber ebenso bei relativ spracharmen, ikonisch repräsentierten geometrischen Aufgaben. Deutlich wird, dass bekannte Zusammenhänge zwischen sprachlichen und mathematischen Leistungen im Hinblick auf die Aufgabengestaltung, aber auch bezüglich des mathematischen Inhaltsbereichs vertieft analysiert werden sollten, um ein entsprechendes Potenzial für eine sprachbewusste und fach- bzw. inhaltsfokussierte Lernbegleitung und Förderung entfalten zu können. (DIPF/Orig.), The relationship between linguistic and mathematical performance was examined for third-year pupils with regard to two language measures and three mathematical content areas (N = 215). For both language measures, considerable correlations were found with the performance in mathematical text tasks, but also with relatively language-poor, iconic geometric tasks. It becomes clear that known correlations between linguistic and mathematical performance should be analyzed in greater depth with regard to the task design, but also with regard to the mathematical content area, in order to be able to develop a corresponding potential for language-conscious and subject- or content-focused learning support and encouragement. (DIPF/Orig.)

A study was conducted using a correlational screening model to determine the mediating effect of altruism in the relationship between empathic tendencies, the nature relatedness and environmental consciousness. The participants of the study, selected via random cluster sampling design, are composed of 305 pre-school teachers working in pre-schools and kindergartens in a city located in Turkey’s Aegean region. The ‘Empathic Tendency Scale’, ‘Altruism Scale’, ‘Nature Relatedness Scale’, and ‘Environmental Consciousness Scale’ were used as data collection tools. The analyses of the sub-purposes were carried out using the PROCESS macro (Model 4) developed by Andrew Hayes using the SPSS infrastructure. When the study results were examined, the indirect effects of the empathic tendency on nature relatedness and environmental consciousness were found to be significant. Thus, altruism was the mediator for the relationship between the empathic tendency and nature relatedness (β=.13, 95% BCA CI [.08; .19]) and for the relationship between emphatic tendency and environmental consciousness (β=.36, %95 BCA CI [.18; .57]).

International journal for research in vocational education and training 9 (2022) 2, S. 216-238, Context: Scaffolding is a form of process-adaptive learning support that is relevant in numerous contexts, including informal learning, workplace learning as well as school teaching. While scaffolding can be well conceptualised for individual learning situations (especially for tutoring situations), there is a difficulty in measuring process adaptivity in heterogeneous learning groups, such as school classes. Approach: In this paper, we develop a measurement method that targets the deep structure of teaching and learning in whole class settings. Processes of shared knowledge constructions are taken into account, since whole-class-scaffolding (WCS) means to shape and develop common or joint knowledge spaces rather than to scaffold a multitude of individual construction processes at the same time. To achieve a coding procedure for WCS interactions, we integrate scaffolding principles and principles of dialogic teaching and explicated a set of rules that can be correlated to the quality of WCS-episodes rated on distinct Likert scales. Results: The measurement method developed in the paper provides a solution to the problem of how to measure process-adaptive learning support that is not only related to individual learners, but is directed at a heterogeneous group of learners in which different support needs may be present simultaneously. The coding procedure systematically links scaffolding principles and principles of dialogic teaching and enables us to capture the dynamics of teaching and learning processes in larger group settings. In this respect, concepts such as joint- and common space, representing entities to which WCS refers, are operationalised. Conclusions: When methods for measuring the dynamics of teaching and learning processes are available, research on instructional support is no longer limited to global ratings of whole learning units. Furthermore, the codings allow for a more fine-grained analysis of trajectories of scaffolding interactions. Such an analysis reveals information about local specifics of WCS that can explain further learning differences between students and that can be used to derive implications for effective instructional techniques. (DIPF/Orig.)

Die Grundidee von Ver��nderung- und Unterschiedsmessung ist, dass Mittelwertdifferenzen zwischen Messzeitpunkten oder Gruppen die Variabilit��t eines Konstrukts abbilden. Dies bedarf der Messinvarianz. Das Fehlen von Messinvarianz kann jedoch selbst Ver��nderung oder Unterschied anzeigen. Daraus resultieren grundlegende epistemologische Probleme: Die Vorbedingung f��r die Messung von Ver��nderung kann selbst auch Ver��nderung bedeuten. Wir erl��utern diese Problematik und schlagen eine L��sung vor. (DIPF/Orig.), The idea of change- and difference-measurement is that mean-differences between measurement-times, or groups, reflect the variability of a construct. This requires measurement-invariance. The absence of measurement-invariance, however, can mean the change of the construct. Epistemological problems result from this: The precondition for change may imply change, but it also renders it untestable. We explain this problem and remind of a solution. (DIPF/Orig.)

Large-scale assessments in education (2021) 9, 25 S., International large-scale assessments such as PISA or PIAAC have started to provide public or scientific use files for log data; that is, events, event-related attributes and timestamps of test-takers' interactions with the assessment system. Log data and the process indicators derived from it can be used for many purposes. However, the intended uses and interpretations of process indicators require validation, which here means a theoretical and/or empirical justification that inferences about (latent) attributes of the test-taker's work process are valid. This article reviews and synthesizes measurement concepts from various areas, including the standard assessment paradigm, the continuous assessment approach, the evidence-centered design (ECD) framework, and test validation. Based on this synthesis, we address the questions of how to ensure the valid interpretation of process indicators by means of an evidence-centered design of the task situation, and how to empirically challenge the intended interpretation of process indicators by developing and implementing correlational and/or experimental validation strategies. For this purpose, we explicate the process of reasoning from log data to low-level features and process indicators as the outcome of evidence identification. In this process, contextualizing information from log data is essential in order to reduce interpretative ambiguities regarding the derived process indicators. Finally, we show that empirical validation strategies can be adapted from classical approaches investigating the nomothetic span and construct representation. Two worked examples illustrate possible validation strategies for the design phase of measurements and their empirical evaluation. (DIPF/Orig.)

Educational psychology review 33 (2021) 3, S. 1191-1211, The article focuses on estimating effects in nonrandomized studies with two outcome measurement occasions and one predictor variable. Given such a design, the analysis approach can be to include the measurement at the previous time point as a predictor in the regression model (ANCOVA), or to predict the change-score of the outcome variable (CHANGE). Researchers demonstrated that both approaches can result in different conclusions regarding the reported effect. Current recommendations on when to apply which approach are, in part, contradictory. In addition, they lack direct reference to the educational and instructional research contexts, since they do not consider latent variable models in which variables are measured without measurement error. This contribution assists researchers in making decisions regarding their analysis model. Using an underlying hypothetical data-generating model, we identify for which kind of data-generating scenario (i.e., under which assumptions) the defined true effect equals the estimated regression coefficients of the ANCOVA and the CHANGE approach. We give empirical examples from instructional research and discuss which approach is more appropriate, respectively. (DIPF/Orig.)

Psychological Assessment 33 (2021) 9, S. 827-842, Rumination and worry are common forms of perseverative cognition in children. Research has started to target perseverative cognitions in the everyday life of children, however, valid measurement instruments reliably capturing rumination and worry in children's daily life are still missing. We conducted two ambulatory assessment studies validating short scales suitable for the measurement of rumination and worry in children's daily life. Results of the first study (N = 110, 8-11 year-olds, 31 days, up to 4 daily measurements) supported a unidimensional structure of the rumination scale. Rumination was associated with negative affect (but not positive affect) on the within- and on the between-person level. On the between-person level, children who ruminated more showed poorer working memory performance. In the second study (N = 84, 8-10 year-olds, 21 days, up to 3 daily measurements), findings of Study 1 were largely replicated. Moreover, we established a unidimensional worry scale in Study 2 reliably capturing worry in children's daily life. Importantly, Study 2 showed that worry and rumination share common variance but can be differentiated in children. On the within-person level, higher levels of worry were associated with higher levels of negative affect and lower levels of positive affect. On the between-person level, worry was associated with higher levels of negative affect and lower working memory performance. Altogether, findings of both studies demonstrated that the short scales had excellent psychometric properties suggesting that they are helpful tools for the assessment of rumination and worry in children's daily life.person level, worry was associated with higher levels of negative affect and lower working memory performance. Altogether, findings of both studies demonstrated that the short scales had excellent psychometric properties suggesting that they are helpful tools for the assessment of rumination and worry in children's daily life. (DIPF/Orig.)

Weinheim; Basel : Beltz Juventa 2020, 268 S. - (Zeitschrift für Pädagogik, Beiheft; 66), Ziel des 66. Beiheftes ist es, basierend auf dem aktuellen Erkenntnisstand, aber auch aus einer Meta-Perspektive heraus, zentrale theoretische und methodologische Herausforderungen des Forschungsfeldes Unterrichtsqualität zu identifizieren und eine Plattform für die dezidiert (selbst-)kritische Auseinandersetzung mit diesen zu bieten. (DIPF/Orig.)

European journal of psychological assessment 36 (2020) 4, S. 526-536, This study examines the latent structure of the Rahim Organizational Conflict Inventory - II (ROCI-II) in several samples of secondary school students. Findings from earlier studies conducted in adult populations suggested that the instrument has a four- or five-factor structure; however, the exploratory factor analysis (EFA) in this study yielded a three-factor (integrating, dominating, avoiding) solution, with most of the items associated with a fourth factor (Obliging) failing to load as predicted. A confirmatory factor analysis (CFA) replicated the three-factor solution satisfactorily. A multiple-group CFA indicated that the ROCI-II showed invariant measurement properties in male and female students and corroborated the concurrent validity of the three-factor solution. The integrating factor was related positively to a measure of perspective taking but negatively to a measure of reluctance to participate. The avoiding factor was associated with a measure of reluctance to participate. We discuss the implications of the results for understanding the latent structure of the ROCI-II in adolescents. (DIPF/Orig.)

The Journal of educational psychology 112 (2020) 8, S. 1546-1562, In large-scale assessments, performance differences across different groups are regularly found. These group differences (e.g., gender differences) are often relevant for educational policy decisions and measures. However, the formation of these group differences usually remains unclear. We propose an approach for investigating this formation by considering behavioral process measures as mediating variables between group membership and performance on the 2012 Programme for International Student Assessment complex problem solving (CPS) items. We found that across all investigated countries interactive behavior can fully explain gender differences in CPS, but cannot explain differences between students with and without a migration background. However, in some countries these results differ from the cross-country results. Our results indicate that process measures derived from log data are useful for further investigating and explaining performance differences between girls and boys and students with and without migration background. (DIPF/Orig.)

Im bildungswissenschaftlichen Studienteil der universit��ren Lehrerbildung in Deutschland sollen angehende Lehrkr��fte f��cher��bergreifendes Grundlagenwissen aufbauen, das sie zur professionellen Aus��bung ihres Berufs ben��tigen. Im Forschungsprogramm BilWiss wurde zun��chst im Kontext des Landes Nordrhein-Westfalen ein Wissenstest entwickelt, der zentrale Inhalte des bildungswissenschaftlichen Studienteils erfasst. In zwei Studien untersucht der vorliegende Beitrag, ob die Testinhalte auch bundesweit dem intendierten bildungswissenschaftlichen Curriculum in der universit��ren bildungswissenschaftlichen Lehrerbildung entsprechen. Sowohl l��nderspezifische Experteneinsch��tzungen als auch ein Vergleich der Testinhalte mit bundesweiten bildungswissenschaftlichen Standards f��r die Lehrerbildung weisen darauf hin, dass der Test bundesl��nder��bergreifend anwendbar ist. (DIPF/Orig.), In their studies on educational foundations as a part of pre-service teacher training in Germany, pre-service teachers are supposed to develop the generic knowledge needed for professional behavior in their job as a teacher. The research program BilWiss developed a test on educational knowledge within the context of the federal state of North-Rhine Westphalia (NRW) covering relevant content of educational foundations in pre-service teacher training. In two studies, the present paper investigates whether the test content corresponds to the intended academic teacher training curriculum at federal level. Both state delegates' expert ratings and the comparison of the test content with federal standards on the subject unspecific, educational part of pre-service teacher training indicate that the test can be applied across federal states. (DIPF/Orig.)

Valid cross-country comparisons of student learning and pivotal factors contributing to it, such as teaching quality, offer the possibility to learn from outstandingly effective educational systems across the world and to improve learning in classrooms by providing policy relevant information. Yet, it often remains unclear whether the instruments used in international large-scale assessments work similarly across different cultural and linguistic groups, and thus can be used for comparing them. Using PISA 2012 data, we investigated data comparability of three teaching quality dimensions, namely student support, classroom management, and cognitive activation using a newly developed psychometric approach, namely alignment. Focusing on 15 countries, grouped into five linguistic clusters, we secondly assessed the impact of linguistic similarity on data comparability. Main findings include that (1) comparability of teaching quality measures is limited when comparing linguistically diverse countries; (2) the level of comparability varies across dimensions; (3) linguistic similarity considerably enhances the degree of comparability, except across the Chinese-speaking countries. Our study illustrates new and more flexible possibilities to test for data comparability and outlines the importance to consider cultural and linguistic differences when comparing teaching-related measures across groups. We discuss possible sources of lacking data comparability and implications for comparative educational research. (DIPF/Orig.)

In der aktuellen Lehrer*innenbildungsforschung spielt eine kriteriumsbezogene Testwertinterpretation zur Beschreibung von Kompetenzen nur eine untergeordnete Rolle, obwohl sie im Vergleich zu normbezogenen Aussagen als angemessener bewertet wird. Eine an Standards ausgerichtete Lehrer*innenausbildung erfordert jedoch die inhaltliche Beschreibung von Anforderungsniveaus, weil erst dadurch konkrete Aussagen dar��ber getroffen werden k��nnen, welche Personen ��ber welche Kompetenzen verf��gen. Der Beitrag begegnet dem Desiderat, indem ein Kompetenzniveaumodell im p��dagogischen Wissen von angehenden Lehrkr��ften konstruiert und gepr��ft wird. In die Analyse wird eine Stichprobe von 1451 angehenden Lehrkr��ften aus Deutschland und ��sterreich einbezogen, deren p��dagogisches Wissen ��ber zwei Messzeitpunkte l��ngsschnittlich mithilfe des im Rahmen von TEDS-M entwickelten Tests erfasst wurde. In das Kompetenzniveaumodell werden auf Grundlage theoretischer Ans��tze die Aufgabenmerkmale Komplexit��t kognitiver Bearbeitungsprozesse und terminologische Anforderungen integriert. Sie k��nnen einen bedeutsamen Anteil der Varianz in den Aufgabenschwierigkeiten aufkl��ren und werden zur Definition von Kompetenzniveaus herangezogen. Die Verteilung der angehenden Lehrkr��fte auf die gebildeten Kompetenzniveaus f��llt erwartungskonform aus und verweist auf eine hohe ��nderungssensitivit��t des Modells. Ferner unterstreichen die Befunde der vorliegenden Analyse die Konstruktvalidit��t der Testwertinterpretation. (DIPF/Orig.), The modelling of proficiency levels using criterion based interpretations is rarely used in current teacher education research although it is considered to be more appropriate to describe outcomes than normative statements. However, standard based teacher education requires information about the precise abilities of pre service teachers. Only then can concrete statements be made about which persons have which competences. This article investigates how proficiency levels of pre service teachers' pedagogical knowledge can be modelled. Pedagogical knowledge is assessed via a standardized paper and pencil test that was developed in the TEDS M study. We examine a sample of 1451 future teachers from German and Austrian universities and teacher training colleges. The description of proficiency levels follows a method that predicts item difficulty by item attribute. The item attributes complexity of cognitive processes and terminological requirements are integrated into the model. They explain a large part of the variance in item difficulties. A frequency distribution of pre service teachers differentiated by period of training supports our expectations. The authors found evidence supporting the construct validity of the model and its sensitivity to change. (DIPF/Orig.)

Empirische Sonderpädagogik 8 (2016) 4, S. 327-345, Diese Studie untersucht die Testgüte eines Fragebogenverfahrens zur Messung der sozialen Distanz (SoDiS) von Grundschulkindern gegenüber Kindern mit Behinderungen (Lernbehinderung, geistige Behinderung, körperliche Behinderung, Verhaltensauffälligkeit) und Migrationshintergrund. Das Verfahren beinhaltet bildliche Items, die dem Alltag der Kinder sehr nah sind und wenig sprachliche Kompetenzen verlangen. 283 Kinder der Klassenstufen drei bis sechs nahmen teil. Die Items zeigten eine akzeptable bis gute Skalenhomogenität (α=.68), akzeptable bis gute Trennschärfen (.25-.49) und eine eindimensionale Faktorstruktur mit hoher Varianzaufklärung des Faktors (51.2%). Die konvergente Validität konnte anhand mittlerer Korrelationen mit zwei Außenkriterien (Children‘s Social Distance Scale, (Connolly, Fitzpatrick, Gallagher & Harris, 2006), r=.66, p=0.1; und der Kurzversion der CATCH-Skala, (Schwab, 2015a), r =.72, p=0.1) gezeigt werden. Ein Abgleich mit bisherigen Forschungsergebnissen zur sozialen Distanz und ähnlichen Konstrukten zeigte eine gute Konstruktvalidität des Verfahrens. Diese Ergebnisse weisen darauf hin, dass der SoDiS einen ökonomischen Ansatz zur Erforschung sozialer Aspekte der Inklusion im schulischen Kontext darstellt. Ausstehend bleiben weitere Möglichkeiten der Auswertung des SoDiS und die Prüfung der Test-Retest-Reliabilität. (DIPF/Orig.), This study examines the test quality of a questionnaire about social distance of primary school aged children towards children with disabilities (learning disability, intellectual disability, physical impairment, and behavioural disorder) and migrant background. The measure consists of pictorial items that describe children’s everyday life and require only little language skills. Participants were 283 children from class three to six. The items showed acceptable to good scale homogeneity (α=.68), acceptable to good discriminatory power (.25-.49) and significantly contributed to the clarification of the total variance of the answers (51.61%) loading on one factor. We were able to show good criterion related validity using correlations with two external criteria (Children’s Social Distance Scale, Connolly et al. (2006) (r=.66, p=0.1) and a short version of the CATCH-Scale, Schwab (2015a) (r=.72, p=0.1)). A comparison of our data to prior research results showed good content validity. Our social distance questionnaire proofed to be an efficient approach to measuring social aspects of inclusive education. Yet to be evaluated are further methods of interpreting the social distance scores and their test-retest-reliability. (DIPF/Orig.)

Empirische Sonderpädagogik 8 (2016) 4, S. 346-366, Schülerinnen und Schüler sollten arithmetische Operationen am Ende der Grundschulzeit sicher beherrschen (Humbach, 2009; Moser Opitz, 2009), damit eine gesicherte Grundlage für den weiteren mathematischen Kompetenzerwerb in der Sekundarstufe I besteht (Bos et al., 2007). An Lehrkräfte wird die Forderung gestellt, Lernverläufe sensibel zu dokumentieren (Strathmann & Klauer, 2010). Diese Dokumentation stellt jedoch für viele Grundschullehrkräfte eine große Herausforderung dar (Knopp & Hartke, 2010). Eine evidenzbasierte Möglichkeit des Monitorings von Lernverläufen sind dabei curriculumbasierte Messverfahren (Hartke & Diehl, 2013). In Form von Kurztests, die den Standards der wissenschaftlichen Güte entsprechen, kann die Leistungsentwicklung in einer spezifischen schulischen Domäne erhoben und dokumentiert werden. Im vorliegenden Beitrag wird ein solches curriculumbasiertes Messverfahren für das Fach Mathematik für die Jahrgangsstufe 4, das anhand eines Konstruktionsleitfadens entwickelt wurde, vorgestellt und der Überprüfung der Güte unterzogen. Die Ergebnisse zeigen, dass es sich um ein valides und reliables Instrument zur Messung des Lernverlaufs handelt. (DIPF/Orig.), When leaving primary school, pupils should be able to master arithmetical operations (Humbach, 2009; Moser Opitz, 2009), a skill that will serve as a basis for additional mathematical skills acquisition (Bos et al., 2007). Teachers need to monitor children’s progress sensitively (Strathmann & Klauer, 2010). However, this is very challenging for many teachers at primary schools (Knopp & Hartke, 2010). One evidence-based method to monitor children’s progress is curriculum-based measurement (cbm) (Hartke & Diehl, 2013). These short tests that meet scientific standards document and assess school student’s learning process in a specific scholastic domain. In this paper a cbm that was developed by using a guideline for the school subject maths for grade four, and its psychometric criteria are presented. Analyses confirm that the developed cbm is a valid and reliable instrument to document learning process. (DIPF/Orig.)

Empirische Sonderpädagogik 8 (2016) 3, S. 289-302, Der vorliegende Beitrag stellt ein neu entwickeltes Fragebogeninstrument zur differenziellen Messung unterschiedlicher Aspekte der Selbstwirksamkeit von Lehrkräften im inklusiven Unterricht vor. Hierzu wird eine Differenzierung in die Bereiche Unterrichten (vier Skalen), Diagnostik (zwei Skalen), Förderung (zwei Skalen), Classroom Management (zwei Skalen) und Beratung (drei Skalen) vorgenommen. Die faktorielle Validität und die Reliabilität des Instruments werden anhand der Date einer Stichprobe von 562 Lehramtsstudierenden aus Köln und Potsdam überprüft. Die Skala erwies sich als reliabel und konstruktvalide. Die Unterteilung des Classroom Managements in zwei Subskalen sowie die Beratung in drei Subskalen lässt sich nicht mit vorliegenden Daten stützen. Hier sollten in einer revidierten Fassung zusätzliche Items ergänzt werden. (DIPF/Orig.), The paper introduces a newly developed set of questionnaires for measuring different aspect of self-efficacy of teachers working in inclusive classrooms. The areas teaching (four subscales), diagnostics (two subscales), remediation (two subscales), classroom-management (two subscales), and counseling (three subscales) are addressed. Factorial validity and reliability of the instrument are analyzed based on a sample of 562 students studying teacher education in Potsdam and Cologne, Germany. Reliability and construct validity of the scale could be corroborated. Although, the separation of classroom-management into two components and counseling into three was not supported by the data. These subscales should be extended with further items in a revised version. (DIPF/Orig.)

Schweizerische Zeitschrift für Bildungswissenschaften 29 (2007) 1, S. 65-78, L’article présente les dispositifs d’évaluation conduits en France par la Direction de l’Evaluation, de la Prospective et de la Performance, pour le compte du ministère de l’éducation nationale français. Ces dispositifs nationaux et internationaux s’appuient sur les méthodes de la mesure en éducation et les modèles psychométriques. Ils fournissent les informations permettant aux responsables de la politique éducative d’apprécier les performances et l’efficacité du système éducatif et de prendre des décisions. (DIPF/Orig.), Der Artikel behandelt die Bestimmungen zur Leistungsbewertung, die im Auftrag vom französischen Ministerium für Erziehung von der DEP (Direction de l’Evaluation, de la Prospective et de la Performance) in Frankreich festgelegt wurden. Diese nationalen und internationalen Bestimmungen stützen sich auf die Bewertungsmethoden auf dem Gebiet der Erziehung sowie auf die psychometrischen Modelle. Sie liefern Informationen, die es den Verantwortlichen der Schulpolitik erlauben, die Leistungen und die Wirksamkeit des Erziehungssystems zu bewerten sowie die entsprechenden Entscheidungen zu treffen. (DIPF/Orig.)

Empirische Sonderpädagogik 6 (2014) 3, S. 211-226, Ursachen für Probleme im Schriftspracherwerb sind nicht erst im Anfangsunterricht zu suchen, sondern bereits in familiären Illiteralitätserfahrungen. Insbesondere das Wissen über Schrift und die Erzählfähigkeit sind als Prädiktoren des späteren Schriftspracherwerbs gut belegt. Ein geeignetes Verfahren zu deren reliabler und valider Erfassung fehlt aber im deutschen Sprachraum. Diese Lücke soll mit dem Verfahren EuLe 3-5 (Meindl & Jungmann, in Vorb.) geschlossen werden, dessen Konzeption theoriebasiert und orientiert an anerkannten Verfahren aus dem anglo-amerikanischen Sprachraum erfolgte. Zur Überprüfung seiner Einsetzbarkeit und Güte wurde eine Stichprobe von insgesamt N=658 Kindern aus Kindertageseinrichtungen in Mecklenburg-Vorpommern und Berlin untersucht. In Teilstichproben kamen zur Ermittlung der Konstruktvalidität das SSV bzw. der SETK 3-5 sowie die nonverbalen Skalen der K-ABC zum Einsatz. Die Itemkennwerte (rit= .40 - .61) belegen ebenso wie die Befunde zu den Hauptgütekriterien Objektivität (ICCunjust, einfakt = .96), Reliabilität (Cronbachs aGesamttest= .91) und Validität die Eignung des EuLe 3-5 für präventive Förderentscheidungen im Vorschulalter. Weitere Studien zur inkrementellen und prognostischen Validität des Verfahrens sind notwendig und laufen derzeit. (DIPF/Orig.), Problems in reading and writing acquisition are not rooted in elementary school instruction but often in lacking literacy experiences in the family of origin. Although knowledge of print and narrative skills are well-documented predictors of later literacy acquisition in school, reliable und valid diagnostic instruments are missing in Germany. The EuLe 3-5 (Meindl & Jungmann, in prep.) is supposed to fill this gap. Its conception is grounded in theory and based on established Anglo-American tests. We tested its applicability and quality on a construction sample of N = 658 preschool children in Mecklenburg-West Pomerania and Berlin. To determine construct validity, we administered the SSV or the SETK 3-5 and the nonverbal scales of the K-ABC additionally in subsamples. Item analysis (rit= .40 - .61) and results on objectivity (ICCone-way, random = .96), reliability (Cronbachs atotal test = .91) and validity prove the adequacy of the EuLe 3-5 for intervention decisions at preschool age. Further studies concerning the incremental and predictive validity are necessary and run currently. (DIPF/Orig.)

SCHULVERWALTUNG - Zeitschrift für Schulleitung und Schulaufsicht - Ausgabe Bayern 37 (2014) 3, S. 151-153, Seit 20 Jahren sind Schulleistungsstudien ein fester Bestandteil der Bildungsdebatte in Deutschland. Sie liefern Daten über Stärken und Schwächen des Schulsystems, die viele wachgerüttelt haben, wurden aber auch kritisiert, weil sie ein zu enges Bildungsverständnis beinhalten. Am Beispiel der Ergebnisse der kürzlich veröffentlichten fünften PISA-Studie wird dargestellt, was PISA jenseits des Länderrankings leistet. Was sagt die 2012 durchgeführte Studie beispielsweise über schulische Rahmenbedingungen, Unterricht, Wohlbefinden in der Schule? Welche Bedeutung haben diese Kontextfaktoren von Schule für das Lernen und die Lernergebnisse? Diskutiert wird darüber hinaus, welchen Fokus zukünftige Studien haben sollen.

Frankfurt am Main : GFPF 2013, 481 S. - (Materialien zur Bildungsforschung; 23/3), Mit einem längsschnittlichen Mehrebenen-Design untersucht die Studie PERLE multikriterial die Persönlichkeits- und Lernentwicklung von Grundschulkindern in staatlichen und privaten Schulen einiger neuer deutscher Bundesländer (hauptsächlich Sachsen, aber auch Berlin, Thüringen und Mecklenburg-Vorpommern) vom Schuleintritt bis zum Ende des vierten Schuljahres. … Als unabhängige Variablen wurden in der PERLE-Studie insbesondere Merkmale des Unterrichts und der Lehrkräfte, aber auch familiäre Lebens- und Lernbedingungen der Schüler erhoben. Als Instrumente kamen neben Testungen und Befragungen der Schüler zu Schuleintritt und am Ende jeder Klassenstufe mehrere Fragebögen für Eltern und Lehrkräfte (für diese außerdem Unterrichtstagebücher) zum Einsatz. … In jedem der drei einbezogenen Fächer Deutsch, Kunst und Mathematik untersuchte PERLE den Unterricht mit einer Videostudie. Die drei Videostudien fanden in der ersten Projektphase statt, als die Schüler im ersten und zweiten Schuljahr waren. Die Anlage dieser Videostudien, die standardisierten Bedingungen der Erhebung und Aufarbeitung von Bild und Ton sowie die fachunspezifischen und fachspezifischen Auswertungsschritte stehen im Mittelpunkt dieses Technischen Berichts. (DIPF/Orig.)

Journal for educational research online 5 (2013) 1, S. 38-58, Complex Problem Solving (CPS) is a central topic in modern educational contexts and has received increased interest in educational large-scale assessment studies such as the Programme for International Student Assessment (PISA) and the Programme for the International Assessment of Adult Competencies (PIAAC). Measurement devices up to the present have suffered from a lack of theoretical embedment and low reliability. This article reviews the most important theories of CPS that may be applied to the process of rational test construction. Specifically, the functionalist approach focusing on cognitive processes and the approach of action theory focusing on distinct phases are discussed in their relation to CPS and its assessment. As an example of how to develop a reliable and valid measurement device based on these theories, we propose the development of MicroDYN, which is the operationalization of CPS in PISA 2012. (DIPF/Orig.), Komplexes Problemlösen hat in den vergangenen Jahren als zentrales Thema in international vergleichenden Bildungsstudien wie dem Programme for International Student Assessment (PISA) oder dem Programme for the International Assessment of Adult Competencies (PIAAC) vermehrt an Bedeutung gewonnen. Demgegenüber steht eine gewisse Vernachlässigung theoretischer Bezüge sowie einer akzeptablen Reliabilität bestehender Messinstrumente. Dieser Artikel fasst relevante Theorien des komplexen Problemlösens zusammen und zeigt deren Potential im Rahmen eines rationalen Testkonstruktionsprozesses. Dabei werden neben dem funktionalistischen Ansatz, der die Bedeutung kognitiver Prozesse hervorhebt, handlungstheoretische Ansätze mit ihrem Fokus auf separaten Handlungsphasen vorgestellt und in ihren Bezügen zu komplexem Problemlösen diskutiert. Als Beispiel, wie ein reliables und valides Messinstrument vor dem Hintergrund dieser Theorien entwickelt werden könnte, wird das Testverfahren MicroDYN und dessen Entwicklung vorgestellt, das zugleich die Operationalisierung komplexen Problemlösens für PISA 2012 darstellt. (DIPF/Orig.)

Journal for educational research online 4 (2012) 2, S. 174-190, Kreativitätsförderung gilt in der Grundschule als Bildungsziel und stellt einen festen Bestandteil der Bildungspläne in den verschiedenen Bundesländern dar. Um fördernde und hemmende Bedingungen im schulischen Kontext benennen und Kreativität zu leistungsrelevanten Kovariaten in Beziehung setzen zu können, ist eine systematische, längsschnittliche Untersuchung der Kreativitätsentwicklung im Grundschulalter notwendig. Im vorliegenden Beitrag wird die Kreativitätsentwicklung vom ersten bis zum vierten Schuljahr auf Basis von Daten aus der Grundschulstudie „PERLE - Persönlichkeits- und Lernentwicklung von Grundschulkindern“ untersucht und das eingesetzte Messverfahren, der Test zum schöpferischen Denken - Zeichnerisch (TSD-Z), vorgestellt. Die mit diesem Verfahren gemessene Kreativitätsentwicklung erweist sich insgesamt als instabil: Was die mittlere Ausprägung der kreativen Leistung anbelangt, zeigt sich eine Stagnation nach dem zweiten Schuljahr. Zusätzlich offenbaren sehr niedrige Test-Retest-Korrelationen große Unterschiede in den individuellen Entwicklungsverläufen, die sich wiederum innerhalb von Klassen stärker ähneln als zwischen den Klassen. Die Ergebnisse unterstreichen die Relevanz externaler Bedingungen für die Kreativitätsentwicklung. (DIPF/Orig.), In this study, creativity development is examined with data from the PERLE-Project which focused on the personality and learning development of elementary school children from first to fourth grade. In order to measure creativity, the Test for Creative Thinking – Drawing Production (TCT-DP) was used and is therefore described in detail. Overall, creativity development, as captured by the TCTDP, shows to be unstable: Regarding the average value of creativity, the achievement stagnates after second grade. In addition, very low test-retest-correlations reveal different individual developmental courses. However, within classes, the individual development is more alike than between classes. The results emphasize the relevance of external conditions for creativity development. (DIPF/Orig.)

Frankfurt, Main : GFPF 2011, 177 S. - (Materialien zur Bildungsforschung; 23/1), Im vorliegenden Band 23 der Materialien zur Bildungsforschung werden Testinstrumente und Fragebögen aus der ersten Förderphase (2006-2009) des Projekts "Persönlichkeits- und Lernentwicklung von Grundschulkindern" (PERLE) vorgestellt. Insgesamt gliedert sich der Band 23 in drei Teile. Teil 1 dokumentiert die unmittelbar zu Schulbeginn (Eingangsuntersuchung) eingesetzten Testinstrumente und Fragebögen bei den Schülern, mittels derer kognitive und weitestgehend motivational-affektive Eingangsvoraussetzungen der Schülerinnen und Schüler erfasst wurden. Zudem werden die Skalen und deren zentrale Kennwerte der ersten Lehrerbefragung sowie die Skalen der ersten Elternbefragung dargestellt, welche herangezogen werden sollen, um mehrperspektivisch die Persönlichkeits- und Lernentwicklung der Schülerinnen und Schüler erklären zu können. (DIPF/Autor)

Zeitschrift für Pädagogik 57 (2011) 5, S. 695-710, Um an der Pädagogischen Hochschule Zürich zu studieren, absolvieren Studierende ohne Maturitätsabschluss neben fachlichen Prüfungen ein Assessment Centre (AC) zur Überprüfung ihrer überfachlichen Kompetenzen. Der vorliegende Beitrag untersucht Zusammenhänge zwischen der Selbst- und Fremdeinschätzung sowie die prognostische Validität. Die Fremdeinschätzung im AC erwies sich als signifikanter Prädiktor, um das Bestehen der Zwischenprüfung vorherzusagen. Ausbildungshintergrund, Leistung in einem allgemeinen Intelligenztest und die Selbsteinschätzungen der angehenden Studierenden waren hingegen statistisch nicht bedeutsam. Dagegen steht die Fremdeinschätzung im AC in einem deutlichen Zusammenhang mit der Einschätzung der Eignung für den Lehrberuf durch die Mentorinnen und Mentoren nach dem ersten Studienjahr. Die Ergebnisse lassen den Schluss zu, dass das Assessment Centre ein recht valides Verfahren zur Einschätzung der Kompetenzen angehender Studierender darstellt. (DIPF/Orig.), In order to study at the Pädagogische Hochschule Zürich (Zurich University of Teacher Education), students without a high-school leaving certificate (Matura) have to take part in an Assessment Center (AC), in addition to subject-specific exams, to have their interdisciplinary and cross-curricular competencies tested. The present contribution examines interrelations between self-assessment and external assessment as well as predictive validity. The external assessment given in the AC proved to be a significant predictor with regard to a successful passing of the intermediate exam. In contrast, educational background, achievement in a general intelligence test, and self-assessment by the students were not statistically significant. External assessment in the AC, on the other hand, is clearly related to the assessment given by the mentors after the first year of studies with regard to the students´ aptitude for the teaching profession. The findings lead to the conclusion that the Assessment Center constitutes a rather solid method for the assessment of competencies among future student teachers. (DIPF/Orig.)

ZEP : Zeitschrift für internationale Bildungsforschung und Entwicklungspädagogik 34 (2011) 3, S. 42, Rezension zu: Stockmann Reinhard/Meyer Wolfgang (2010): Evaluation. Eine Einführung. Opladen & Farming Hills, Verlag Barbara Budrich

Empirische Sonderpädagogik 3 (2011) 2, S. 121-146, Eine sich zunehmend auf Prävention und Integration hin entwickelnde (Sonder-)Pädagogik benötigt Messverfahren, die fehlende Lernvoraussetzungen und im Lernprozess entstehende Lernlücken frühzeitig erfassen. Gelingt es zudem mittels eines Messverfahrens Einblick in den Lernverlauf zu bekommen, erhalten Lehrkräfte Informationen zu Lernfortschritten, stagnierenden oder ggf. auch rückläufigen Leistungsentwicklungen. Solche Daten sind eine gute Grundlage für einen adaptiven Unterricht und eine passende Förderung. Das Inventar zur Erfassung der Lesekompetenzen von Erstklässlern (IEL-1) wurde als pädagogisches Instrumentarium zur Leistungserfassung über drei Messzeitpunkte entwickelt. Sollte sich das Inventar als objektiv, reliabel und valide sowie geeignet für die Dokumentation von Lernfortschritten erweisen, liegt ein schulalltagstaugliches Verfahren zur formativen Evaluation des Erstleseunterrichts und präventiver Förderung innerhalb des Schriftspracherwerbs vor. Im vorliegenden Beitrag werden die Konzeption des IEL-1, das Design der Überprüfungsstudie mit N = 1649 Erstklässlern und Ergebnisse zur Güte des Verfahrens vorgestellt. (DIPF/Orig.), Developing more and more towards prevention and integration, education needs innovative methods of measurement to recognize missing learning prerequisites and learning gaps which occurred in the process of learning at an early stage. If a measurement method could provide insight into the learning process, teachers could get feedback on advancements, stagnations or even regressive learning developments. Such data are a valid foundation for an adaptive teaching and advancement. The inventory for measuring the reading competence of first grade children (IEL-1) was developed as a pedagogic instrument for the facility recording over three measurement moments. Should the developed and verified inventory prove objective, reliable and valid as well as appropriate to show learning advancements, then it is a procedure for the formative evaluation of learning processes for successful preventive actions in the process of learning to read and write that is suitable for everyday school life. This paper presents the concept of the IEL-1, the design of the validation-study with N=1649 first grade children and results concerning the quality of the procedure. (DIPF/Orig.)

Klieme, Eckhard [Hrsg.]; Leutner, Detlev [Hrsg.]; Kenk, Martina [Hrsg.]: Kompetenzmodellierung. Zwischenbilanz des DFG-Schwerpunktprogramms und Perspektiven des Forschungsansatzes. Weinheim ; Basel : Beltz 2010, S. 216-227. - (Zeitschrift für Pädagogik, Beiheft; 56), Die Autoren stellen hier ein neuartiges Diagnosticum, MicroDYN, mit überprüfbaren psychometrischen Eigenschaften, theoretischem Bezug und der Möglichkeit, einzelne Facetten der Problemlösefähigkeit zu evaluieren, vor. Im empirischen Teil dieses Artikels konzentrieren sie sich auf Modellbildung als einen der fünf Indikatoren Dörners und leiten für diesen ein vorläufiges Kompetenzmodell ab. (DIPF/Orig.)

ZEP : Zeitschrift für internationale Bildungsforschung und Entwicklungspädagogik 33 (2010) 1, S. 25-33, Kulturen unterscheiden sich in ihren Vorstellungen von Begabung und deshalb auch darin, wer als besonders gescheit gilt. In unserer Gesellschaft sind es in der Regel diejenigen, welche in einem Fähigkeitstest gut abschneiden. Diese Identifikationsstrategie liegt auch vielen Begabtenförderprogrammen zu Grunde. Fähigkeitstests benachteiligen jedoch Kinder bestimmter sozialer Herkunft. Die Ursache liegt darin, dass sich Kinder aufgrund ihrer unterschiedlichen Sozialisation in Testsituationen unterschiedlich verhalten, weshalb die gleichen Testitems unterschiedliche Fähigkeiten messen. Deshalb werden vor allem einheimische Kinder und Jugendliche aus der Mittel- und Oberschicht für Begabtenförderprogramme selektioniert, während Kinder aus der Unterschicht und solche mit Migrationshintergrund kaum vertreten sind. Dieser Aufsatz stellt fünf Mythen und Gegenmythen zur Diskussion, die zum Fundament vieler Begabtenförderprogramme gehören und konfrontiert sie mit aktuellen wissenschaftlichen Erkenntnissen. (DIPF/Orig.), Cultures differ in their conceptions of aptitude. Therefore they also differ in what they consider to be especially brainy. In our society the brainy are normally those who do well in achievement tests. Many aptitude tests are based on this identification strategy. However, achievement tests discriminate children with a certain social background. This comes from the fact that children behave differently in the test situation according to their socialization. Therefore the same items measure different abilities. As a matter of fact especially native middle and upper class children are selected to take part in education programmes for gifted children and youth whereas children of the lower class and children with a migration background are hardly represented. This article discusses five myths and anti-myths, which belong to the base of many education programmes for gifted children and youth and confronts them with current empirical findings. (DIPF/Orig.)

Klieme, Eckhard [Hrsg.]; Leutner, Detlev [Hrsg.]; Kenk, Martina [Hrsg.]: Kompetenzmodellierung. Zwischenbilanz des DFG-Schwerpunktprogramms und Perspektiven des Forschungsansatzes. Weinheim ; Basel : Beltz 2010, S. 189-198. - (Zeitschrift für Pädagogik, Beiheft; 56), Der vorliegende Artikel skizziert zunächst kurz die Zielsetzung des DFG-Projekts ... Im darauf folgenden Abschnitt werden zwei wesentliche Charakteristika zur Unterscheidung von MIRT-Modellen sowie deren inhaltliche Implikationen fuhr die Modellierung von Kompetenzen dargestellt. Die zentrale Fragestellung des DFG-Projekts … ist, inwieweit sich sprachliche Kompetenzen, die mit demselben Aufgabenmaterial erfasst wurden, auf unterschiedliche Weise modellieren lassen und welche diagnostischen Aussagen aus den verschiedenen Auswertungen resultieren. Insbesondere interessiert, inwieweit komplexere mehrdimensionale Modelle gegenüber eindimensionalen Modellen (z.B. dem eindimensionalen Raschmodell) einen Zugewinn an diagnostischer Information liefern. (DIPF/Orig.)

Zeitschrift für Pädagogik 56 (2010) 2, S. 229-248, Unterricht unterliegt den Prämissen des Systems Schule und seinen verschiedenen Funktionen - nicht zuletzt der Selektionsfunktion. Deshalb kann Unterricht unter verschiedenen Aspekten als bedeutsam wahrgenommen werden. Unter welchen Gesichtspunkten Schüler/innen Unterrichtsstunden rekonstruieren, ist in der Unterrichtsforschung noch eine weitgehend offene Frage. Im Rahmen einer empirischen Studie wurde dieser Aspekt bei verschiedenen Schülergruppen untersucht. Es wurden mit 30 Schülern/innen der dritten und vierten Jahrgangsstufen an drei Messzeitpunkten jeweils eine Woche lang Interviews durchgeführt (zu Beginn, in der Mitte und am Ende des Schuljahres - insgesamt 420 Interviews). Es hat sich gezeigt, dass vor allem formale Aspekte (zum Unterrichtsablauf, Hefteinträge etc.) den Blick auf Unterricht bestimmen - und das gilt insbesondere für die leistungsschwachen Kinder. (DIPF/Orig.), Classroom teaching is subject to the premises of the scholastic system and its different functions - including its selective function. Therefore, lessons can be perceived as important from different perspectives. It is still to a large extend unsettled in teaching research under which aspects students reconstruct previous lessons. The present empirical study investigates this question by looking at different groups of elementary-school students. At three points during the school year (the beginning, the middle and the end), 30 students of the third and fourth grade were interviewed for the duration of one week regarding their perception of the lessons they had attended. The data collected in 420 interviews is analyzed and it is shown that students mainly remember the formal characteristics of lessons; - this is especially true for low achievers. (DIPF/Orig.)

Weinheim ; Basel : Beltz 2010, 312 S. - (Zeitschrift für Pädagogik, Beiheft; 56), Das im Herbst 2007 eingerichtete DFG-Schwerpunktprogramm „Kompetenzmodelle zur Erfassung individueller Lernergebnisse und zur Bilanzierung von Bildungsprozessen“ (kurz: SPP „Kompetenzmodelle“) legt seinen Schwerpunkt auf die Modellierung und Messung von Kompetenzen … In der insgesamt sechsjährigen Laufzeit untersuchen Expertinnen und Experten aus der Erziehungswissenschaft, der Psychologie und den Fachdidaktiken grundlegende Fragen der Kompetenzmodellierung, der Entwicklung psychometrischer Modelle und der Nutzung von Technologien zur Kompetenzmessung. … Nach Abschluss der ersten Zweijahresphase (2007–2009) wird in diesem Themenheft eine erste Zwischenbilanz zu den Forschungsarbeiten der insgesamt 23 Projekte des SPP vorgelegt. Das Heft ist wie folgt gegliedert: In einem einführenden Beitrag untersucht Benö Csapó grundlegende Fragen der Kompetenzmodellierung und der Kompetenzmessung, indem er Bildungsziele, Curricula und Assessment-Ansätze vor dem Hintergrund eines umfassenden Rahmenmodells zueinander in Beziehung setzt. Die darauf folgenden Beiträge aus den SPP-Projekten sind nach den fünf Kompetenzdomänen geordnet: fünf Beiträge mit Schwerpunkt „Mathematik“, vier Beiträge mit Schwerpunkt „Naturwissenschaften“, fünf Beiträge mit Schwerpunkt „Sprache und Lesen“, sechs Beiträge mit Schwerpunkt „Fächerübergreifende Kompetenzen“ und drei Beiträge mit Schwerpunkt „Lehrerkompetenzen“. An jede Domäne schließt sich ein kurzer Beitrag von Kolleginnen und Kollegen an, die aufgrund ihrer besonderen Expertise im jeweiligen Forschungsgebiet eingeladen worden waren, die bisher erzielten Ergebnisse der Projekte einzuschätzen und zu kommentieren. (DIPF/Orig.)

Münk, Dieter [Hrsg.]; Schelten, Andreas [Hrsg.]: Kompetenzermittlung für die Berufsbildung. Verfahren, Probleme und Perspektiven im nationalen, europäischen und internationalen Raum. Bielefeld : Bertelsmann 2010, S. 19-36. - (Berichte zur beruflichen Bildung)

Klieme, Eckhard [Hrsg.]; Leutner, Detlev [Hrsg.]; Kenk, Martina [Hrsg.]: Kompetenzmodellierung. Zwischenbilanz des DFG-Schwerpunktprogramms und Perspektiven des Forschungsansatzes. Weinheim ; Basel : Beltz 2010, S. 228-238. - (Zeitschrift für Pädagogik, Beiheft; 56), Deklaratives metakognitives Wissen stellt neben prozeduralen metakognitiven Fertigkeiten eine notwendige Voraussetzung zur Steuerung kognitiver Prozesse dar. Aufgrund psychometrischer Probleme stehen jedoch kaum Messverfahren zur Erfassung dieser Komponente metakognitiver Kompetenz zur Verfügung. In der vorliegenden Studie wurden domänenspezifische Verfahren zur Erfassung des deklarativen metakognitiven Wissens in den Domänen Lesen, Mathematik, Englisch und im selbstregulierten Lernen für den Einsatz zu Beginn der Sekundarstufe adaptiert bzw. neu konstruiert. Die vier Wissenstests basieren auf domänenspezifischen Szenarien und rekurrieren auf die Einschätzung der relativen Nützlichkeit von Strategien. Die Testkonstruktion wurde an einer Stichprobe von 798 bayerischen Schüler/innen der 5. und 6. Jahrgangsstufe aus den Schularten Hauptschule und Gymnasium validiert. Die interne Konsistenz (Cronbachs Alpha) der vier Verfahren ist zufrieden stellend bis gut. In allen vier Domänen zeigen sich deutliche Wissensunterschiede sowohl zwischen den untersuchten Jahrgangsstufen als auch zwischen den untersuchten Schularten. Die konstruierten Verfahren bilden das Leistungsspektrum am Beginn der Sekundarstufe reliabel und valide ab. Weitere, längsschnittliche Analysen zu den Entwicklungsmustern des deklarativen metakognitiven Wissens innerhalb und zwischen den Domänen sind notwendig. (DIPF/Autor)

Klieme, Eckhard [Hrsg.]; Leutner, Detlev [Hrsg.]; Kenk, Martina [Hrsg.]: Kompetenzmodellierung. Zwischenbilanz des DFG-Schwerpunktprogramms und Perspektiven des Forschungsansatzes. Weinheim ; Basel : Beltz 2010, S. 258-269. - (Zeitschrift für Pädagogik, Beiheft; 56), In dem Beitrag werden Analysen zur Kompetenzstruktur und Aspekte der Niveaumodellierung beruflicher Fachkompetenz in der gewerblich-technischen Grundbildung (erstes Ausbildungsjahr) vorgestellt. Die Analysen, die mit Methoden der konfirmatorischen Faktorenanalyse und multivariaten Regressionsanalysen aufbereitet wurden, basieren auf Daten von N=489 Auszubildenden in den Berufen Kfz-Mechatroniker/in und Elektronier/in. Mit den Analysen können wir zeigen, dass (1) berufsfachliche Kompetenz eine Komposition aus den beiden Aspekten „Fachwissen“ und „fachspezifische Problemlösefähigkeit“ ist, dass sich (2) Fachwissen am Ende des ersten Ausbildungsjahres am günstigsten eindimensional modellieren lässt, dass (3) am Anfang der Ausbildung Mehrdimensionalität in der Subdimension „Fachwissen“ vorliegt, die sich während des ersten Ausbildungsjahres zu einer Dimension verdichtet, was als „kognitive Integrationsleistung“ der Ausbildung verstanden werden kann, und dass (4) die einbezogenen, die Itemschwierigkeit prognostizierenden Aufgabenmerkmale wie Bloomsche Taxonomie, Wissensvernetztheit, Vertrautheit der Anforderungen aus der Sekundarstufe I und die Hinweisgüte der den Tests beigelegten Informationsmaterialien ca. 50% der Itemschwierigkeitsvarianz erklären können. (DIPF/Autor)

Empirical research in vocational education and training 1 (2009) 1, S. 85-102, Measurement of vocational competencies which includes not only the knowledge but also the action domain is one of the central targets of VET research - under scientific as well political perspectives. It also is a decisive prerequisite for running an international large-scale assessment on VET. The article describes how such measurement is operationalized by defining dimensions of VET competencies and developing adequate items which mirror authenticly tasks to be fulfilled at the workplace. Tasks and items are presented in the context of a technology-based virtual enterprise focusing on the fields of business and administration. Their format allows Item Response Theory (IRT) scaling. (DIPF/Orig.)

Zeitschrift für Pädagogik 55 (2009) 3, S. 369-380, Beginnend etwa Anfang der 1990er-Jahre und seither zunehmend, finden sich Schulen mit einer Vielzahl von Veränderungen konfrontiert, die plakativ unter dem Schlagwort 'Übergang von der Input- zur Outputsteuerung' subsumiert werden. Verkürzend auch als 'Neue Steuerung' bezeichnet, berühren die davon ausgehenden Wirkungen Schule und Unterricht in vielfältiger Weise. Betroffen ist nicht zuletzt jene Dimension, die unter dem Konstrukt ,Schulkultur' gefasst werden kann. Im Anschluss an die analytische Aufschlüsselung des Begriffs Schulkultur (2.) und einer Skizze wesentlicher Elemente Neuer Steuerung (3.) wird exemplarisch gezeigt, inwieweit die Veränderung der Steuerungsverfahren Schulkultur berührt und welche Konsequenzen hieraus resultieren können (4.). (DIPF/Orig.), Since the early 1990s, schools find themselves increasingly confronted with a variety of changes which could be subsumed under the catchy heading "Transition from Input- to Output-Control". The effects of these changes, which have in an abbreviated form been labeled as "New Control", concern school and instruction in many ways. Affected is, not least, that dimension which might be subsumed under the construct "school culture ". Following an analytic classification of the term school culture (2.) and an outline of essential elements of New Control (3.), the article illustrates in how far the changes in the control processes affect school culture and which consequences could result from this (4.). (DIPF/Orig.)

Empirical research in vocational education and training 1 (2009) 1, S. 65-83, Using a sample of 110 persons, this study examined the ”advocatory approach” for predicting the quality of (VET) teacher’s competency profiles. The participants (teachers, experts, non-teachers) observed a concrete teaching behavior using a film vignette, and judged it by means of different quality criteria. The hypothesis that differences in the groups, who evaluate, elicit differing sensitivity about the quality of specified teaching competencies (and not teaching performance) was mostly confirmed. We suggest that teachers can individually compare their values with expert values and non-teacher values, and thus use the discrepancies in quality sensitivity for the purposes of self-guided in-service training. (DIPF/Orig.)

DESI-Konsortium [Hrsg.]: Unterricht und Kompetenzerwerb in Deutsch und Englisch. Ergebnisse der DESI-Studie. Weinheim u.a. : Beltz 2008, S. 34-54, Die Analyse der komplexen und umfangreichen Daten, wie sie aus Large-Scale-Assessments wie DESI resultieren, ist mit einer Reihe methodischer Herausforderungen verbunden. Verschiedene statistische Analyseverfahren, die dem aktuellen Stand der Forschungsmethodik entsprechen, kommen zum Einsatz, um eine möglichst gesicherte Interpretation der Ergebnisse zu gewährleisten. Das vorliegende Kapitel gibt einen Überblick über die verschiedenen methodischen Anforderungen, die bei der Analyse der DESI-Daten zu berücksichtigen waren, und zugleich wird darüber informiert, mit welchen Verfahren gearbeitet wurde. Der erste Abschnitt des Kapitels befasst sich mit der Messung der sprachlichen Kompetenzen, d.h. mit der Auswertung der Daten aus den Leistungstests. Hier werden kurz die verwendeten Skalierungsmodelle skizziert sowie die Schätzung der Kompetenzwerte und deren Aufbereitung für eine anschauliche Ergebnisdarstellung behandelt. Im zweiten Teil des Kapitels geht es um Fragen, die bei den weiteren Auswertungsschritten zu berücksichtigen waren, in erster Linie bei der Untersuchung von Zusammenhängen der Kompetenzen mit weiteren Schüler-, Unterrichts- und Schulvariablen. Das Kapitel gibt einen Überblick über die Verfahrenslogik der eingesetzten Techniken und verweist auf vertiefende Literatur. (DIPF/Orig.)

Zeitschrift für Pädagogik 54 (2008) 2, S. 163-173, Der Beitrag möchte... Anregungen geben, welche Arbeiten bei der Entwicklung und Operationalisierung von Bildungsstandards nötig sind, um empirisch gesicherte Kompetenzmodelle zu etablieren und mit Hilfe der generierten Testinstrumente die Erreichung der Standards zu überprüfen. ... Begonnen werden soll mit dem Versuch (2.), das Beziehungsgefüge zwischen Bildungsstandards, Kompetenzen und wissenschaftlichen Konstrukten zu klären. Anschließend (3.) soll am Beispiel der KMK-Standards für das Fach Englisch am Ende der Sekundarstufe I erläutert werden, unter welchen Voraussetzungen Standards als Instrumente der Qualitätssicherung geeignet sind, aber auch, unter welchen Umständen sie Ziele formulieren, die sich der Messung dadurch entziehen, dass die Kompetenzen selbst theoretisch zu unpräzise bzw. zu breit gefasst sind. Danach soll kurz auf die Setzung von Niveaustufen (Standard-Setting) eingegangen und deutlich gemacht werden, dass die Setzung solcher Stufen ein auf die Erzeugung von Konsens zielender, aber kein theoretisch fundierter Akt ist. Abschließend (4.) werden drei Schlussfolgerungen für die Erarbeitung von Standards, Kompetenzmodellen und Messinstrumenten gegeben. (DIPF/Orig.)

Weinheim u.a. : Beltz 2008, 226 S. - (Zeitschrift für Pädagogik, Beiheft; 53), Die Beiträge im ersten Teil des Beihefts zur Zeitschrift für Pädagogik beschreiben Qualitätssicherung in verschiedenen Teilbereichen des Bildungswesens: Elementarbereich, Schule, Sozialpädagogik, berufliche Bildung, Weiterbildung und betriebliche Weiterbildung, Hochschule sowie in der Erziehungswissenschaft. Die beiden Artikel des zweiten Teils haben die Implementierung von Qualitätssicherung zum Gegenstand: Es geht um deren Dimensionen - am Beispiel Schule aufgezeigt - und um die Bedingungen des Gelingens der Implementierung von Bildungsstandards aus internationaler Sicht. (DIPF/Orig./pr)

Beck, Bärbel [Hrsg.]; Klieme, Eckhard [Hrsg.]: Sprachliche Kompetenzen. Konzepte und Messung. DESI-Studie (Deutsch Englisch Schülerleistung International). Weinheim u.a. : Beltz 2007, S. 197-211, Im besonderen Fall des Leseverstehens in der Fremdsprache unterliegen die … Verarbeitungs- und Verstehensprozesse unvermeidlichen Einschränkungen in der Quantität und Qualität des Lesens. Ferner können sie in allen angesprochenen Elementen so beeinträchtigt werden, dass Missverstehen die Folge ist. Wenn nach den Hauptursachen gefragt wird, geht die Zweit- und Fremdsprachenleseforschung inzwischen zunehmend davon aus, dass die Fremdsprachenlerner eine nicht generell für alle Texte gleiche sprachliche Schwelle überschreiten müssen, um ihre Lesefähigkeiten aus dem muttersprachlichen Erstleseprozess in die Fremdsprache übertragen zu können. Allerdings ist diese Schwelle nicht für alle Texte gleich. … Beim Testen von Leseverstehen sind in Einklang mit diesen Feststellungen nicht nur die beteiligten Kompetenzen zu berücksichtigen, sondern auch die Textebene im Besonderen. Im Gemeinsamen Europäischen Referenzrahmen für Sprachen (Europarat 2001), der in den DESI-Modulen zum Englischen eine zentrale Rolle spielt, spiegeln sich diese unterschiedlichen Elemente des Leseverstehens in den verschiedenen Kompetenzskalen zum Lesen wider. Im DESI-Testmodul zum Leseverstehen Englisch sind sie konstitutiv für das Messkonzept insgesamt. (DIPF/Orig.)

Beck, Bärbel [Hrsg.]; Klieme, Eckhard [Hrsg.]: Sprachliche Kompetenzen. Konzepte und Messung. DESI-Studie (Deutsch Englisch Schülerleistung International). Weinheim u.a. : Beltz 2007, S. 226-244, Sprachbewusstheit entwickelt sich in der Fremdsprache auf Grund eines aufmerksamen Umgangs mit der neuen Sprache. Sie befähigt Lernende, die fremde Sprache kontrolliert anzuwenden und Verstöße gegen Regelungen im Bereich sprachlicher Formen und Strukturen sowie des Sprachhandelns zu erkennen und gegebenenfalls zu korrigieren. Damit wird jedoch nicht ausgesagt, dass diese Entwicklung in jedem Fall eintritt. Im englischen Teil von DESI wird untersucht, welche Kompetenzen die Schülerinnen und Schüler auf Grund ihrer unterrichtlichen Lernerfahrungen in Grammatik und sprachlichem Handeln abrufen und einsetzen können. Eine spezifische Teilkompetenz ist dabei die Fähigkeit zur Sprachreflexion. Sie beruht in der Regel auf Wissen über Sprache (explizites/deklaratorisches/verbalisierbares Wissen), während die Teilkompetenz der sprachlichen Korrekturfähigkeit stärker vom Wissen des Sprachgebrauchs oder des Sprachgefühls (vorwiegend implizites und prozedurales Wissen) bestimmt ist. (DIPF/Orig.)

Beck, Bärbel [Hrsg.]; Klieme, Eckhard [Hrsg.]: Sprachliche Kompetenzen. Konzepte und Messung. DESI-Studie (Deutsch Englisch Schülerleistung International). Weinheim u.a. : Beltz 2007, S. 130-139, Die Lehrpläne der Bundesländer fordern vordringlich, dass die Schülerschaft einen ausreichenden Wortschatz erwerben soll. Dazu gehören die Ausbildung eines Fachwortschatzes und das Kennenlernen von Fremdwörtern, sowie Metaphern und Redensarten als unabdingbare Stilmittel in gesprochener und geschriebener Sprache. Die meisten Länder fordern, dass sich ihre Schüler mit dem Sprachwandel wie mit den soziologischen Schichtungen der Sprache befassen. Ab und zu tauchen Aspekte der Nuancierung auf, so bspw. wenn in Baden-Württemberg untersucht wird, welche Bedeutung der Wortschatz in unterschiedlichen Texten besitzt oder wenn die gute Kenntnis von Themen und ihrer lexikalischen Felder als eine Voraussetzung für angemessene Argumentation dargestellt wird (Hamburg, Saarland). Nur wenige Lehrpläne beschreiben die Ebenen des Wortschatzes und die daraus folgenden kognitiven oder stilistischen Gewinne. (DIPF/Orig.)

Beck, Bärbel [Hrsg.]; Klieme, Eckhard [Hrsg.]: Sprachliche Kompetenzen. Konzepte und Messung. DESI-Studie (Deutsch Englisch Schülerleistung International). Weinheim u.a. : Beltz 2007, S. 118-129, Die Lehrpläne aller Bundesländer beinhalten wesentliche Teile des argumentativen Genres wie die Erörterung, Diskussion oder Varianten des Appells (z.B. die Handlungsaufforderungen in einer Gruppe). Die Anforderungen an die Schülerinnen und Schüler stimmen in den Lehrplänen der Bundesländer weitgehend überein: Sie sollen die Standardsprache und gegenseitiges Zuhören beherrschen, Argumente sammeln, die Redeabsichten klären und die eigenen Interessen darstellen, sich durchsetzen, die eigenen Emotionen einbringen, andere Menschen mit stichhaltigen Argumenten überzeugen bzw. gemeinsam zu einem anerkannten Konsens kommen. (DIPF/Orig.)

Beck, Bärbel [Hrsg.]; Klieme, Eckhard [Hrsg.]: Sprachliche Kompetenzen. Konzepte und Messung. DESI-Studie (Deutsch Englisch Schülerleistung International). Weinheim u.a. : Beltz 2007, S. 140-146

Beck, Bärbel [Hrsg.]; Klieme, Eckhard [Hrsg.]: Sprachliche Kompetenzen. Konzepte und Messung. DESI-Studie (Deutsch Englisch Schülerleistung International). Weinheim u.a. : Beltz 2007, S. 107-117, Die theoretische Fundierung des Tests zur Erfassung der Lesekompetenz basiert im Rahmen des DESI-Projekts auf einer prozesshaften Betrachtung des Lesens. Die Grundlagen dafür sind primär von der Leseforschung, der Sprachrezeption und indirekt auch von den Arbeiten zu Sprachproduktion, wie sie zusammenfassend in den beiden gleichnamigen Hogrefe-Enzyklopädien vorgestellt werden (Friederici 1999;Hermann/Grabowski 2003), gelegt worden. (DIPF/Orig.)

Beck, Bärbel [Hrsg.]; Klieme, Eckhard [Hrsg.]: Sprachliche Kompetenzen. Konzepte und Messung. DESI-Studie (Deutsch Englisch Schülerleistung International). Weinheim u.a. : Beltz 2007, S. 147-157, Der Begriff der Sprachbewusstheit ist in der Deutschdidaktik und im Deutschunterricht relativ neu. Bislang wird gerne der Begriff Sprachbewusstsein verwendet. Man kann im wissenschaftlichen Sprachgebrauch eine Tendenz zur fachspezifischen Nutzung beider Begriffe feststellen: IN der Fremdsprachdidaktik mit ihrer Nähe zur internationalen Language-Awareness-Forschung (…) wird eher der Begriff Sprachbewusstheit verwendet, während in der Soziolinguistik eher von Sprachbewusstsein gesprochen wird (…). … Aus dem Forschungs- und Praxisbereich Deutsch als Fremdsprache dringt der Begriff Sprachbewusstheit inzwischen auch in die Muttersprachdidaktik ein. In den Rahmenrichtlinien der Bundesländer werden beide Begriffe noch nicht berücksichtigt. Hier dominiert noch die Lernbereichsbezeichnung „Reflexion über Sprache und Grammatik“. (DIPF/Orig.)

Beck, Bärbel [Hrsg.]; Klieme, Eckhard [Hrsg.]: Sprachliche Kompetenzen. Konzepte und Messung. DESI-Studie (Deutsch Englisch Schülerleistung International). Weinheim u.a. : Beltz 2007, S. 212-225, Im DESI-Projekt werden in je eigenen Modulen verschiedene Teilkompetenzen in der Fremdsprache Englisch geprüft: Hörverstehen, Leseverstehen, Sprachbewusstheit, kommunikative Schreibfertigkeit, Sprechfertigkeit und interkulturelle Kompetenzen. Zusätzlich soll der generelle Sprachstand der Schülerinnen und Schüler ganzheitlich erfasst werden. Dazu wird der C-Test eingesetzt. Der C-Test ist ein gut erforschtes Testinstrument, mit dessen Hilfe auf die allgemeine Kompetenz in der Fremdsprache rückgeschlossen werden kann. (DIPF/Orig.)