Daten und Studien zu „Schlagwörter: Modell” (31)

1

Messung diagnostischer Kompetenz in der Lehramtsausbildung Mathematik Ziel des Projektes waren die Entwicklung und eine Erprobung von Instrumenten zur Messung diagnostischer Kompetenzen von (zukünftigen) Lehrkräften für Mathematik an Gymnasien und an beruflichen Schulen, um das individuelle diagnostische Wissen und Können der Studierenden und Referendare zu beschreiben und Entwicklungsfortschritte sichtbar zu machen. Gegenstand der zu messenden diagnostischen Kompetenz waren Prozesse und Ergebnisse individuellen Kompetenzerwerbs von Lernenden im Mathematikunterric ... Ziel des Projektes waren die Entwicklung und eine Erprobung von Instrumenten zur Messung diagnostischer Kompetenzen von (zukünftigen) Lehrkräften für Mathematik an Gymnasien und an beruflichen Schulen, um das individuelle diagnostische Wissen und Können der Studierenden und Referendare zu beschreiben und Entwicklungsfortschritte sichtbar zu machen. Gegenstand der zu messenden diagnostischen Kompetenz waren Prozesse und Ergebnisse individuellen Kompetenzerwerbs von Lernenden im Mathematikunterricht mit den Schwerpunkten "mathematisches Basiskönnen" und "Problemlösekompetenz". Zunächst wurde ein Modell zur Messung diagnostischer Kompetenz bei (künftigen) Mathematiklehrkräften mit den Elementen Wissen, Handlungskompetenz und Metakompetenz entwickelt und in Form von Fragebögen und Leitfadeninterviews umgesetzt. Ein Teil der Befragungen wurde als Online-Befragung entwickelt und erprobt. Während des Projektes wurden zwei unterschiedliche Testinstrumente entwickelt und erfolgreich eingesetzt. Durch die unterschiedlichen Befragungszeitpunkte (zu Beginn und am Ende des Lehramtsstudiums und des Referendariats) entstand ein überwiegend querschnittlicher Datensatz mit 304 Probanden. Die Repertory-Grid-Methode, in der die Probanden zwei Aufgaben miteinander vergleichen, konnte genauso erfolgreich eingesetzt werden wie die entwickelten Testitems im Testheftdesign. Die eingesetzten Instrumente erscheinen geeignet, um die theoretisch begründete diagnostische Kompetenz in den Bereichen "Intelligentes Wissen“ und "Handlungskompetenz“ zu erfassen. Die Gütekriterien hierzu bedürfen einer weiteren Absicherung und sind noch weiter zu prüfen. Die erzielten Messergebnisse dienen als Grundlage für Maßnahmen zur gezielten Förderung von Diagnosekompetenzen in der Lehrerausbildung und Lehrerfortbildung und bieten darüber hinaus die Möglichkeit, künftig Effekte entsprechender Lehrerausbildung und Lehrerfortbildung zu beschreiben. (DIPF/Projektträger)

2

Überprüfung eines textsortenübergreifenden Modells der Entwicklung von Schreibkompetenz im dritten und vierten Grundschuljahr Augst et al. legten 2007 ein Modell der Entwicklung textsortenspezifischer Schreibkompetenz vor, das als bis dahin elaborierteste Version einer Modellierung dieser Kompetenz von Grundschulkindern galt. Für verschiedene Textsorten wurde ein Modell mit vier Entwicklungsniveaus postuliert. Zudem nahm man an, es handele sich um Varianten eines einzigen Kernmodells. Allerdings überprüften die Autoren das Modell nicht im Hinblick auf dessen Reliabilität und Validität. Das vorrangige Ziel [des Projekts ... Augst et al. legten 2007 ein Modell der Entwicklung textsortenspezifischer Schreibkompetenz vor, das als bis dahin elaborierteste Version einer Modellierung dieser Kompetenz von Grundschulkindern galt. Für verschiedene Textsorten wurde ein Modell mit vier Entwicklungsniveaus postuliert. Zudem nahm man an, es handele sich um Varianten eines einzigen Kernmodells. Allerdings überprüften die Autoren das Modell nicht im Hinblick auf dessen Reliabilität und Validität. Das vorrangige Ziel [des Projekts] bestand [deshalb] darin zu überprüfen, ob sich das erwähnte Modell als hinreichend reliabel erweisen würde. Dazu wurden zwölf Rater anhand von Benchmarktexten geschult. Über diskrepante Bewertungen wurde diskutiert; inkonsistent urteilende Rater wurden letztlich ausgeschlossen. Schülertexte wurden dann von mehreren Beurteilern unabhängig voneinander holistisch kodiert. Die von Augst et al. formulierten Kompetenzniveaumodelle für Erzählen und Argumentieren wurden modifiziert. Die Ergebnisse legen die Annahme nahe, dass zwar für einige Texte eine befriedigende Reliabilität erreicht werden kann. Jedoch kann das Modell nicht für alle Textsorten einer empirischen Überprüfung standhalten. Es zeigte sich, dass die Reliabilitäten textsortenintern sehr unterschiedlich ausfallen und zum Teil unbefriedigend sind. Als Erfolg ist zu werten, dass mit diesem Projekt exemplarisch dargelegt werden konnte, wie die Güte eines anspruchsvollen Modells empirisch fundiert beurteilt werden kann. Insbesondere bei Large-Scale-Studien sind diese Erkenntnisse bedeutsam, bei denen holistische Ratings von Schülertexten, wie im Projekt durchgeführt, sinnvoll eingesetzt werden können. (DIPF/Projektträger)

3

Effekte kompetenzieller Rückmeldung beim Experimentieren im naturwissenschaftlichen Unterricht Ziel des Promotionsprojektes war es zu untersuchen, inwieweit ein Kompetenzmodell (zum wissenschaftlichen Denken, Teilkompetenz "Experimente planen") als Basis für Leistungsrückmeldungen (Feedback) genutzt werden kann, um somit die bestehende Lücke zwischen wissenschaftlich fundierter Kompetenzmodellierung und deren praktischem Nutzen in Lehrsettings und Lernsettings zu schließen. Der theoretische Hintergrund dieses Promotionsprojektes verknüpft auf innovative Weise die Forschung zu Kompetenzmes ... Ziel des Promotionsprojektes war es zu untersuchen, inwieweit ein Kompetenzmodell (zum wissenschaftlichen Denken, Teilkompetenz "Experimente planen") als Basis für Leistungsrückmeldungen (Feedback) genutzt werden kann, um somit die bestehende Lücke zwischen wissenschaftlich fundierter Kompetenzmodellierung und deren praktischem Nutzen in Lehrsettings und Lernsettings zu schließen. Der theoretische Hintergrund dieses Promotionsprojektes verknüpft auf innovative Weise die Forschung zu Kompetenzmessung und Kompetenzmodellierung sowie die Forschung zu Feedbackeffekten im Lernprozess. Es wurden vier Teilstudien durchgeführt, die alle im Vortest-Nachtest-Design als Laborstudien umgesetzt und mit Lernenden der Sekundarstufe I (8. Klasse) durchgeführt wurden. Die Performanz der Lernenden bei der Planung von Experimenten wurde mithilfe von Papier-Bleistift-Tests erhoben. Es wurde insbesondere untersucht, welche Effekte kompetenzielles Feedback im Vergleich zu keinem Feedback auf die Performanz und Motivation von Lernenden zeigt und welche Effekte des kompetenziellen Feedbacks auf Performanz, Motivation und Genauigkeit der Selbsteinschätzung sich im Vergleich zu einem sozialen Feedback und einer Kontrollgruppe ohne Feedbackinformation zeigen. Zudem wurden differenzielle Effekte kompetenziellen Fremdfeedbacks und Selbstfeedbacks identifiziert und auf Performanz untersucht. Es zeigte sich, dass Feedback in Relation zu den Stufen eines domänenspezifischen Kompetenzmodells positive Effekte auf den Lernprozess hat und dass kompetenzielles Feedback sozialem Feedback überlegen ist. Auch konnte ein Mediatoreffekt der Genauigkeit der Schülerselbsteinschätzung im Hinblick auf die Effektivität von Feedback nachgewiesen werden. Als weiteres Ergebnis zeigt sich, dass Lernende mit kompetenziellem Fremdfeedback signifikant besser abschnitten und das Feedback signifikant effektiver wahrnahmen als Lernende in der internen kompetenziellen Feedbackbedingung. Die wahrgenommene Feedbackeffektivität mediierte die Feedbackeffekte auf Performanz vollständig. (DIPF/Projektträger)

4

Heterogenität in IRT-Modellen Das Ziel dieses Forschungsprojektes war es, ein neues methodisches Instrumentarium zu entwickeln, das die statistische Überprüfung von Gruppenunterschieden in komplexen Studien zur Kompetenzdiagnostik erlaubt. Im Fokus des Forschungsvorhabens stand das Rasch-Modell, ein parametrisches Modell zur Skalierung latenter Personeneigenschaften. Dessen zentrale Annahme ist die Invarianz. Diese Annahme ist verletzt, wenn Aufgabenunterschiede bestehen, z. B. wenn eine Aufgabe bei gleicher Fähigkeit für ei ... Das Ziel dieses Forschungsprojektes war es, ein neues methodisches Instrumentarium zu entwickeln, das die statistische Überprüfung von Gruppenunterschieden in komplexen Studien zur Kompetenzdiagnostik erlaubt. Im Fokus des Forschungsvorhabens stand das Rasch-Modell, ein parametrisches Modell zur Skalierung latenter Personeneigenschaften. Dessen zentrale Annahme ist die Invarianz. Diese Annahme ist verletzt, wenn Aufgabenunterschiede bestehen, z. B. wenn eine Aufgabe bei gleicher Fähigkeit für eine Gruppe einfacher zu lösen ist. Im Projekt sollten statistische Tests zur Signifikanzprüfung einzelner Aufgabenunterschiede weiterentwickelt und Erweiterungen aktueller Verfahren umgesetzt werden. Die neuen Verfahren sollten in der frei zugänglichen statistischen Programmierumgebung R implementiert werden, um eine breite Nutzung der Methodik in der empirischen Bildungsforschung zu ermöglichen. Um Personengruppen hinsichtlich einzelner Aufgabenunterschiede zu vergleichen, musste mittels einer Restriktion eine gemeinsame Skala der Gruppen konstruiert werden. Die Wahl dieser Restriktion wurde durch Ankerverfahren bestimmt. Mithilfe einer umfangreichen Simulationsstudie wurden verschiedene etablierte und selbst entwickelte, iterative Ankerverfahren in der Software R implementiert und in verschiedenen Situationen gegenübergestellt. Die Ergebnisse zeigen, dass das neue iterative Ankerverfahren mit einer Forward-Ankerselektion die besten Ergebnisse liefert, da es weniger Aufgaben fälschlicherweise Differential Item Functioning (DIF) unterstellt und gleichzeitig tatsächliche Aufgabenunterschiede auch häufiger erkennt. Für die praktische Forschung müssen damit weniger Ressourcen für die Konstruktion eines Rasch-konformen Pools an Aufgaben verwendet werden. (DIPF/Projektträger)

5

Kompost - Ermittlung von Indikatoren für die Kompetenzeinschätzung von Schülertexten mittels computerlinguistischer Methoden und dialogische Entwicklung eines Prototyps für die computergestützte Analyse von Aufsätzen Ziel der Studie war die unter Einsatz computerlinguistischer Verfahren erfolgende Ermittlung sowie die Untersuchung von belastbaren, differenzierten Indikatoren für die Qualität von Schülertexten für die deutsche Sprache. Diese Indikatoren, die auf eine besonders gute oder schlechte sprachliche Kompetenz hinweisen, sollten Eingang in eine Analysesoftware finden, die helfen soll, förderbedürftige Schüler bereits sehr früh zu identifizieren und sie angemessen zu fördern. [Als Datenbasis standen fü ... Ziel der Studie war die unter Einsatz computerlinguistischer Verfahren erfolgende Ermittlung sowie die Untersuchung von belastbaren, differenzierten Indikatoren für die Qualität von Schülertexten für die deutsche Sprache. Diese Indikatoren, die auf eine besonders gute oder schlechte sprachliche Kompetenz hinweisen, sollten Eingang in eine Analysesoftware finden, die helfen soll, förderbedürftige Schüler bereits sehr früh zu identifizieren und sie angemessen zu fördern. [Als Datenbasis standen für dieses Projekt viele Tausend Aufsätze, Testergebnisse und Hintergrundinformationen von Schülern aus der Hamburger Längsschnittuntersuchung "Kompetenzen und Einstellungen von Schülerinnen und Schülern" (KESS) zur Verfügung. Zum Zweck der Ableitung oder Weiterentwicklung von Kompetenzmodellen] wurden die zu erfassenden Merkmale operationalisiert, automatisch aus den Aufsätzen quantifiziert und schließlich unter Hinzuziehung von manuellen Bewertungen und Testergebnissen mittels statistischer Verfahren wie Korrelationsanalyse, Regressionsanalyse und Faktorenanalyse untersucht. Die in KESS erhobenen Aufsätze wurden in ein einheitliches Format gebracht und zu einem Textkorpus zusammengestellt, das derzeit 1133, 125, 1705 bzw. 1196 Aufsätze in den Klassen 4, 7, 8 bzw.10 umfasst. Zur späteren Auswertung wurden verschiedene Annotationskategorien erarbeitet; für einen Teil des Korpus wurden Zielhypothesen und Fehlerspezifikationen manuell annotiert sowie eine automatische Annotation von Wortarten mittels Treetagger vorgenommen. Die Analyse ausgewählter linguistischer Oberflächenmerkmale bzw. relativ leicht zu erfassender linguistischer Kategorien zeigt, dass es Indikatoren für geringe und hohe sprachliche Kompetenz gibt. Aussagekräftig sind zum Beispiel die Verwendung von Affixen und Demonstrativa, der Anteil von Drei-Buchstaben-Wörtern, die durchschnittliche Wortlänge, die Wortanzahl und Wortfrequenzverteilungen. (DIPF/Projektträger)

6

Die Entwicklung von Kompetenz im Umgang mit dem Materiekonzept Ziel des Projekts war die Entwicklung und empirische Prüfung eines Entwicklungsmodells für die Kompetenz [von Schülern] im Umgang mit dem Materiekonzept, [einem zentralen naturwissenschaftlichen Konzept]. Auf Grundlage der umfangreichen Literatur zu Schülervorstellungen von Materie wurde zunächst ein Modell zur Beschreibung der Entwicklung des Verständnisses im Umgang mit dem Materiekonzept begründet. Zur empirischen Validierung des Modells wurden im Rahmen dieses Projekts Ordered Multiple Choic ... Ziel des Projekts war die Entwicklung und empirische Prüfung eines Entwicklungsmodells für die Kompetenz [von Schülern] im Umgang mit dem Materiekonzept, [einem zentralen naturwissenschaftlichen Konzept]. Auf Grundlage der umfangreichen Literatur zu Schülervorstellungen von Materie wurde zunächst ein Modell zur Beschreibung der Entwicklung des Verständnisses im Umgang mit dem Materiekonzept begründet. Zur empirischen Validierung des Modells wurden im Rahmen dieses Projekts Ordered Multiple Choice (OMC)-Aufgaben eingesetzt. Mit diesem Aufgabentyp können in einer Aufgabe mehrere Stufen im Sinne unterscheidbarer, hierarchisch geordneter Ausprägungen einer latenten Fähigkeit erfasst werden. Aufbauend auf den Ergebnissen einer Vorstudie wurden 39 OMC-Aufgaben entwickelt und Schülerinnen und Schülern der Klassenstufen 6 bis 13 (N=1368) vorgelegt. Begleitend zu dieser Studie wurde mit einer Auswahl der Probanden (n=11) eine Lautes-Denken-Studie durchgeführt, in der die kognitive Validität der eingesetzten OMC-Aufgaben untersucht wurde. Es konnte gezeigt werden, dass die eingesetzten OMC-Aufgaben geeignet sind, sowohl Unterschiede im Verständnis der Schüler als auch eine Entwicklung des Verständnisses im Verlauf der Schulzeit zu erfassen. Die Ergebnisse legen nahe, dass das eingesetzte Modell einen geeigneten Rahmen zur Beschreibung der Entwicklung des Verständnisses im Umgang mit dem Materiekonzept darstellt. (DIPF/Projektträger)

7

Kompetenzstruktur und -niveaus von Methoden naturwissenschaftlicher Erkenntnisgewinnung In dieser Studie wurde das prozessbezogene Kompetenzkonstrukt "Naturwissenschaftliche Untersuchungen" - Fragestellung, Hypothese, Untersuchungsdesign und Datenauswertung - des ESNaS-Modells ("Evaluation der Standards in den Naturwissenschaften für die Sekundarstufe I") um methodenspezifische Kompetenzkonstrukte (Beobachten, Vergleichen und Experimentieren) erweitert. Das zweidimensionale Facettendesign erlaubt die Beantwortung der Frage, ob wissenschaftsmethodische Kompetenzen naturwissenschaftl ... In dieser Studie wurde das prozessbezogene Kompetenzkonstrukt "Naturwissenschaftliche Untersuchungen" - Fragestellung, Hypothese, Untersuchungsdesign und Datenauswertung - des ESNaS-Modells ("Evaluation der Standards in den Naturwissenschaften für die Sekundarstufe I") um methodenspezifische Kompetenzkonstrukte (Beobachten, Vergleichen und Experimentieren) erweitert. Das zweidimensionale Facettendesign erlaubt die Beantwortung der Frage, ob wissenschaftsmethodische Kompetenzen naturwissenschaftlicher Erkenntnisgewinnung vorrangig methodenspezifisch oder prozessbezogen zu interpretieren sind. Zur Prüfung der Dimensionalität wurden die Daten von 986 Lernenden der 10. Jahrgangsstufe, die einen Test mit 132 Aufgaben im Multi-Matrix-Design bearbeitet haben, herangezogen und mit probabilistischen und klassischen Verfahren ausgewertet. Nun liegt ein Kompetenzstrukturmodell für das Unterrichtsfach Biologie vor, das über das Experimentieren hinaus, welches bisher vorrangig modelliert wurde, auch die Operationalisierung weiterer Erkenntnismethoden ermöglicht. Die Datenauswertung belegt, dass trotz Ausdifferenzierung des eindimensionalen Modells "Naturwissenschaftliche Untersuchungen" in weitere methodenbezogenen bzw. prozessbezogene Subdimensionen keine signifikante Abnahme der Modellgüte zu verzeichnen ist. Zudem zeigt sich, dass Schüler der Sekundarstufe I Schwierigkeiten haben, Hypothesen zu formulieren. Das hypothesengeleitete Beobachten von biologischen Systemen stellt eine besondere Herausforderung dar. Die Ergebnisse legen insgesamt schulpraktische Konsequenzen nahe. (DIPF/Projektträger)

8

Interventionsstudie zur Förderung von Modellkompetenz sowie deren Diagnose- und Vermittlungskompetenz bei Lehramtsstudierenden der Biologie im Master of Education Ziel dieses Projekts war die Entwicklung von Fortbildungsmodulen für Lehrkräfte sowie die Ableitung von Kriterien zur Förderung von Modellkompetenz im Biologieunterricht. Dies erfolgte in zwei Phasen. Phase I [untersuchte und erfasste] die Wirkung einer Interventionsmaßnahme zur Förderung der Modellkompetenz sowohl bei Lehrkräften als auch bei Schülern. (...) Dazu wurden angehende Biologielehrer gezielt in ihrer Modellkompetenz fortgebildet (...) im Rahmen von drei Modulen à 180 Minuten mit folg ... Ziel dieses Projekts war die Entwicklung von Fortbildungsmodulen für Lehrkräfte sowie die Ableitung von Kriterien zur Förderung von Modellkompetenz im Biologieunterricht. Dies erfolgte in zwei Phasen. Phase I [untersuchte und erfasste] die Wirkung einer Interventionsmaßnahme zur Förderung der Modellkompetenz sowohl bei Lehrkräften als auch bei Schülern. (...) Dazu wurden angehende Biologielehrer gezielt in ihrer Modellkompetenz fortgebildet (...) im Rahmen von drei Modulen à 180 Minuten mit folgenden Themen: Einführung in das Kompetenzmodell, Diagnose von Schüleraussagen, Erprobung eines Unterrichtsbeispiels, Planung einer eigenen Unterrichtssequenz. Die Dokumentation des Unterrichts erfolgte über das von den Lehrkräften erstellte Planungsmaterial sowie die Videografie der einzelnen Stunden. Die Qualität der Unterrichtseinheiten wurde durch die Entwicklung der Modellkompetenz der Schüler indirekt kontrolliert. [Die Kompetenzentwicklung] wurde durch offene und geschlossene Aufgaben im Pre-Post-Test-Design erfasst. Die Fortbildung führte bei den Lehrkräften zu einer signifikanten Verbesserung der Modellkompetenz in allen fünf Teilkompetenzen. Im Unterricht fördern sie dagegen nur begrenzt einzelne Teilkompetenzen bei ihren Schülern. (...) In Phase II: [wurde] die Wirkung einer Interventionsmaßnahme zur Förderung der Modellkompetenz sowie der Diagnose- und Vermittlung dieser Kompetenz bei Masterstudierenden des Lehramts Biologie erfasst. Dazu wurden so genannte learning cases (fallbasierte Lernaufgaben) genutzt. (...) Die Kompetenzentwicklung der Studierenden wurde durch spezifische Instrumente im offenen und geschlossenen Format im Pre-Post-Follow-up-Design evaluiert. Mit neu zu entwickelnden test cases wurde die praxisrelevante Diagnosefähigkeit bzw. Vermittlungskompetenz der Studierenden vor und nach der Intervention dokumentiert und analysiert. Der Einsatz von Fällen stellte die unabhängige Variable dar, von der die Variablen Diagnosekompetenz und Vermittlungskompetenz der Lehramtsstudierenden abhängig waren. Die Modellkompetenz der Studierenden wurde auf der Basis der Module entwickelt, die bei Referendaren mit Erfolg eingesetzt wurden. Um die Effekte der learning cases zu untersuchen, wurde in einer Kontrollgruppe (paralleles Vorbereitungsseminar, gleicher zeitlicher Umfang) nach der Festigung der Modellkompetenz direkt in die Entwicklung von Unterrichtseinheiten eingestiegen. Die Projektergebnisse kommen im gesamten Bereich der Lehrerausbidung und Lehrerfortbildung zum Tragen (...). Die entwickelte Expertise in der Förderung der Diagnose- und Vermittlungsfähigkeit von Lehramtstudierenden sowie die entwickelten Materialien (learning cases) werden in die Fortbildung eingebracht. (DIPF/Projektträger)

9

EVA - Evaluation zweier Frühpräventionsprogramme in Kindergärten mit Hochrisikokindern Neben einigen Fragebögen, die das Sozialverhalten und die Entwicklung der Kinder erfassen ("Strengths and Difficulties Questionnaire" (SDQ),Goodman, 1997; Woerner et al., 2002, "Positive Entwicklung und Resilienz im Kindergartenalltag" (PERIK), Mayr & Ulrich, 2009a und "Caregiver-Teacher Reportform" (C-TRF), Achenbach & Rescorla, 2000), war ein wichtiges Hauptmessinstrument der MCAST (Manchester Child Attachment Story Task, Green et al., 2000). Mit diesem relativ neuen Untersuchungsinstrument wu ... Neben einigen Fragebögen, die das Sozialverhalten und die Entwicklung der Kinder erfassen ("Strengths and Difficulties Questionnaire" (SDQ),Goodman, 1997; Woerner et al., 2002, "Positive Entwicklung und Resilienz im Kindergartenalltag" (PERIK), Mayr & Ulrich, 2009a und "Caregiver-Teacher Reportform" (C-TRF), Achenbach & Rescorla, 2000), war ein wichtiges Hauptmessinstrument der MCAST (Manchester Child Attachment Story Task, Green et al., 2000). Mit diesem relativ neuen Untersuchungsinstrument wurde das Bindungsmuster der Kinder erfasst. Weitere Instrumente waren der "Hannover-Wechsler-Intelligenztest für das Vorschulalter – III" (HAWIVA) (Ricken, Fritz, Schuck, & Preuß, 2007) sowie der „Leitfaden für ein Elterninterview zur Erfassung von Risikofaktoren“ (Neubert & Läzer, 2011) und das "Interview für Pädagogen zur Erfassung der Reflexivität" (IPR, Hartmann, 2012). Als Stichprobe für die Evaluation des ersten Frühpräventionsprogramms wurden 307, für die Evaluation des zweiten Programms 305 Kinder herangezogen.

10

Entwicklung eines Instruments zur Erfassung der Fachkompetenz bei Industriemechanikern und Modellierung eines Kompetenzentwicklungsmodells bis zur Zwischenprüfung Zentrales Ziel des Forschungsprojekts war die Modellierung der berufsfachlichen Kompetenz für den Ausbildungsberuf des Industriemechanikers. Darüber hinaus sollten erste Erkenntnisse zur Kompetenzentwicklung der Auszubildenden [bis zur Zwischenprüfung] gewonnen werden [mit Schwerpunkt auf der Fachkompetenz]. Hierzu war es notwendig, ein Instrumentarium zur Erfassung der Fachkompetenz im Bereich Metalltechnik (Industriemechaniker) zu entwickeln. Neben der Entwicklung des Instrumentariums zur Erfa ... Zentrales Ziel des Forschungsprojekts war die Modellierung der berufsfachlichen Kompetenz für den Ausbildungsberuf des Industriemechanikers. Darüber hinaus sollten erste Erkenntnisse zur Kompetenzentwicklung der Auszubildenden [bis zur Zwischenprüfung] gewonnen werden [mit Schwerpunkt auf der Fachkompetenz]. Hierzu war es notwendig, ein Instrumentarium zur Erfassung der Fachkompetenz im Bereich Metalltechnik (Industriemechaniker) zu entwickeln. Neben der Entwicklung des Instrumentariums zur Erfassung der Fachkompetenz wurde ein Erklärungsmodell für die Kompetenzentwicklung bei den Industriemechanikern bis zur Zwischenprüfung erarbeitet. Hierzu wurden neben der Fachkompetenz auch motivationale Merkmale, Basiskompetenzen (Lesen / Mathematik) und kognitive Grundfähigkeiten (IQ) sowie zu mehreren Zeitpunkten wahrgenommene schulische und betriebliche Ausbildungsqualitäten erhoben. Die Untersuchung wurde in Baden-Württemberg an zehn Schulen in 22 Klassen durchgeführt. Insgesamt wurden damit etwas mehr als 500 Schülerinnen und Schüler an der Studie beteiligt, die zu drei Zeitpunkten getestet und befragt wurden: am Ausbildungsbeginn, am Ende des ersten Lehrjahres und zur Zwischenprüfung nach ca. eineinhalb Jahren. Die in der Studie zum Einsatz kommenden Tests wurden im Projektverlauf entwickelt und pilotiert. Die Datenauswertung fand auch unter längsschnittlichen Gesichtspunkten statt. (DIPF/Projekt/Projektträger)

11

Entwicklung und Erprobung von technologieorientierten Messinstrumenten zur Feststellung der beruflichen Handlungskompetenz in der Pflege älterer Menschen (TEMA) Die Studie überprüft das im Verbundprojekt auf Grundlage einer theoretischen Kompetenzmodellierung entwickelte computerbasierte Verfahren zur Feststellung der beruflichen Handlungskompetenz in der Pflege älterer Menschen an einer substanziellen Stichprobe von Schülerinnen und Schülern am Ende ihrer dreijährigen Altenpflegeausbildung. Durch die zusätzliche Berücksichtigung einer Stichprobe von Auszubildenden der Gesundheitspflege und Krankenpflege wird daneben der Aufforderung des Projektträgers ... Die Studie überprüft das im Verbundprojekt auf Grundlage einer theoretischen Kompetenzmodellierung entwickelte computerbasierte Verfahren zur Feststellung der beruflichen Handlungskompetenz in der Pflege älterer Menschen an einer substanziellen Stichprobe von Schülerinnen und Schülern am Ende ihrer dreijährigen Altenpflegeausbildung. Durch die zusätzliche Berücksichtigung einer Stichprobe von Auszubildenden der Gesundheitspflege und Krankenpflege wird daneben der Aufforderung des Projektträgers und des Fachbeirats zur Erprobung des Testinstruments in diesem Berufsfeld nachgekommen. Individuelle Hintergrundmerkmale und Merkmale der schulischen und betrieblichen Ausbildungsbedingungen werden in Kooperation mit den Ascot-Querschnittsprojekten MaK-adapt und SiKoFak erhoben, um Hinweise auf Bedingungsfaktoren und Korrelate der pflegerischen Handlungskompetenz zu erhalten. (DIPF/Projekt)

12

ELBE - Elternberatung an Grundschulen Das Projekt befasste sich mit der Zusammenarbeit von Lehrpersonen und Eltern - vor allem mit der Beratung im Rahmen von Elterngesprächen. In vorausgegangenen Studien hat sich gezeigt, dass die Zusammenarbeit von Eltern und Lehrpersonen eine positive Auswirkung auf die Leistungsentwicklung und das Verhalten von Schülerinnen und Schülern hat. Elternberatung ist ein wichtiger Ansatzpunkt zur adaptiven Gestaltung der häuslichen Lernumgebung: Gemeinsam können Strategien besprochen und aufeinander abg ... Das Projekt befasste sich mit der Zusammenarbeit von Lehrpersonen und Eltern - vor allem mit der Beratung im Rahmen von Elterngesprächen. In vorausgegangenen Studien hat sich gezeigt, dass die Zusammenarbeit von Eltern und Lehrpersonen eine positive Auswirkung auf die Leistungsentwicklung und das Verhalten von Schülerinnen und Schülern hat. Elternberatung ist ein wichtiger Ansatzpunkt zur adaptiven Gestaltung der häuslichen Lernumgebung: Gemeinsam können Strategien besprochen und aufeinander abgestimmt werden, wie das Kind zu Hause und in der Schule unterstützt werden kann. Das Projekt wollte folgende Forschungsfragen beantworten: 1. Wie ist die aktuelle Beratungspraxis an Grundschulen? 2. Wie lässt sich die Beratungskompetenz von (angehenden) Lehrpersonen durch Professionalisierungsmaßnahmen fördern? 3. Welchen Einfluss haben Professionalisierungsmaßnahmen auf den realen Schulalltag? Wie bewerten Eltern die Beratungsgespräche? Und können diese die Gestaltung der häuslichen Lernumgebungen und die damit einhergehende Entwicklung der Kinder positiv beeinflussen? Die Ergebnisse des Projekts liefern einen wichtigen Beitrag zur Forschung zu Lehrerprofessionalität und zur Zusammenarbeit von Schule und Elternhaus. (DIPF/Projekt)

13

Modellierung und Messung domänenspezifischer Problemlösekompetenz bei Industriekaufleuten (DomPL-IK) In einer eigens entwickelten Bürosimulation bearbeiteten die Teilnehmenden drei komplexe Szenarien. Hierfür standen allgemeine und domänenspezfische Software-Funktionen zur Verfügung. Die Auswertung / Kompetenzattribution basierte auf der frei formulierten Antwort (E-Mail), durchgeführten Berechnungen und teilweise auf Logdaten. (Projekt) In einer eigens entwickelten Bürosimulation bearbeiteten die Teilnehmenden drei komplexe Szenarien. Hierfür standen allgemeine und domänenspezfische Software-Funktionen zur Verfügung. Die Auswertung / Kompetenzattribution basierte auf der frei formulierten Antwort (E-Mail), durchgeführten Berechnungen und teilweise auf Logdaten. (Projekt)

14

CoBALIT - Kompetenzmessung aus Arbeits- und Geschäftsprozessperspektive Im Rahmen dieses Teilvorhabens wurden technologiebasierte Assessmentverfahren eingesetzt. Die Erhebung erfolgte im Rotationsdesign. Die Stichprobe setzte sich aus zur Teilnahme bereiten Schulen zusammen. Die Vorabauswahl erfolgte bezogen auf Bundesland und Ausbildungsberuf, Ausbildungsjahr und unter Berücksichtigung testökonomischer Gründe (Schulgröße, Anzahl der Klassen). Das Erhebungsdesign entsprach einem Booklet Design. Zu den eingesetzten Aufgabenformaten zählten offene, halboffene und gesc ... Im Rahmen dieses Teilvorhabens wurden technologiebasierte Assessmentverfahren eingesetzt. Die Erhebung erfolgte im Rotationsdesign. Die Stichprobe setzte sich aus zur Teilnahme bereiten Schulen zusammen. Die Vorabauswahl erfolgte bezogen auf Bundesland und Ausbildungsberuf, Ausbildungsjahr und unter Berücksichtigung testökonomischer Gründe (Schulgröße, Anzahl der Klassen). Das Erhebungsdesign entsprach einem Booklet Design. Zu den eingesetzten Aufgabenformaten zählten offene, halboffene und geschlossene Antwortformate. Fehlende Werte wurden differenziert bewertet. Außerdem wurden Messmodelle der Item Response Theory (IRT) in dem Softwareprogramm Acer Conquest eingesetzt. Erfasst wurde das Konstrukt der kaufmännischen Kompetenz am Beispiel des Ausbildungsberufes Industriekaufmann bzw. Industriekauffrau. Zur Abbildung und Messung der kaufmännischen Kompetenz von Industriekaufleuten wurde ein Kompetenzmodell zugrunde gelegt, welches im Kern zwischen allgemeinen berufsbezogenen Kompetenzen (Konzept der kaufmännischen Literalität) sowie berufsspezifischen Kompetenzen differenziert (Geschäftsprozesskompetenz). Das eingesetzte Testinstrument ist eine Weiterentwicklung der von Achtenhagen und Winther (2008) entwickelten Testplattform ALUSIM. (DIPF/Projekt)

15

CoBALIT - Transfer der Assessmentverfahren auf andere kaufmännische Berufe und Tätigkeitsbereiche Im Rahmen dieses Teilvorhabens wurden technologiebasierte Assessmentverfahren eingesetzt. Die Erhebung erfolgte im Rotationsdesign. Die Stichprobe setzte sich aus zur Teilnahme bereiten Schulen zusammen. Die Vorabauswahl erfolgte bezogen auf Bundesland, Ausbildungsberuf und Ausbildungsjahr. Das Erhebungsdesign entsprach einem Booklet Design. Zu den eingesetzten Aufgabenformaten zählten offene, halboffene und geschlossene Antwortformate. Fehlende Werte wurden differenziert bewertet. Außerdem wurd ... Im Rahmen dieses Teilvorhabens wurden technologiebasierte Assessmentverfahren eingesetzt. Die Erhebung erfolgte im Rotationsdesign. Die Stichprobe setzte sich aus zur Teilnahme bereiten Schulen zusammen. Die Vorabauswahl erfolgte bezogen auf Bundesland, Ausbildungsberuf und Ausbildungsjahr. Das Erhebungsdesign entsprach einem Booklet Design. Zu den eingesetzten Aufgabenformaten zählten offene, halboffene und geschlossene Antwortformate. Fehlende Werte wurden differenziert bewertet. Außerdem wurden Messmodelle der Item Response Theory (IRT) in dem Softwareprogramm Acer Conquest eingesetzt. Erfasst wurde das latente Konstrukt der kaufmännischen Kompetenz im Bereich Spedition und Logistik. Das eingesetzte Testinstrument ist eine Weiterentwicklung der von Achtenhagen und Winther (2008) entwickelten Testplattform ALUSIM, welches um den Bereich Spedition und Logistik erweitert wurde. (DIPF/Projekt)

16

BilWiss - Bildungswissenschaftliches Wissen und der Erwerb professioneller Kompetenz bei Lehramtsstudierenden Auf der Grundlage einer zuvor erfolgten bildungswissenschaftlichen Themensammlung wurde ein Messinstrument entwickelt, das das konzeptuell-analytische Wissen von Lehramtsanwärtern direkt erfasst. Die Erhebung der Studie wurde an allen Studienseminaren in Nordrhein-Westfalen mit 3.298 Universitätsabsolventen durchgeführt, welche sich unmittelbar zu Beginn der zweiten Ausbildungsphase (genauer: des Vorbereitungsdienstes) befanden. Ein Teil der Lehramtsanwärter aus der Hauptstudie (n=362) nahm im R ... Auf der Grundlage einer zuvor erfolgten bildungswissenschaftlichen Themensammlung wurde ein Messinstrument entwickelt, das das konzeptuell-analytische Wissen von Lehramtsanwärtern direkt erfasst. Die Erhebung der Studie wurde an allen Studienseminaren in Nordrhein-Westfalen mit 3.298 Universitätsabsolventen durchgeführt, welche sich unmittelbar zu Beginn der zweiten Ausbildungsphase (genauer: des Vorbereitungsdienstes) befanden. Ein Teil der Lehramtsanwärter aus der Hauptstudie (n=362) nahm im Rahmen der längsschnittlichen Untersuchung an einer Zwischenerhebung nach einem Jahr im Vorbereitungsdienst teil. (IQB/Projekt)

17

Empirische Beschreibung von Modellkompetenz Zur empirischen Überprüfung des Kompetenzmodells der Modellkompetenz bearbeiteten Schülerinnen und Schüler der Sekundarstufe 1 Multiple Choice-Items sowie Fragebögen zu verschiedenen weiteren Variablen und Konstrukte (...): Die Items aus KFT, LGVT und NOS-Fragebogen sowie Fragen zu Schulnoten und Geschlecht wurden von allen Schülern bearbeitet. Die Multiple-Choice-Items zur Modellkompetenz wurden in einem Multi-Matrix-Design (15,3,1-BIBD) vorgelegt. Multiple-Choice-Items, die vorgegeben, aber ni ... Zur empirischen Überprüfung des Kompetenzmodells der Modellkompetenz bearbeiteten Schülerinnen und Schüler der Sekundarstufe 1 Multiple Choice-Items sowie Fragebögen zu verschiedenen weiteren Variablen und Konstrukte (...): Die Items aus KFT, LGVT und NOS-Fragebogen sowie Fragen zu Schulnoten und Geschlecht wurden von allen Schülern bearbeitet. Die Multiple-Choice-Items zur Modellkompetenz wurden in einem Multi-Matrix-Design (15,3,1-BIBD) vorgelegt. Multiple-Choice-Items, die vorgegeben, aber nicht beantwortet wurden, wurden für die Schätzung sowohl der Itemparameter als auch der Personenfähigkeiten als falsch gewertet, da sie das nächste Testheft mit weiteren Aufgaben erst erhielten, wenn sie angaben, alle Items bearbeitet zu haben. Die Daten von 42 Schülern, die bei mehr als der Hälfte der MC-Items doppelt oder nichts angekreuzt hatten, wurden ausgeschlossen, da hier nicht davon ausgegangen werden kann, dass sie ausreichend viele Items konstruktgemäß bearbeitet haben. Für die Berechnung der Korrelationen von Modellkompetenz zu anderen Konstrukten und Variablen (Geschlecht, Schulnoten, allgemeine kognitive Fähigkeiten, Lesefähigkeiten, Wissenschaftsverständnis) wurden darüber hinaus fehlende MC-Items bei 291 Schülern imputiert (multiple Imputation mit R). Die Daten wurden nach der Item-Response-Theorie mit Conquest modelliert. In das Hintergrundmodell zu den Zusammenhängen von Modellkompetenz mit anderen Konstrukten und Variablen gingen sämtliche Variablen ein (KFT LGVT, Nature of Science-Fragebogen (Urhahne et al., 2008), Schulnoten, Angaben zum Geschlecht). (DIPF/Projekt)

18

Kognitive Prozesse bei der Itembearbeitung Die Multiple Choice-Items, die den Schülern zur empirischen Überprüfung des Kompetenzmodells der Modellkompetenz vorgelegt werden sollten, wurden vorab daraufhin überprüft, ob sie Schlüsse auf die Modellkompetenz von Schülern zulassen. Hierzu wurden mit Hilfe der Methode des lauten Denkens Denkprotokolle von 22 Schülern der Zielpopulation (Jahrgangsstufe 7 sowie Jahrgangsstufe 10, Sekundarschule und Gymnasium) erhoben und anhand eines Codierleitfadens inhaltsanalytisch ausgewertet. Die Reliabili ... Die Multiple Choice-Items, die den Schülern zur empirischen Überprüfung des Kompetenzmodells der Modellkompetenz vorgelegt werden sollten, wurden vorab daraufhin überprüft, ob sie Schlüsse auf die Modellkompetenz von Schülern zulassen. Hierzu wurden mit Hilfe der Methode des lauten Denkens Denkprotokolle von 22 Schülern der Zielpopulation (Jahrgangsstufe 7 sowie Jahrgangsstufe 10, Sekundarschule und Gymnasium) erhoben und anhand eines Codierleitfadens inhaltsanalytisch ausgewertet. Die Reliabilität der Codierung wurde mit Cohens Kappa geprüft. Aufgrund der großen sprachlichen Verständnisschwierigkeiten und der damit einhergehenden geringen Aussagekraft der zwölf Sekundarschulprotokolle beziehen die publizierten Ergebnisse sich ausschließlich auf die zehn Gymnasialprotokolle. (Projekt)

19

Entwicklung von Modellkompetenz im Kontext Biologieunterricht Längsschnittstudie bei zwei Kohorten, eine Kohorte (K1) von der siebten bis zur neunten Jahrgangsstufe und eine zweite Kohorte (K2) von der achten bis zehnten Jahrgangsstufe am Gymnasium. Die Modellkompetenz wurde mit Hilfe von bereits validierten offenen und Multiple-Choice Items erfasst und anhand der Item-Response-Theorie in einem dreidimensionalen Modell ausgewertet, bei dem jede Dimension einen Messzeitpunkt darstellt. (Projekt) Längsschnittstudie bei zwei Kohorten, eine Kohorte (K1) von der siebten bis zur neunten Jahrgangsstufe und eine zweite Kohorte (K2) von der achten bis zehnten Jahrgangsstufe am Gymnasium. Die Modellkompetenz wurde mit Hilfe von bereits validierten offenen und Multiple-Choice Items erfasst und anhand der Item-Response-Theorie in einem dreidimensionalen Modell ausgewertet, bei dem jede Dimension einen Messzeitpunkt darstellt. (Projekt)

20

Fehleranalysefähigkeit Ziel der Studie war es, Erkenntnisse bereitstellen zur Frage, ob es möglich ist, mit eng an Arbeitsprozessen ausgerichteten Aufgaben im Paper-Pencil-Format Kompetenzausprägungen abzuschätzen, die gegenwärtig mit hochaufwendigen Simulationen oder realen Arbeitsproben erfassen werden. Erfasst wurden Fehlerdiagnosekompetenz und Fehlerdiagnosewissen, in Eigenentwicklung nach theoretischem Kompetenzverständnis. Die Erweiterung des Tests zur Fehleranalysefähigkeit wurde aus Validitätsgründen notwendig ... Ziel der Studie war es, Erkenntnisse bereitstellen zur Frage, ob es möglich ist, mit eng an Arbeitsprozessen ausgerichteten Aufgaben im Paper-Pencil-Format Kompetenzausprägungen abzuschätzen, die gegenwärtig mit hochaufwendigen Simulationen oder realen Arbeitsproben erfassen werden. Erfasst wurden Fehlerdiagnosekompetenz und Fehlerdiagnosewissen, in Eigenentwicklung nach theoretischem Kompetenzverständnis. Die Erweiterung des Tests zur Fehleranalysefähigkeit wurde aus Validitätsgründen notwendig und zielte insbesondere auf die Einbeziehung zusätzlicher technischer Systeme. Die Optimierung war wegen noch bestehender Reliabilitätsprobleme notwendig. (Projekt)