Research data and study information about „Keywords: Testentwicklung” (31)

Gesundheitskompetenz im Kontext der modernen Informationsgesellschaft

Das vorliegende Projekt betrachtete zum einen theoretisch das Konstrukt der Gesundheitskompetenz im Kontext der modernen Informationsgesellschaft. Den Ausgangspunkt hierfür stellte das Kompetenzstrukturmodell der Gesundheitskompetenz von Soellner, Lenartz, Huber und Rudinger dar. Zum anderen wurde ein Messinstrument entwickelt, das eine standardisierte Erfassung der informationsbezogenen Facetten des Modells, d. h. der Informationssuche und Informationsverarbeitung, ermöglicht. Das Forschungsvor ... Das vorliegende Projekt betrachtete zum einen theoretisch das Konstrukt der Gesundheitskompetenz im Kontext der modernen Informationsgesellschaft. Den Ausgangspunkt hierfür stellte das Kompetenzstrukturmodell der Gesundheitskompetenz von Soellner, Lenartz, Huber und Rudinger dar. Zum anderen wurde ein Messinstrument entwickelt, das eine standardisierte Erfassung der informationsbezogenen Facetten des Modells, d. h. der Informationssuche und Informationsverarbeitung, ermöglicht. Das Forschungsvorhaben gliederte sich in zwei Phasen: (1) die systematische theoretische Aufarbeitung derjenigen Strukturkomponenten des genannten Modells, die sich auf den Umgang mit Gesundheitsinformationen beziehen und (2) die Entwicklung eines Messinstruments, das es erlaubt, die informationsbezogenen Strukturkomponenten empirisch zu erfassen. Das Vorgehen bei der Konstruktion des Messinstruments orientierte sich an den "four building blocks" von Wilson. Informationssuche und Informationsverarbeitung im Internet wurden mithilfe eines Leistungstests erfasst, der einen realen Online-Informationsbeschaffungsvorgang enthält. Die Informationssuche wurde anhand von Suchindizes bewertet, die Informationsverarbeitung durch eine nicht normative Entscheidungsgütebewertung im Rahmen der "informed choice" nach Marteau. Die eHealth literacy scale (eHEALS von Norman und Skinner) wurde ins Deutsche übersetzt und psychometrisch evaluiert. Auf Grund des zugrunde gelegten Modells wurde angenommen, dass die eHEALS zwei verschiedene Konstrukte erfasst: Informationssuche und Informationsverarbeitung. Die Ergebnisse unterstützten diese Hypothese. Ein Leistungstest zur Erfassung von Online-Informationssuche sowie Informationsbewertung befindet sich in der Pilotphase. (DIPF/Projektträger)

Bildungssprachliche Kompetenzen (BiSpra) - Anforderungen, Sprachverarbeitung und Diagnostik

Das Verbundvorhaben zielte zum Einen darauf ab, bildungssprachliche Fähigkeiten und Fertigkeiten sowie damit einhergehende (entwicklungstypische) Sprachkompetenzen zu erfassen, die Schüler benötigen, um im Unterricht erfolgreich agieren zu können. (...) Zum anderen wurde experimentell geprüft, welche bildungssprachlichen Merkmale Kindern mit Migrationshintergrund und / oder aus bildungsfernen Familien besondere Schwierigkeiten bereiten. Hierauf aufbauend bzw. in Rückkopplung dazu (...) wurde ein ... Das Verbundvorhaben zielte zum Einen darauf ab, bildungssprachliche Fähigkeiten und Fertigkeiten sowie damit einhergehende (entwicklungstypische) Sprachkompetenzen zu erfassen, die Schüler benötigen, um im Unterricht erfolgreich agieren zu können. (...) Zum anderen wurde experimentell geprüft, welche bildungssprachlichen Merkmale Kindern mit Migrationshintergrund und / oder aus bildungsfernen Familien besondere Schwierigkeiten bereiten. Hierauf aufbauend bzw. in Rückkopplung dazu (...) wurde ein linguistisch und (sprach-)entwicklungspsychologisch fundiertes Verfahren zur Einschätzung und Förderung der bildungssprachlichen Fähigkeiten entwickelt. Im Fokus standen Schüler der Primarstufe mit Übergang zur Sekundarstufe I. Ausgehend von einem differenzierten Bildungssprachbegriff wurden die für die schulische Wissensvermittlung relevanten Fähigkeiten (academic language, alltägliche Wissenschaftssprache, Bildungssprache) an ausgewählten Gegenständen behandelt. Im Teilprojekt Linguistik wurden für die Jahrgangsstufen 4 und 5 bildungssprachliche Anforderungen in naturwissenschaftlichen Unterrichtseinheiten videografiert und analysiert. Auf dieser Basis nebst Auswertung der verwendeten Unterrichtsmaterialien wurden erstmals evidenzbasierte Testitems zur Erfassung rezeptiver bildungssprachlicher Fähigkeiten entwickelt und erfolgreich erprobt. Experimentelle Einzelerhebungen produktiv-mündlicher Fähigkeiten dienten ergänzend der Entwicklung eines linguistischen Kompetenzgitters zur Interrelation semantischer und pragmatischer Qualifikationen, hier exemplifiziert an bildungssprachlichen Verben und Substantiven und an funktionalen Beschreibungen, Erklärungen, Instruktionen. (DIPF/Projekt/Projektträger)

Prozessbezogene Diagnostik des Lese- und Hörverstehens im Grundschulalter

Ziel des Verbundprojektes war die Entwicklung und Erprobung eines computergestützten Messinstruments zur prozessorientierten Erfassung interindividueller Leistungsunterschiede in den differenzierbaren kognitiven Teilprozessen des Leseverstehens und Hörverstehens von Grundschulkindern. (...) Anhand einer Querschnittsuntersuchung wurden die neu entwickelten Tests auf ihre Konstruktvalidität und Kriteriumsvalidität hin überprüft und optimiert. Die Querschnittsdaten bildeten ferner die Grundlage für ... Ziel des Verbundprojektes war die Entwicklung und Erprobung eines computergestützten Messinstruments zur prozessorientierten Erfassung interindividueller Leistungsunterschiede in den differenzierbaren kognitiven Teilprozessen des Leseverstehens und Hörverstehens von Grundschulkindern. (...) Anhand einer Querschnittsuntersuchung wurden die neu entwickelten Tests auf ihre Konstruktvalidität und Kriteriumsvalidität hin überprüft und optimiert. Die Querschnittsdaten bildeten ferner die Grundlage für psychometrische Analysen zur dimensionalen Struktur der kognitiven Teilprozesse des Hörverstehens sowie zur Beziehung von Fertigkeiten des Lese- und Hörverstehens. Die optimierten Testinstrumente wurden anschließend in einer Längsschnittuntersuchung zur Entwicklung der Effizienz von kognitiven Teilprozessen der Lesekompetenz und Hörkompetenz im Verlauf des Leseerwerbs eingesetzt. Hierfür wurden, beginnend mit dem Schuljahr 2011/2012, zwei Kohorten von Schülern vom Beginn des ersten bis zum Ende des vierten Schuljahres begleitet. Die Datenerhebung fand am Beginn des ersten sowie jeweils am Ende eines jeden Schuljahres statt. Ein weiteres Untersuchungsziel war Art und Umfang der Beeinflussung der Lesekompetenzentwicklung durch entsprechende Vorläuferfertigkeiten aus dem Bereich des Hörverstehens. (...) Es wurden sechs parallelisierte Tests des Lese- und Hörverstehens, PRODI-L und PRODI-H, entwickelt, die die kognitiven Teilprozesse auf Wortebene (phonologischen Vergleichsaufgabe, lexikalische Entscheidungsaufgabe, semantische Klassifikationsaufgabe), Satzebene (Grammatikalitätsurteile, semantische Verifikationsaufgabe) und Textebene (Textverifikationsaufgabe) differenziert erfassen. In einer Querschnittsuntersuchung mit 704 Schülern der ersten bis vierten Klasse wurden die Hörverstehenstests und Leseverstehenstests erprobt und optimiert sowie Belege für die Konstrukt- und Kriteriumsvalidität erbracht. Zudem konnte die Abhängigkeit der Leseleistungen von korrespondierenden Vorläuferfertigkeiten des Hörverstehens gezeigt werden. (DIPF/Projektträger)

Kompetenzstruktur und -niveaus von Methoden naturwissenschaftlicher Erkenntnisgewinnung

In dieser Studie wurde das prozessbezogene Kompetenzkonstrukt "Naturwissenschaftliche Untersuchungen" - Fragestellung, Hypothese, Untersuchungsdesign und Datenauswertung - des ESNaS-Modells ("Evaluation der Standards in den Naturwissenschaften für die Sekundarstufe I") um methodenspezifische Kompetenzkonstrukte (Beobachten, Vergleichen und Experimentieren) erweitert. Das zweidimensionale Facettendesign erlaubt die Beantwortung der Frage, ob wissenschaftsmethodische Kompetenzen naturwissenschaftl ... In dieser Studie wurde das prozessbezogene Kompetenzkonstrukt "Naturwissenschaftliche Untersuchungen" - Fragestellung, Hypothese, Untersuchungsdesign und Datenauswertung - des ESNaS-Modells ("Evaluation der Standards in den Naturwissenschaften für die Sekundarstufe I") um methodenspezifische Kompetenzkonstrukte (Beobachten, Vergleichen und Experimentieren) erweitert. Das zweidimensionale Facettendesign erlaubt die Beantwortung der Frage, ob wissenschaftsmethodische Kompetenzen naturwissenschaftlicher Erkenntnisgewinnung vorrangig methodenspezifisch oder prozessbezogen zu interpretieren sind. Zur Prüfung der Dimensionalität wurden die Daten von 986 Lernenden der 10. Jahrgangsstufe, die einen Test mit 132 Aufgaben im Multi-Matrix-Design bearbeitet haben, herangezogen und mit probabilistischen und klassischen Verfahren ausgewertet. Nun liegt ein Kompetenzstrukturmodell für das Unterrichtsfach Biologie vor, das über das Experimentieren hinaus, welches bisher vorrangig modelliert wurde, auch die Operationalisierung weiterer Erkenntnismethoden ermöglicht. Die Datenauswertung belegt, dass trotz Ausdifferenzierung des eindimensionalen Modells "Naturwissenschaftliche Untersuchungen" in weitere methodenbezogenen bzw. prozessbezogene Subdimensionen keine signifikante Abnahme der Modellgüte zu verzeichnen ist. Zudem zeigt sich, dass Schüler der Sekundarstufe I Schwierigkeiten haben, Hypothesen zu formulieren. Das hypothesengeleitete Beobachten von biologischen Systemen stellt eine besondere Herausforderung dar. Die Ergebnisse legen insgesamt schulpraktische Konsequenzen nahe. (DIPF/Projektträger)

Entwicklung und Erprobung von technologieorientierten Messinstrumenten zur Feststellung der beruflichen Handlungskompetenz in der Pflege älterer Menschen (TEMA)

Das Verbundprojekt hatte die Entwicklung und Erprobung eines technologieorientierten Messinstruments zur Feststellung von beruflicher Handlungskompetenz in der Pflege älterer Menschen zum Gegenstand, das praktische Anwendbarkeit und wissenschaftliche Solidität miteinander verbindet. Es ging darum, ein empirisch abgesichertes Kompetenzmodell und Testverfahren zu entwickeln, die eine valide und international anschlussfähige Messung beruflicher Kompetenzen mit Hilfe von neuen technologiebasierten M ... Das Verbundprojekt hatte die Entwicklung und Erprobung eines technologieorientierten Messinstruments zur Feststellung von beruflicher Handlungskompetenz in der Pflege älterer Menschen zum Gegenstand, das praktische Anwendbarkeit und wissenschaftliche Solidität miteinander verbindet. Es ging darum, ein empirisch abgesichertes Kompetenzmodell und Testverfahren zu entwickeln, die eine valide und international anschlussfähige Messung beruflicher Kompetenzen mit Hilfe von neuen technologiebasierten Messverfahren unter Anwendung der probabilistischen Testtheorie ermöglichen. Im Projekt wurden mehrere theoretische Akzente gesetzt: (1) Die theoriebasierte Kompetenzmodellierung und Aufgabenmodellierung zur Abbildung berufsrelevanter Handlungskompetenz zielte auf die heuristische Modellierung von Kompetenzen in der Pflege älterer Menschen auf der Basis einschlägiger theoretischer Modelle sowie der Ergebnisse von Expertengesprächen. (2) Die curriculare und ökologische Validierung des Kompetenzmodells und der Testverfahren diente der Spezifizierung des Kompetenzmodells und der Ableitung berufstypischer Handlungssituationen. (3) Die psychometrische Analyse der Testverfahren und IRT-basierte Kompetenzmodellierung untersuchte Fragen der empirischen Abbildbarkeit des Kompetenzstrukturmodells und der empirischen Bezüge zwischen den Testaufgaben und den zu erfassenden Kompetenzdimensionen, insbesondere bezüglich emotionaler Teilfähigkeiten. (4) Durch die Organisation einer Wissenschaft-Praxis-Kooperation wurde eine partizipative Modellentwicklung durch aktive Mitwirkung von Vertretern aus der Pflegebranche verfolgt. (DIPF/Projektträger)

Modellierung und Messung domänenspezifischer Problemlösekompetenz bei Industriekaufleuten (DomPL-IK)

Das Verbundprojekt DomPL-IK modellierte und erfasste die Problemlösekompetenz angehender Industriekaufleute im dritten Ausbildungsjahr exemplarisch für das Handlungsfeld Planung, Steuerung und Kontrolle von Geschäftsprozessen (Controlling). Die Qualität der Bearbeitung praxisnaher und praxisrelevanter Problemstellungen wurde dabei mittels einer technologiebasierten Kompetenzerhebung bestimmt. (...) Um die Kompetenz zur Problemlösung valide zu messen, sollten nicht nur die Ergebnisse, sondern auc ... Das Verbundprojekt DomPL-IK modellierte und erfasste die Problemlösekompetenz angehender Industriekaufleute im dritten Ausbildungsjahr exemplarisch für das Handlungsfeld Planung, Steuerung und Kontrolle von Geschäftsprozessen (Controlling). Die Qualität der Bearbeitung praxisnaher und praxisrelevanter Problemstellungen wurde dabei mittels einer technologiebasierten Kompetenzerhebung bestimmt. (...) Um die Kompetenz zur Problemlösung valide zu messen, sollten nicht nur die Ergebnisse, sondern auch die entsprechenden Prozesse sichtbar gemacht werden. Hierbei wurden neben den kognitiven Voraussetzungen (Wissen) auch motivational-emotionale Aspekte berücksichtigt. Sie trugen dazu bei, die Leistung der Auszubildenden sowohl im Test als auch in der Praxis abzubilden. Resultat ist ein aus mehreren Problemszenarien bestehender Test, der es ermöglichen soll, die entsprechenden Kompetenzen auf unterschiedlichen Stufen zu erfassen und die gewonnenen Erkenntnisse für die Praxis zu nutzen. (DIPF/Projektträger)

CoBALIT - Kompetenzmessung aus Arbeits- und Geschäftsprozessperspektive

Im Verbundprojekt CoBALIT wurden berufliche und berufsnahe Kompetenzen in ausgewählten nationalen und internationalen kaufmännischen Ausbildungsgängen modelliert und gemessen. Auf Basis der empirischen Befunde wurden unter Rückgriff auf soziale und institutionelle Kontextfaktoren Erklärungsmodelle entworfen, um Aussagen insbesondere im Hinblick auf berufliche Lernprozesse und Instruktionsprozesse treffen zu können. Im Zentrum der Teilvorhaben standen einerseits die Entwicklung eines technologieb ... Im Verbundprojekt CoBALIT wurden berufliche und berufsnahe Kompetenzen in ausgewählten nationalen und internationalen kaufmännischen Ausbildungsgängen modelliert und gemessen. Auf Basis der empirischen Befunde wurden unter Rückgriff auf soziale und institutionelle Kontextfaktoren Erklärungsmodelle entworfen, um Aussagen insbesondere im Hinblick auf berufliche Lernprozesse und Instruktionsprozesse treffen zu können. Im Zentrum der Teilvorhaben standen einerseits die Entwicklung eines technologiebasierten Instruments, das dem Prinzip eines "authentic assessments" folgt, sowie andererseits die Modellierung und Messung von Kompetenzen aus der Perspektive von kaufmännischen Arbeitsprozessen und Geschäftsprozessen. Das Vorhaben verteilte sich auf sieben umfassende Arbeitspakete, die sich als komplexes Designmodell und Assessmentmodell interpretieren lassen: (1) Analyse und Spezifikationen kaufmännischer Geschäftsprozesse; (2) Grundlagenlegung für die Validität der zu erfassenden Konstrukte im Hinblick auf kaufmännische Geschäftsprozesse; (3) Entwicklung der Tests und Items sowie die Entwicklung möglicher Antwortformate im Rahmen der ALUSIM-Umgebung; (4) Pilotierung der Tests und Adaptation der Testitems vor dem Hintergrund der Ergebnisse; (5) Durchführung der Hauptstudie sowie im Anschluss daran (6) die Auswertung und Aufbereitung der Ergebnisse. Hierbei wurden verschiedene psychometrische Modelle geprüft. (7) Verbundkoordination (einschließlich der Steuerung der Wissenschaft-Praxis-Kooperation). (...) Die im Rahmen des Teilvorhabens konstruierte und validierte ALUSIM-Testumgebung kann als Personal Learning Environment (PLE) sowohl für Assessmentprozesse als auch Instruktionsprozesse genutzt werden. (DIPF/Projektträger)

BilWiss - Bildungswissenschaftliches Wissen und der Erwerb professioneller Kompetenz bei Lehramtsstudierenden

Das Verbundvorhaben hatte zum Ziel zu untersuchen, welche Bedeutung das bildungswissenschaftliche Wissen, das Lehramtsstudierenden während der universitären Ausbildung vermittelt wird, für die spätere Berufspraxis hat. Ziel war die empirische Prüfung der Annahme, dass bildungswissenschaftliche Inhalte und Zusammenhänge einen notwendigen begrifflichen Rahmen darstellen, den Lehrkräfte benötigen, um Unterrichtsereignisse und Schulereignisse angemessen zu interpretieren, zu reflektieren und so für ... Das Verbundvorhaben hatte zum Ziel zu untersuchen, welche Bedeutung das bildungswissenschaftliche Wissen, das Lehramtsstudierenden während der universitären Ausbildung vermittelt wird, für die spätere Berufspraxis hat. Ziel war die empirische Prüfung der Annahme, dass bildungswissenschaftliche Inhalte und Zusammenhänge einen notwendigen begrifflichen Rahmen darstellen, den Lehrkräfte benötigen, um Unterrichtsereignisse und Schulereignisse angemessen zu interpretieren, zu reflektieren und so für die eigene Kompetenzentwicklung zu nutzen. (...) In einem ersten Schritt wurde zunächst eine Übersicht über alle prinzipiell in Frage kommenden bildungswissenschaftlichen Studieninhalte geschaffen. Zur Ermittlung eines [theoretischen] Modells (...) wurden eine Literatursichtung, Curriculumanalysen sowie eine Delphi-Studie mit 49 Experten aus den ersten beiden Phasen der Lehrerbildung durchgeführt. (...) Insgesamt wurden auf der Grundlage der Ergebnisse aus den drei Delphi-Runden 104 [als besonders relevant eingestufte] bildungswissenschaftliche Themen identifiziert. (...) Der nächste Schritt befasste sich mit der empirischen Überprüfung des Wissensstandes von Universitätsabsolventen. Hierzu wurde ein Testinstrument entwickelt mit den in der Delphi-Studie ermittelten zentralen bildungswissenschaftlichen Themen als Grundlage. [Dieses Testinstrument wurde im Zuge mehrerer Pilotstudien erprobt, optimiert, in einem Feldtest eingesetzt und in einer finalen Fassung im Rahmen einer Vollerhebung aller Lehramtsanwärter in Nordrhein-Westfalen eingesetzt, die ihren Vorbereitungsdienst für das Lehramt an Schulen der Primarstufe und Sekundarstufen begannen.] Auf diesem Wege wurden somit auch erste Ergebnisse zur prognostischen Validität und Aussagekraft der Wissensleistung (...) erzielt. [Im Projekt] konnte belegt werden, dass bildungswissenschaftliches Wissen im Laufe des Studiums durch dessen bildungswissenschaftlichen Studienanteil aufgebaut wird. Dennoch muss darauf hingewiesen werden, dass große Unterschiede zwischen den Absolventen bestehen. (DIPF/Projekt/Projektträger)

Einfluss des fachbezogenen Professionswissens von Lehrkräften auf die Entwicklung der Systemkompetenz von Schülern im Biologieunterricht

[Das Projekt untersuchte] den Einfluss des fachbezogenen Professionswissens von Lehrkräften auf die Entwicklung des Systemdenkens von Schülern im Biologieunterricht. Es wurde erwartet, dass das fachbezogene Professionswissen der Lehrkraft einen Teil der Varianz in der Entwicklung des Systemdenkens zwischen den Schulklassen einer Jahrgangsstufe erklären kann. Messinstrumente zur Erhebung des fachbezogenen Professionswissens von Lehrkräften wurden entwickelt und pilotiert. Die Ergebnisse der Pilot ... [Das Projekt untersuchte] den Einfluss des fachbezogenen Professionswissens von Lehrkräften auf die Entwicklung des Systemdenkens von Schülern im Biologieunterricht. Es wurde erwartet, dass das fachbezogene Professionswissen der Lehrkraft einen Teil der Varianz in der Entwicklung des Systemdenkens zwischen den Schulklassen einer Jahrgangsstufe erklären kann. Messinstrumente zur Erhebung des fachbezogenen Professionswissens von Lehrkräften wurden entwickelt und pilotiert. Die Ergebnisse der Pilotierung waren zufriedenstellend. Die Messinstrumente wurden in einer Feldstudie mit einer Intervention im Prä-Post-Testdesign eingesetzt. Es konnten reliable und valide Testinstrumente für die Erhebung des fachbezogenen Professionswissens von Lehrkräften zu biologischen Systemen (Lerngegenstand: Die Miesmuschel im Wattenmeer) entwickelt werden. Diese Testinstrumente wurden anschließend in einer Interventionsstudie eingesetzt, in der der Zusammenhang zwischen dem fachbezogenen Professionswissen (Fachwissen und fachdidaktisches Wissen der Lehrkräfte) und der Kompetenzentwicklung der Schüler (Systemdenken) untersucht wurde. (DIPF/Projekt/Projektträger)

Sprachliche Kompetenzen Pädagogischer Fachkräfte (SprachKoPF)

Das Projekt untersuchte die Sprachförderkompetenz elementarpädagogischer Fachkräfte und stellte drei Forschungsfragen: (1) Kann Sprachförderkompetenz standardisiert, computerbasiert und zeitökonomisch so getestet werden, dass die Zielpopulation den Test gut und motiviert bearbeitet? (2) Was wissen pädagogische Fachkräfte über Sprache, Spracherwerb und Mehrsprachigkeit sowie über Sprachdiagnostik und Sprachförderung im Verhältnis zum Kenntnisstand in der Spracherwerbsforschung? (3) Welchen Einflu ... Das Projekt untersuchte die Sprachförderkompetenz elementarpädagogischer Fachkräfte und stellte drei Forschungsfragen: (1) Kann Sprachförderkompetenz standardisiert, computerbasiert und zeitökonomisch so getestet werden, dass die Zielpopulation den Test gut und motiviert bearbeitet? (2) Was wissen pädagogische Fachkräfte über Sprache, Spracherwerb und Mehrsprachigkeit sowie über Sprachdiagnostik und Sprachförderung im Verhältnis zum Kenntnisstand in der Spracherwerbsforschung? (3) Welchen Einfluss haben unterschiedliche Dimensionen der Professionalität auf die Sprachförderkompetenz? Die Beantwortung der Fragen ging einher mit der Untersuchung teststatistischer Gütekriterien sowie der Praktikabilität und der Akzeptanz des Instruments. Zweitens erfolgten Studien zur Validität des zugrunde gelegten Konstrukts von Sprachförderkompetenz. Drittens wurde die empirische Relevanz und Repräsentativität der Testinhalte im Zuge des Vergleichs formal unterschiedlich qualifizierter Fachkräfte und Berufsgruppen analysiert. Nach Kriterien der klassischen Testtheorie wurde das Instrument SprachKoPFv06 entwickelt und optimiert. Es setzt sich aus drei Komponenten zusammen: Wissen, Beobachten-Können und Fördern-Können. Die Werte der teststatistischen Gütekriterien sind insgesamt und für die Wissenskomponente, die den Großteil der Items stellt, gut, für die Können-Komponenten ausreichend. [Insgesamt] liegen Ergebnisse von 144 pädagogischen Fachkräften vor. Die Akzeptanz des Instruments war unerwartet hoch. Die Testleistungen erreichten im Wissen und Beobachten ca. 60 Prozent des Kriteriums, bei den Förderableitungen über 30 Prozent. Die Sprachförderkompetenz wurde von der schulischen und beruflichen Qualifikation bestimmt, aber kaum von Weiterbildungen, Berufserfahrung oder Haltung beeinflusst. Die Projektergebnisse untermauern Forderungen nach einer Professionalisierung in der frühkindlichen Bildung. (...) Das Instrument kann in der empirischen Bildungsforschung und in der Praxis der Ausbildung und Weiterbildung zur Bedarfsanalyse sowie formativen und summativen Evaluation eingesetzt werden. (DIPF/Projektträger)

Empirische Beschreibung von Modellkompetenz

Um zu klären, wie Schüler Kompetenzen [im Umgang mit Modellen - Bestandteil einer naturwissenschaftlichen Grundbildung (scientific literacy) - ] erwerben können, ist eine empirische Beschreibung von Modellkompetenz notwendig, die Teilkompetenzen und Niveaus umfasst. Eine Beschreibung von Modellkompetenz, die auf wissenschaftstheoretischen Arbeiten und empirischen Studien beruht, wurde im vorgestellten Projekt mit Hilfe von Multiple-Choice-Items (MC-Items) empirisch überprüft. Hierfür wurden zun ... Um zu klären, wie Schüler Kompetenzen [im Umgang mit Modellen - Bestandteil einer naturwissenschaftlichen Grundbildung (scientific literacy) - ] erwerben können, ist eine empirische Beschreibung von Modellkompetenz notwendig, die Teilkompetenzen und Niveaus umfasst. Eine Beschreibung von Modellkompetenz, die auf wissenschaftstheoretischen Arbeiten und empirischen Studien beruht, wurde im vorgestellten Projekt mit Hilfe von Multiple-Choice-Items (MC-Items) empirisch überprüft. Hierfür wurden zunächst entsprechende Items entwickelt und mit Blick darauf evaluiert, inwiefern sie die zugrunde liegende Teilkompetenz repräsentieren, bei der Itembearbeitung entsprechende kognitive Prozesse ablaufen und adäquate Itemkennwerte aufweisen. Für die empirische Beschreibung von Modellkompetenz wurden anhand dieser drei Kriterien 40 MC-Items ausgewählt. Diese wurden neben Fragebögen zu weiteren Konstrukten 1136 Schülerinnen und Schülern des Gymnasiums in den Jahrgangsstufen 7 bis 10 vorgelegt. Für die empirische Überprüfung der Strukturierung von Modellkompetenz wurden die Daten mit IRT-Modellen (Item-Response-Theorie) analysiert. Die Itemschwierigkeiten wurden in einer einfaktoriellen Varianzanalyse zur empirischen Überprüfung der Niveaus von Modellkompetenz genutzt. Darüber hinaus wurde anhand der Personenfähigkeiten in einer latenten Regression geprüft, inwieweit sich Schüler in den Jahrgangsstufen 7 bis 10 in ihrer Modellkompetenz unterscheiden, um Lernvoraussetzungen zu beschreiben. Zum anderen wurde untersucht, wie Modellkompetenz mit anderen Variablen wie zum Beispiel Intelligenz zusammenhängt. Die empirischen Befunde sprechen für spezifische enge Verknüpfungen zwischen den Teilkompetenzen. Die Niveaus bilden empirisch insgesamt steigende Anforderungen an die Schüler ab. Lehrer können die Teilkompetenzen und Niveaus somit sinnvoll als Referenzsystem heranziehen. (DIPF/Projektträger)

Kognitive Prozesse bei der Itembearbeitung

Entwicklung und Validierung eines Instruments zur Erfassung der professionellen Handlungskompetenz von angehenden Physiklehrkräften

Ziel des Vorhabens war es zu überprüfen, ob ein an der Universität Paderborn entwickeltes Testinstrument zur Erfassung professioneller Handlungskompetenz (angehender) Physiklehrkräfte auch tatsächlich für das effektive Unterrichten notwendiges Wissen erfasst. Der Test unterscheidet das professionelle Wissen in fachliches, fachdidaktisches und pädagogisches Wissen und erfasst zusätzlich motivationale Orientierungen und Einstellungen sowie Werthaltungen zum Physiklehren und Physiklernen. Zur Überp ... Ziel des Vorhabens war es zu überprüfen, ob ein an der Universität Paderborn entwickeltes Testinstrument zur Erfassung professioneller Handlungskompetenz (angehender) Physiklehrkräfte auch tatsächlich für das effektive Unterrichten notwendiges Wissen erfasst. Der Test unterscheidet das professionelle Wissen in fachliches, fachdidaktisches und pädagogisches Wissen und erfasst zusätzlich motivationale Orientierungen und Einstellungen sowie Werthaltungen zum Physiklehren und Physiklernen. Zur Überprüfung wurde unter spezifischen Bedingungen Physikunterricht von Studierenden und Lehramtsanwärterinnen und Lehramtsanwärtern videografiert und hinsichtlich sechs Dimensionen der unterrichtlichen Qualität untersucht: Motivierung, Strukturierung, Adaptivität/ Umgang mit Heterogenität, kognitive Aktivierung, adäquater Umgang mit Experimenten und Klassenführung. Korrespondierend wurden bei den Studierenden und Lehramtsanwärtern mit Hilfe des Instruments professionelles Wissen sowie motivationale Orientierungen und Einstellungen erhoben. Anschließend wurden Zusammenhangsanalysen zwischen Testergebnissen und Unterrichtsqualität vorgenommen. Zusätzlich wurde die Sicht der handelnden, angehenden Lehrkräfte mit Hilfe von Interviews erhoben, um den Zusammenhang zwischen Wissen und Handeln auch aus subjektiver Akteurssicht untersuchen zu können. Bezogen auf die gesamte Stichprobe konnte ein korrelativer Zusammenhang zwischen professionellem Wissen und Unterrichtsqualität bisher nur für das pädagogische Wissen beobachtet werden. Eine angehende Physiklehrkraft, die im Test höheres pädagogisches Wissen zeigte, unterrichtete mit höherer Qualität in fast allen Qualitätsdimensionen. Werden Studierende und Lehramtsanwärter gruppenweise betrachtet, so zeigt sich, dass bei Studierenden zusätzlich das fachdidaktische Wissen in einem korrelativen Zusammenhang zur Qualität des Unterrichts steht. (DIPF/Projektträger)

Kompetenzdiagnostik in der beruflichen Bildung

Ziel des Vorhabens war die Entwicklung eines Kompetenzmodells und eines Testverfahrens für die Beratungskompetenz von Bankkaufleuten am Ende der Berufsausbildung. Bei der Umsetzung war das Projekt in sechs Arbeitsschritte gegliedert. Der erste Schritt umfasste die Durchführung einer Anforderungsanalyse der Beratungstätigkeit in Kreditinstituten, die neben schriftlichen Quellen qualitative Interviews mit Ausbildern und Auszubildenden berücksichtigte. Die Ergebnisse der Anforderungsanalyse wurden ... Ziel des Vorhabens war die Entwicklung eines Kompetenzmodells und eines Testverfahrens für die Beratungskompetenz von Bankkaufleuten am Ende der Berufsausbildung. Bei der Umsetzung war das Projekt in sechs Arbeitsschritte gegliedert. Der erste Schritt umfasste die Durchführung einer Anforderungsanalyse der Beratungstätigkeit in Kreditinstituten, die neben schriftlichen Quellen qualitative Interviews mit Ausbildern und Auszubildenden berücksichtigte. Die Ergebnisse der Anforderungsanalyse wurden im Domänenmodell für die Kundenberatung in Kreditinstituten zusammengefasst, das typische Tätigkeiten, Inhalte und Anforderungen beschreibt. Es bildete die Grundlage für den dritten Schritt, die Ableitung eines Kompetenzmodells, in dem die zur Bewältigung der Anforderungen notwendigen Kompetenzen dargestellt wurden. Es unterscheidet auf der einen Seite beratungsrelevante Facetten des Fachwissens und auf der anderen Seite sozial-kommunikative Kompetenzen, die in die drei Dimensionen "Kundenbedürfnisse erkennen und abwägen", "Handlungsstrategien ausloten" und "Überzeugend darstellen und argumentieren" ausdifferenziert sind. Im vierten Schritt wurden die Kompetenzen messbar gemacht. Während für die fachlichen Kompetenzen bereits ein geeignetes Verfahren vorlag, wurde für die sozial-kommunikativen Kompetenzen ein eigener schriftlicher Situational Judgement Test (SJT) konstruiert. Beide Verfahren wurden im fünften Schritt an 300 Bankkaufleuten am Ende der Ausbildung getestet. Parallel wurden weitere Daten (z.B. zu Motivation, Persönlichkeit, Selbsteinschätzung sozialer Kompetenzen, betrieblichen Ausbildungsbedingungen) erhoben, um die Plausibilität der Ergebnisse zu überprüfen. Im abschließenden sechsten Schritt erfolgte die Auswertung sämtlicher Daten. (Projekt)

Fehleranalysefähigkeit

Zentrales Ziel des Projekts war die Bereitstellung von Erkenntnissen zur Kompetenzmodellierung und Kompetenzmessung von Kfz-Mechatronikern sowie valider und reliabler Instrumente zur Erfassung der zentralen Subdimensionen der Fachkompetenz. (...) Das Projekt entwickelte [hierzu] ein umfassendes Kompetenzmodell für den Ausbildungsberuf der Kfz-Mechatroniker und für die einzelnen Kompetenzbereiche Fehleranalyse, Reparatur/ Instandhaltung und Standardservice computerbasierte Instrumente zur Erfassu ... Zentrales Ziel des Projekts war die Bereitstellung von Erkenntnissen zur Kompetenzmodellierung und Kompetenzmessung von Kfz-Mechatronikern sowie valider und reliabler Instrumente zur Erfassung der zentralen Subdimensionen der Fachkompetenz. (...) Das Projekt entwickelte [hierzu] ein umfassendes Kompetenzmodell für den Ausbildungsberuf der Kfz-Mechatroniker und für die einzelnen Kompetenzbereiche Fehleranalyse, Reparatur/ Instandhaltung und Standardservice computerbasierte Instrumente zur Erfassung beruflicher Handlungskompetenzen weiter. Mit diesen zum Teil bereits erprobten Systemen ließen sich einerseits Realitäten gut nachbilden, andererseits konnten bewusst Fehler eingebaut werden, anhand deren Diagnose (...) Handlungskompetenzen sichtbar gemacht, aber auch eingeübt werden konnten. [Dies basiert auf der Erkenntnis von Vorstudien, die] zeigen, dass es so möglich wird, die Kompetenzen wie beim Einsatz realer Fahrzeuge zu messen. [In mehreren, auch miteinander verknüpften Teilstudien wurden folgende Ziele verfolgt:] (1) die Bereitstellung eines Fachwissenstests, der reliable Leistungsabschätzungen in den Subdimensionen ermöglicht und eine Basis für adaptives Testen bilden kann, (2) die Bereitstellung eines reliablen und validen Tests zur Erfassung der Kompetenzfacette Reparatur / Instandhaltung (inklusive kriterienbezogener Validierung), (3) eine Erweiterung der Tests zur Fehleranalyse, (4) eine Analyse zu den Zusammenhängen zwischen den Subdimensionen der Fachkompetenz, (5) eine Erprobung der neuen Aufgabenformate in Prüfungskontexten und (6) die Prüfung, ob mit modifizierten Fachwissenstests die Fehleranalysefähigkeit hinreichend prognostiziert werden kann. (...) Ergänzend wurden zu Beginn des Projekts die curricularen Schwerpunktsetzungen in Schule und Betrieb erfasst. Für die statistische Auswertung wurden neben klassischen Verfahren insbesondere Item-Response-Theorie (IRT)-basierte Testmodelle und Strukturgleichungsanalysen herangezogen. (DIPF/Projektträger)