Doctoral Thesis
Refine
Has Fulltext
- yes (8)
Is part of the Bibliography
- yes (8)
Document Type
- Doctoral Thesis (8) (remove)
Keywords
- Metakognition (8) (remove)
Institute
Learning accompanies us throughout our lives, from early childhood education through
school, training and university to learning at work. However, much of what we learn is quickly
forgotten. The use of practice tests is a learning strategy that contributes to the acquisition of
sustainable knowledge, i.e. knowledge that is permanently available and can be retrieved when
it is needed. This dissertation first presents findings from previous research on testing in real
educational contexts and discusses theoretically why certain learner or situational
characteristics might influence the effectiveness of the testing effect. Furthermore, a cycle of
three experiments is presented, which were used to investigate whether the positive effect of
practice tests on retention (testing effect) depends on personal or situational characteristics and
also promotes the retention of lecture content that was not directly tested (transfer) in the context
of regular psychology lectures in teacher training courses. In an additional chapter, feedback
from students on the implementation of the study in the classroom context is examined in more
detail. Finally, the results of the three studies are discussed and placed in relation to the theories
presented. The central conclusion from the studies presented is that the testing effect appears to
be a very effective learning strategy that can be used effectively in university teaching and leads
to better learning outcomes regardless of learner characteristics. However, the practice tests
should cover the entire range of relevant content, as transfer effects to non-tested content are
not to be expected.
Determinanten des Studienerfolgs internationaler Studierender - Das metakognitive Strategiewissen
(2022)
Die Zahl internationaler Studierender in Deutschland stieg in den letzten Jahrzehnten stetig an. Gleichzeitig haben sich die hohen Abbruchquoten dieser Gruppe an Studierenden wenig verändert und Forschung zu den Bedingungsfaktoren eines erfolgreichen Studiums internationaler Studierender gewann erst in den vergangenen Jahren an Aufmerksamkeit. Neben den sprachlichen Kompetenzen der Studierenden könnte beim Studium in einem fremden Land eine Fähigkeit zur Anpassung an den neuartigen Studienalltag und zum Umgang mit schwierigen diesbezüglichen Situationen von Bedeutung sein. In dieser Dissertation wird zunächst die angesprochene Internationalisierung der deutschen Hochschulen und Entwicklung der Zahlen internationaler Studierender an denselben betrachtet. Ein Modell des Studienabbruchsprozesses und die durch internationale Studierende angegebenen Schwierigkeiten im Studienalltag führen zum Konstrukt des metakognitiven Strategiewissens, das anhand bisheriger Forschung eingeordnet und beleuchtet wird. Drei im Rahmen dieser Dissertation durchgeführte empirische Studien untersuchten das zu Studienbeginn vorhandene metakognitive Strategiewissen zur Anpassung an schwierige Situationen im Studienalltag und fanden durchweg Zusammenhänge mit der späteren Sprachfähigkeit sowie dem späteren Studienerfolg der internationalen Studierenden. Das zentrale Ergebnis dieser Dissertation besteht somit in der Feststellung eines Einflusses des zu Studienbeginn vorhandenen metakognitiven Strategiewissens internationaler Studierender auf den späteren Studienerfolg an deutschen Hochschulen. Dieser besteht noch über den Einfluss der anfänglichen Sprachfähigkeit hinaus und kann somit zusätzlich zur grundlegenden Fähigkeit des Verständnisses und der Kommunikation in der Sprache des Studienlandes ein gelingendes Studium beeinflussen.
Die vorliegende Arbeit beschäftigt sich explorativ mit Metakognition beim Umgang mit Mathematik. Aufbauend auf der vorgestellten Forschungsliteratur wird der Einsatz von Metakognition im Rahmen einer qualitativen Studie bei Studienanfänger_innen aus verschiedenen Mathematik-(Lehramts-)Studiengängen dokumentiert. Unter Verwendung der Qualitativen Inhaltsanalyse nach Mayring erfolgt die Etablierung eines Kategoriensystems für den Begriff Metakognition im Hinblick auf den Einsatz in der Mathematik, das bisherige Systematisierungen erweitert. Schließlich wird der Einsatz der entsprechenden metakognitiven Aspekte am Beispiel verschiedener Begriffe und Verfahren aus dem Analysis-Unterricht exemplarisch aufgezeigt.
In this thesis, metacognition research is connected with fluency research. Thereby, the focus lies on how disfluency can be used to improve metacognitive monitoring (i.e., students` judgments during the learning process). Improving metacognitive monitoring is important in educational contexts in order to foster performance. Theories about metacognition and self-regulated learning suppose that monitoring affects control and performance. Accurate monitoring is necessary to initiate adequate control and better performance. However, previous research shows that students are often not able to accurately monitor their learning with meaningful text material. Inaccurate monitoring can result in inadequate control and low performance.
One reason for inaccurate monitoring is that students use cues for their judgments that are not valid predictors of their performance. Because fluency might be such a cue, the first aim of this thesis is to investigate under which conditions fluency is used as a cue for judgments during the learning process. A fluent text is easy to process and, hence, it should be judged as easy to learn and as easy to remember. Inversely, a disfluent text is difficult to process, for example because of a disfluent font type (e.g., Mistral) or because of deleted letters (e.g., l_tt_rs). Hence, a disfluent text should be judged as difficult to learn and as difficult to remember. This assumption is confirmed when students learn with both fluent and disfluent material. When fluency is manipulated between persons, fluency seems to be less obvious as a cue for judgments. However, there are only a few studies that investigated the effects of fluency on judgments when fluency is manipulated between persons. Results from Experiment 1 (using deleted letters for disfluent text) and from Experiment 4 (using Mistral for disfluent text) in this thesis support the assumption that fluency is used as a cue for judgments in between-person designs. Thereby, however, the interplay with the type of judgment and the learning stage seems to matter.
Another condition when fluency affects judgments was investigated in Experiment 2 and 3. The aim of these experiments was to investigate if disfluency leads to analytic monitoring and if analytic monitoring sustains for succeeding fluent material. If disfluency activates analytic monitoring that remains for succeeding fluent material, fluency should no longer be used as a cue for judgments. Results widely support this assumption for deleted letters (Experiment 2) as well as for the font type Mistral (Experiment 3). Thereby, again the interplay between the type of judgment and the learning stage matters.
Besides the investigation of conditions when fluency is used as a cue for different types of judgments during the learning process, another aim of this thesis is to investigate if disfluency leads to accurate monitoring. Results from Experiment 3 and 4 support the assumption that Mistral can reduce overconfidence. This is the case when fluency is manipulated between persons or when students first learn with a fluent and then with a disfluent text. Dependent from the type of judgment and the learning stage, disfluency can lead even to underconfidence or to improved relative monitoring accuracy (Experiment 4).
Improving monitoring accuracy is only useful when monitoring is implemented into better control and better performance. The effect of monitoring accuracy on control and performance was in the focus of Experiment 4. Results show that accurate monitoring does not result in improved control and performance. Thus, further research is required to develop interventions that do not only improve monitoring accuracy but that also help students to implement accurate monitoring into better control and performance.
Summing up, the aim of this thesis is to investigate under which conditions fluency is used as a cue for judgments during the learning process, how disfluency can be used to improve monitoring accuracy, and if improved monitoring accuracy leads to improved performance. By connecting metacognition research and fluency research, further theories about metacognition and theories about fluency are specified. Results show that not only the type of fluency and the design, but also the type of judgment, the type of monitoring accuracy, and the learning stage should be taken into account. Understanding conditions that affect the interplay between metacognitive processes and performance as well as understanding the underlying mechanisms is necessary to enable systematic research and to apply findings into educational settings.
The current dissertation addresses the analysis of technology-enhanced learning processes by using Process Mining techniques. For this purpose, students’ coded think-aloud data served as the measurement of the learning process, in order to assess the potential of this analysis method for evaluating the impact of instructional support.
The increasing use of digital media in higher education and further educational sectors enables new potentials. However, it also poses new challenges to students, especially regarding the self-regulation of their learning process. To help students with optimally making progress towards their learning goals, instructional support is provided during learning. Besides the use of questionnaires and tests for the assessment of learning, researchers make use increasingly of process data to evaluate the effects of provided support. The analysis of observed behavioral traces while learning (e.g., log files, eye movements, verbal reports) allows detailed insights into the student’s activities as well as the impact of interventions on the learning process. However, new analytical challenges emerge, especially when going beyond the analysis of pure frequencies of observed events. For example, the question how to deal with temporal dynamics and sequences of learning activities arises. Against this background, the current dissertation concentrates on the application of Process Mining techniques for the detailed analysis of learning processes. In particular, the focus is on the additional value of this approach in comparison to a frequency-based analysis, and therefore on the potential of Process Mining for the evaluation of instructional support.
An extensive laboratory study with 70 university students, which was conducted to investigate the impact of a support measure, served as the basis for pursuing the research agenda of this dissertation. Metacognitive prompts supported students in the experimental group (n = 35) during a 40-minute hypermedia learning session; whereas the control group (n = 35) received no support. Approximately three weeks later, all students participated in another learning session; however, this time all students learned without any help. The participants were instructed to verbalize their learning activities concurrently while learning. In the three analyses of this dissertation, the coded think aloud data were examined in detail by using frequency-based methods as well as Process Mining techniques.
The first analysis addressed the comparison of the learning activities between the experimental and control groups during the first learning session. This study concentrated on the research questions whether metacognitive prompting increases the number of metacognitive learning activities, whether a higher number of these learning activities corresponds with learning outcome (mediation), and which differences regarding the sequential structure of learning activities can be revealed. The second analysis investigated the impact of the individual prompts as well as the conditions of their effectiveness on the micro level. In addition to Process Mining, we used a data mining approach to compare the findings of both analysis methods. More specifically, we classified the prompts by their effectiveness, and we examined the learning activities preceding and following the presentation of instructional support. Finally, the third analysis considered the long-term effects of metacognitive prompting on the learning process during another learning session without support. It was the key objective of this study to examine which fostered learning activities and process patterns remained stable during the second learning session.
Overall, all three analyses indicated the additional value of Process Mining in comparison to a frequency-based analysis. Especially when conceptualizing the learning process as a dynamic sequence of multiple activities, Process Mining allows identifying regulatory loops and crucial routing points of the process. These findings might contribute to optimizing intervention strategies. However, before drawing conclusions for the design of instructional support based on the revealed process patterns, additional analyses need to investigate the generalizability of results. Moreover, the application of Process Mining remains challenging because guidelines for analytical decisions and parameter settings in technology-enhanced learning context are currently missing. Therefore, future studies need to examine further the potential of Process Mining as well as related analysis methods to provide researchers with concrete recommendations for use. Nevertheless, the application of Process Mining techniques can already contribute to advance the understanding of the impact of instructional support through the use of fine-grained process data.
Der Entwicklungsverlauf metakognitiver Überwachungsprozesse und das Zusammenspiel von Überwachungs- und Kontrollprozessen ist über die gesamte Lebensspanne hinweg nur für isolierte Altersgruppen, nicht aber in Studien, die Teilnehmer vom Kindes- bis zum höheren Erwachsenenalter einschließen, untersucht worden. Diese Lücke sollte mit der vorliegenden Arbeit geschlossen werden, denn gerade solche Designs können dazu beitragen, Aufbau- und Abbauprozesse zu kontrastieren, und Hinweise auf frühzeitig vorhandene sowie im Altersverlauf bestehende Fähigkeiten geben, die dann kompensatorisch genutzt werden können.
Die eigene Arbeit befasste sich dabei mit dem Verlauf einer Vielzahl von pro- und retrospektiven Überwachungsvorgängen über die Lebensspanne. Der Schwerpunkt lag auf dem Einfluss verschiedener Kontextfaktoren (z.B. Komplexität des Lernmaterials, Vorwissen, Strategienutzung) auf die Überwachungsleistung in den jeweiligen Altersstufen. Außerdem wurde überprüft, inwieweit wechselseitige Zusammenhänge zwischen Überwachungs- und Steuerungsprozessen in den untersuchten Altersgruppen unterschiedlich stark ausgeprägt sind.
Diese Fragestellungen wurden in sechs Experimenten mit insgesamt 816 Teilnehmern untersucht. Es handelte sich dabei um Drittklässler im Alter zwischen 7 und 9 Jahren, Jugendliche zwischen 12 und 14 Jahren, jüngere Erwachsene zwischen ca. 18 und 25 Jahren sowie ältere Erwachsene zwischen ca. 60 und 80 Jahren. Erhoben wurden Ease-of-Learning-Urteile (EOLs) bzw. ein globales Verständnisurteil als Maß der Überwachung vor dem eigentlichen Lernprozess, Judgments of Learning (JOLs) als Maß der Überwachung nach dem Lernvorgang und Sicherheitsurteile (SUs) als Maß der Überwachung nach dem Erinnerungsabruf.
Es zeigte sich, dass die Überwachungsleistung sowohl, was die Differenzierungsfähigkeit zwischen richtigen und falschen Antworten, als auch, was die Genauigkeit betrifft, bezüglich der JOLs und der SUs über die gesamte untersuchte Altersspanne hinweg im Wesentlichen konstant und auf recht hohem Niveau blieb. Lediglich bei den EOLs ergaben sich Alterseffekte: Die jüngeren Erwachsenen schnitten besser ab als die anderen Altersgruppen, was mit besseren Fähigkeiten, spätere Lern- und Erinnerungsvorgänge zu antizipieren, erklärt werden kann.
In Bezug auf den Einfluss von Kontextfaktoren konnte nachgewiesen werden, dass sich die Überwachungsleistungen bei verschieden komplexen Materialien (Paar-Assoziationen versus Film- oder Textmaterial) unter günstigen Bedingungen, z.B. wenn die Leistungsvorhersagen stark mit der Erinnerungsabfrage korrespondieren, kaum unterscheiden. Bei Rekognitionsaufgaben fielen die Überwachungsleistungen im Vergleich zu Aufgaben zur freien Erinnerung insgesamt schlechter aus. Ein großes bereichsspezifisches Vorwissen resultierte über alle Maße hinweg eher in einer Überschätzung der eigenen Leistung, bei den SUs jedoch auch in einer verbesserten Leistung im Vergleich zu Personen mit weniger Vorwissen. Ein Strategietraining wirkte sich besonders bei den Grundschülern und den älteren Erwachsenen positiv auf die Überwachungsleistung aus. Die eher gering ausgeprägten Alterseffekte weisen darauf hin, dass die einzelnen Kontextfaktoren über die Lebensspanne hinweg einen vergleichbaren Einfluss zu haben scheinen.
Hinsichtlich sequenzieller Zusammenhänge zwischen Überwachungs- und Steuerungsprozessen (hier operationalisiert durch JOLs und die selbst gesteuerte Lernzeiteinteilung) zeigte sich, dass die Teilnehmer aller Altersgruppen in der Lage waren, sowohl Informationen aus den JOLs für die Anpassung der Lernzeit (Monitoring-affects-control-Modell) als auch – in etwas geringerem Ausmaß – Informationen aus der Lernzeit für die Anpassung der JOLs zu nutzen (Control-affects-monitoring-Modell). Der simultane Wechsel zwischen beiden Modellen stellt einen deutlich komplexeren Vorgang dar und konnte deshalb vor allem bei den Jugendlichen und den älteren Erwachsenen nachgewiesen werden.
Insgesamt gesehen belegen die Ergebnisse der sechs Experimente, dass metakognitive Überwachungsfähigkeiten bereits recht früh, d.h. im mittleren Grundschulalter, gut ausgeprägt sind und auch bei älteren Erwachsenen noch lange auf gutem Niveau erhalten bleiben. Lediglich der flexible Wechsel zwischen Überwachungs- und Kontrollprozessen scheint in diesen beiden Altersgruppen noch Schwierigkeiten zu bereiten. Die ähnliche Wirkweise der Kontextfaktoren in den einzelnen Altersgruppen weist auf vergleichbare zugrunde liegende Prozesse hin. Die grundsätzlich guten metakognitiven Leistungen bei Kindern und älteren Erwachsenen sollten demnach genutzt werden, um Gedächtnisprozesse insbesondere in diesen Altersgruppen zu fördern.
Das Wissen über Kognition oder metakognitives Wissen ist seit den 1970er Jahren Gegenstand der entwicklungspsychologischen Forschung. Besonders umfangreich wurde Entwicklung und Bedeutung des metakognitiven Wissens im Kontext der Gedächtnisentwicklung vom Vorschul- bis ins Grundschulalter untersucht. Das metakognitive Wissen im Inhaltsbereich der mathematischen Informationsverarbeitung ist – trotz elaborierter theoretischer Modelle über Struktur und Inhalt – empirisch weitgehend unerschlossen. Die vorliegende Studie wurde durchgeführt, um systematisch zu untersuchen, wie sich das mathematische metakognitive Wissen in der Sekundarstufe entwickelt, welche Faktoren für individuelle Unterschiede in der Entwicklung verantwortlich sind und in welchem Zusammenhang die metakognitive Wissensentwicklung mit der parallel verlaufenden Entwicklung mathematischer Kompetenzen steht. Zur Klärung der Fragestellungen wurden vier Messzeitpunkte einer breiter angelegten Längsschnittuntersuchung ausgewertet. Der dabei beobachtete Zeitraum umfasste die fünfte und sechste Jahrgangsstufe. Die Stichprobe bestand aus 928 Schülern der Schularten Gymnasium, Realschule und Hauptschule. Die Messinstrumente zur Erfassung der Entwicklungsveränderungen im mathematischen metakognitiven Wissen und der Mathematikleistung wurden auf Grundlage der item response theory konstruiert und mittels vertikalem linking fortlaufend an den Entwicklungsstand der Stichprobe angepasst. Zusätzlich wurden kognitive (Intelligenz und Arbeitsgedächtniskapazität), motivationale (mathematisches Interesse und Selbstkonzept) und sozioökonomische Merkmale (sozioökonomischer Status der Herkunftsfamilie) der Schüler erhoben. Die Lesekompetenz wurde als Methodenfaktor kontrolliert. Entwicklungsunterschiede und -veränderungen im metakognitiven Wissen wurde mit Hilfe von latenten Wachstumskurvenmodellen untersucht. Im beobachteten Zeitraum zeigte sich eine stetige Zunahme des metakognitiven Wissens. Allerdings verlief die Entwicklungsveränderung nicht linear, sondern verlangsamte sich im Verlauf der sechsten Jahrgangsstufe. Individuelle Unterschiede in Ausprägung und Veränderung des metakognitiven Wissens wurden durch kognitive und sozioökonomische Schülermerkmale vorhergesagt. Die motivationalen Merkmale wirkten sich demgegenüber nicht auf den Entwicklungsprozess aus. Geschlechtsunterschiede zeigten sich im Entwicklungsverlauf als Schereneffekt zugunsten der Mädchen. Unterschiede zwischen den Schülern der drei Schularten erreichten bereits zum Eintritt in die Sekundarstufe Signifikanz. Zudem gewannen Gymnasiasten und Hauptschüler im Entwicklungsverlauf stärker an metakognitivem Wissen hinzu als Realschüler. Explorative Mischverteilungsanalysen in der Stichprobe ergaben drei latente Entwicklungsklassen mit jeweils charakteristischem Veränderungsverlauf. Die Klassenzuweisung wurde von der besuchten Schulart sowie kognitiven und sozioökonomischen Schülermerkmalen vorhergesagt. Die Entwicklungsprozesse im mathematischen metakognitiven Wissen und der mathematischen Leistung standen in einem substanziellen, wechselseitigen Zusammenhang. Geschlechts- und Schulartunterschiede blieben ebenso wie die korrelativen Zusammenhänge zwischen den Entwicklungsprozessen auch nach Kontrolle der individuellen Unterschiede in kognitiven, motivationalen und sozioökonomischen Merkmalen erhalten. Die Befunde bestätigen die konstruktivistischen Entwicklungsannahmen der gedächtnispsychologisch geprägten Grundlagenforschung zum metakognitiven Wissen. Zudem wird mit der Untersuchung des mathematischen metakognitiven Wissens in der Sekundarstufe der traditionelle Forschungsfokus inhaltlich erweitert. Das im Rahmen der Studie konstruierte Instrument zur Erfassung des mathematischen metakognitiven Wissens ermöglicht die Untersuchung weiterer, bislang offener Fragen auf dem Gebiet der metakognitiven Entwicklung.
The present approach highlights a procedural account of intuitive judgments. In intuitions of hidden semantic coherence, people can intuitively detect whether a word triad has a common remote associate (coherent) or not (incoherent) before, and independently from actually retrieving the common associate. The present fluency-affect intuition model (FAIM) maintains that semantic coherence increases the processing fluency for coherent compared to incoherent triads, and that this increased fluency triggers brief and subtle positive affect, which is the experiential basis of these intuitions. Published work concerning 25 experiments is reviewed that gathered empirical support for this model. Furthermore, the impact of fluency and affect was also generalized to intuitions of visual coherence, and intuitions of grammaticality in an artificial grammar learning paradigm.