Gaze interaction: Cognitive mechanisms of oculomotor action control

Blickinteraktion: Kognitive Mechanismen der okulomotorischen Handlungskontrolle

Please always quote using this URN: urn:nbn:de:bvb:20-opus-215279
  • Humans use their eyes not only as visual input devices to perceive the environment, but also as an action tool in order to generate intended effects in their environment. For instance, glances are used to direct someone else's attention to a place of interest, indicating that gaze control is an important part of social communication. Previous research on gaze control in a social context mainly focused on the gaze recipient by asking how humans respond to perceived gaze (gaze cueing). So far, this perspective has hardly considered the actor’sHumans use their eyes not only as visual input devices to perceive the environment, but also as an action tool in order to generate intended effects in their environment. For instance, glances are used to direct someone else's attention to a place of interest, indicating that gaze control is an important part of social communication. Previous research on gaze control in a social context mainly focused on the gaze recipient by asking how humans respond to perceived gaze (gaze cueing). So far, this perspective has hardly considered the actor’s point of view by neglecting to investigate what mental processes are involved when actors decide to perform an eye movement to trigger a gaze response in another person. Furthermore, eye movements are also used to affect the non-social environment, for instance when unlocking the smartphone with the help of the eyes. This and other observations demonstrate the necessity to consider gaze control in contexts other than social communication whilst at the same time focusing on commonalities and differences inherent to the nature of a social (vs. non-social) action context. Thus, the present work explores the cognitive mechanisms that control such goal-oriented eye movements in both social and non-social contexts. The experiments presented throughout this work are built on pre-established paradigms from both the oculomotor research domain and from basic cognitive psychology. These paradigms are based on the principle of ideomotor action control, which provides an explanatory framework for understanding how goal-oriented, intentional actions come into being. The ideomotor idea suggests that humans acquire associations between their actions and the resulting effects, which can be accessed in a bi-directional manner: Actions can trigger anticipations of their effects, but the anticipated resulting effects can also trigger the associated actions. According to ideomotor theory, action generation involves the mental anticipation of the intended effect (i.e., the action goal) to activate the associated motor pattern. The present experiments involve situations where participants control the gaze of a virtual face via their eye movements. The triggered gaze responses of the virtual face are consistent to the participant’s eye movements, representing visual action effects. Experimental situations are varied with respect to determinants of action-effect learning (e.g., contingency, contiguity, action mode during acquisition) in order to unravel the underlying dynamics of oculomotor control in these situations. In addition to faces, conditions involving changes in non-social objects were included to address the question of whether mechanisms underlying gaze control differ for social versus non-social context situations. The results of the present work can be summarized into three major findings. 1. My data suggest that humans indeed acquire bi-directional associations between their eye movements and the subsequently perceived gaze response of another person, which in turn affect oculomotor action control via the anticipation of the intended effects. The observed results show for the first time that eye movements in a gaze-interaction scenario are represented in terms of their gaze response in others. This observation is in line with the ideomotor theory of action control. 2. The present series of experiments confirms and extends pioneering results of Huestegge and Kreutzfeldt (2012) with respect to the significant influence of action effects in gaze control. I have shown that the results of Huestegge and Kreutzfeldt (2012) can be replicated across different contexts with different stimulus material given that the perceived action effects were sufficiently salient. 3. Furthermore, I could show that mechanisms of gaze control in a social gaze-interaction context do not appear to be qualitatively different from those in a non-social context. All in all, the results support recent theoretical claims emphasizing the role of anticipation-based action control in social interaction. Moreover, my results suggest that anticipation-based gaze control in a social context is based on the same general psychological mechanisms as ideomotor gaze control, and thus should be considered as an integral part rather than as a special form of ideomotor gaze control.show moreshow less
  • Der Mensch nutzt die Augen nicht nur zur Wahrnehmung seiner Umwelt, sondern auch als Handlungsinstrument, um intendierte Effekte in seiner Umwelt zu erzeugen. So werden Blicke beispielsweise dazu verwendet, die Aufmerksamkeit eines anderen auf einen bestimmten Ort zu lenken. Dies weist darauf hin, dass Blickkontrolle einen wichtigen Bestandteil in der sozialen Kommunikation darstellt. Die Forschung zu Blickkontrolle im sozialen Kontext hat sich bisher hauptsächlich auf den Blick-Empfänger konzentriert, um die Frage zu beantworten, wie MenschenDer Mensch nutzt die Augen nicht nur zur Wahrnehmung seiner Umwelt, sondern auch als Handlungsinstrument, um intendierte Effekte in seiner Umwelt zu erzeugen. So werden Blicke beispielsweise dazu verwendet, die Aufmerksamkeit eines anderen auf einen bestimmten Ort zu lenken. Dies weist darauf hin, dass Blickkontrolle einen wichtigen Bestandteil in der sozialen Kommunikation darstellt. Die Forschung zu Blickkontrolle im sozialen Kontext hat sich bisher hauptsächlich auf den Blick-Empfänger konzentriert, um die Frage zu beantworten, wie Menschen auf wahrgenommene Blicke reagieren (Gaze Cueing). Dieser Ansatz hat dementsprechend bisher kaum den Standpunkt des Blick-Senders berücksichtigt. So wurde beispielsweise noch nicht untersucht, welche mentalen Prozesse der Ausübung einer Augenbewegung zugrunde liegen, die zum Ziel hat, bei einer anderen Person eine bestimmte Blickreaktion auszulösen. Darüber hinaus werden zielgerichtete Augenbewegungen auch im nicht-sozialen Kontext eingesetzt, beispielsweise beim Entsperren des Smartphones mithilfe der Augen. Diese und andere Beobachtungen zeigen allerdings klar die Notwendigkeit, Blickkontrolle sowohl in der sozialen Kommunikation als auch in anderen, nicht-sozialen Kontexten zu berücksichtigen und dabei gleichzeitig auf Gemeinsamkeiten und Unterschiede zu achten, die der Natur eines sozialen (vs. nicht-sozialen) Handlungskontextes innewohnen. Die vorliegende Arbeit untersucht daher die kognitiven Mechanismen, die solchen zielgerichteten Blickbewegungen in sozialen wie in nicht-sozialen Kontexten zugrunde liegen. Die in der vorliegenden Arbeit vorgestellten Experimente bauen auf bereits etablierten Paradigmen aus der Forschung zu Okulomotorik und zu basalen kognitiven Prozessen auf. Diese Paradigmen basieren auf dem Prinzip der ideomotorischen Handlungskontrolle, das eine Erklärung für die Entstehung zielgerichteter und beabsichtigter Handlungen liefert. Der ideomotorische Gedanke legt nahe, dass Menschen Assoziationen zwischen ihren Handlungen und den daraus resultierenden Effekten erwerben, die in zwei Richtungen wirken können: Eine Handlung kann die Antizipation ihrer Effekte auslösen, aber die aktive Antizipation eines Handlungseffektes kann auch die damit verbundene Handlung auslösen. Nach der ideomotorischen Theorie beinhaltet Handlungsgenerierung die mentale Antizipation des beabsichtigten Handlungseffektes, um das zugehörige motorische Muster zu aktivieren. Die vorliegenden Experimente beinhalten Situationen, in denen die Probanden den Blick eines virtuellen Gesichts mithilfe ihre eigenen Augenbewegungen steuern. Die im virtuellen Gesicht ausgelösten Blickreaktionen repräsentieren die visuellen Handlungseffekte. Die Situationen werden in Bezug auf die Determinanten von Handlungs-Effekt-Lernen (Kontingenz, Kontiguität, Handlungsmodus während des Lernens) variiert, um die zugrundeliegende Dynamik der okulomotorischen Handlungskontrolle in diesen Situationen zu verstehen. Zusätzlich zu den Gesichtern wurden Handlungseffekte in nicht-sozialen Objekten untersucht, um die Frage zu klären, ob sich die der Blickkontrolle zugrundeliegenden Mechanismen für soziale und nicht-soziale Kontextsituationen unterscheiden. Die Ergebnisse der vorliegenden Arbeit lassen sich in drei Hauptergebnisse zusammenfassen. 1. Meine Resultate legen nahe, dass Menschen bi-direktionale Assoziationen zwischen ihren Augenbewegungen und der darauf folgenden Blickreaktion einer anderen Person erwerben, was über die Antizipation der beabsichtigten Effekte die okulomotorische Handlungssteuerung beeinflusst. Die beobachteten Ergebnisse zeigen zum ersten Mal, dass Augenbewegungen in einem Blickinteraktionsszenario in Form einer bei der anderen Person ausgelösten Blickreaktion repräsentiert werden. Diese Beobachtung steht im Einklang mit dem ideomotorischen Prinzip der Handlungskontrolle. 2. Die vorliegende Versuchsreihe belegt und erweitert die wegweisenden Ergebnisse von Huestegge und Kreutzfeldt (2012) in Bezug auf den bedeutenden Einfluss von Handlungseffekten in der okulomotorischen Handlungskontrolle. Ich konnte zeigen, dass sich die Ergebnisse von Huestegge und Kreutzfeldt (2012) über verschiedene Kontexte mit unterschiedlichem Stimulus-Material replizieren lassen unter der Bedingung, dass die wahrgenommenen Handlungseffekte ausreichend stark ausgeprägt waren. 3. Zudem konnte ich zeigen, dass sich Mechanismen der Blickkontrolle in einem sozialen Blickinteraktionskontext vermutlich nicht qualitativ von denen in einem nicht-sozialen Kontext unterscheiden. Zusammenfassend unterstützen die Ergebnisse die jüngsten theoretischen Überlegungen, die die Rolle von antizipativen Prozessen in der Handlungssteuerung in sozialen Interaktionskontexten betonen. Darüber hinaus legen meine Ergebnisse nahe, dass antizipationsbasierte Blickkontrolle im sozialen Kontext auf den gleichen allgemeinen psychologischen Mechanismen wie ideomotorische Blickkontrolle basiert und somit als integraler Bestandteil, und nicht als eine spezielle Form der ideomotorischen Blickkontrolle, betrachtet werden sollte.show moreshow less

Download full text files

Export metadata

Metadaten
Author: Eva Katharina Riechelmann [verh. Steinbacher]
URN:urn:nbn:de:bvb:20-opus-215279
Document Type:Doctoral Thesis
Granting Institution:Universität Würzburg, Graduate Schools
Faculties:Graduate Schools / Graduate School of Life Sciences
Fakultät für Humanwissenschaften (Philos., Psycho., Erziehungs- u. Gesell.-Wissensch.) / Institut für Psychologie
Referee:Prof. Dr. Lynn Huestegge, Prof. Dr. Wilfried Kunde, Prof. Dr. Matthias Gamer, Prof. Dr. Erhard Wischmeyer
Date of final exam:2020/10/23
Language:English
Year of Completion:2021
DOI:https://doi.org/10.25972/OPUS-21527
Dewey Decimal Classification:1 Philosophie und Psychologie / 15 Psychologie / 150 Psychologie
GND Keyword:Verhaltenskontrolle; Blickbewegung; Kognition
Tag:Blickinteraktion; Effektantizipation; Ideomotorik; Ideomotorische Blickkontrolle; Soziale Handlungseffekte; Soziomotorische Blickkontrolle
Effect anticipation; Gaze interaction; Ideomotor gaze control; Social action effects; Sociomotor gaze control
Release Date:2021/10/25
Licence (German):License LogoCC BY-NC-ND: Creative-Commons-Lizenz: Namensnennung, Nicht kommerziell, Keine Bearbeitungen 4.0 International