TY - THES A1 - Huber, Stephan T1 - Proxemo: Documenting Observed Emotions in HCI T1 - Proxemo: Die Dokumentation Beobachteter Emotionen in der Mensch-Computer-Interaktion N2 - For formative evaluations of user experience (UX) a variety of methods have been developed over the years. However, most techniques require the users to interact with the study as a secondary task. This active involvement in the evaluation is not inclusive of all users and potentially biases the experience currently being studied. Yet there is a lack of methods for situations in which the user has no spare cognitive resources. This condition occurs when 1) users' cognitive abilities are impaired (e.g., people with dementia) or 2) users are confronted with very demanding tasks (e.g., air traffic controllers). In this work we focus on emotions as a key component of UX and propose the new structured observation method Proxemo for formative UX evaluations. Proxemo allows qualified observers to document users' emotions by proxy in real time and then directly link them to triggers. Technically this is achieved by synchronising the timestamps of emotions documented by observers with a video recording of the interaction. In order to facilitate the documentation of observed emotions in highly diverse contexts we conceptualise and implement two separate versions of a documentation aid named Proxemo App. For formative UX evaluations of technology-supported reminiscence sessions with people with dementia, we create a smartwatch app to discreetly document emotions from the categories anger, general alertness, pleasure, wistfulness and pride. For formative UX evaluations of prototypical user interfaces with air traffic controllers we create a smartphone app to efficiently document emotions from the categories anger, boredom, surprise, stress and pride. Descriptive case studies in both application domains indicate the feasibility and utility of the method Proxemo and the appropriateness of the respectively adapted design of the Proxemo App. The third part of this work is a series of meta-evaluation studies to determine quality criteria of Proxemo. We evaluate Proxemo regarding its reliability, validity, thoroughness and effectiveness, and compare Proxemo's efficiency and the observers' experience to documentation with pen and paper. Proxemo is reliable, as well as more efficient, thorough and effective than handwritten notes and provides a better UX to observers. Proxemo compares well with existing methods where benchmarks are available. With Proxemo we contribute a validated structured observation method that has shown to meet requirements formative UX evaluations in the extreme contexts of users with cognitive impairments or high task demands. Proxemo is agnostic regarding researchers' theoretical approaches and unites reductionist and holistic perspectives within one method. Future work should explore the applicability of Proxemo for further domains and extend the list of audited quality criteria to include, for instance, downstream utility. With respect to basic research we strive to better understand the sources leading observers to empathic judgments and propose reminisce and older adults as model environment for investigating mixed emotions. N2 - Für formative Evaluationen der User Experience (UX) wurden im Laufe der Jahre zahlreiche Methoden entwickelt. Die meisten Methoden erfordern jedoch, dass die Benutzer als Nebenaufgabe mit der Studie interagieren. Diese aktive Beteiligung an der Evaluation kann das untersuchte Erlebnis verfälschen und schließt Benutzer komplett aus, die keine kognitiven Ressourcen zur Verfügung haben. Dies ist der Fall, wenn 1) die kognitiven Fähigkeiten der Benutzer beeinträchtigt sind (z. B. Menschen mit Demenz) oder 2) Benutzer mit sehr anspruchsvollen Aufgaben konfrontiert sind (z. B. Fluglotsen). In dieser Arbeit konzentrieren wir uns auf Emotionen als eine Schlüsselkomponente von UX und schlagen die neue strukturierte Beobachtungsmethode Proxemo für formative UX-Evaluationen vor. Proxemo ermöglicht es qualifizierten Beobachtern, die Emotionen der Nutzer in Echtzeit zu dokumentieren und sie direkt mit Auslösern zu verknüpfen. Technisch wird dies erreicht, indem die Zeitstempel der von den Beobachtern dokumentierten Emotionen mit einer Videoaufzeichnung der Interaktion synchronisiert werden. Um die Dokumentation von beobachteten Emotionen in sehr unterschiedlichen Kontexten zu erleichtern, konzipieren und implementieren wir zwei verschiedene Versionen einer Dokumentationshilfe namens Proxemo App. Für formative UX-Evaluationen von technologiegestützten Erinnerungssitzungen mit Menschen mit Demenz erstellen wir eine Smartwatch-App zur unauffälligen Dokumentation von Emotionen aus den Kategorien Ärger, allgemeine Wachsamkeit, Freude, Wehmut und Stolz. Für formative UX-Evaluationen prototypischer Nutzerschnittstellen mit Fluglotsen erstellen wir eine Smartphone-App zur effizienten Dokumentation von Emotionen aus den Kategorien Ärger, Langeweile, Überraschung, Stress und Stolz. Deskriptive Fallstudien in beiden Anwendungsfeldern zeigen die Machbarkeit und den Nutzen der Methode Proxemo und die Angemessenheit des jeweiligen Designs der Proxemo App. Der dritte Teil dieser Arbeit besteht aus einer Reihe von Meta-Evaluationsstudien zu den Gütekriterien von Proxemo. Wir evaluieren Proxemo hinsichtlich der Reliabilität, Validität, Gründlichkeit und Effektivität, und vergleichen die Effizienz von Proxemo und die UX der Beobachter mit der Dokumentation mit Stift und Papier. Proxemo ist reliabel, sowie effizienter, gründlicher und effektiver als handschriftliche Notizen und bietet den Beobachtern eine bessere UX. Proxemo schneidet gut ab im Vergleich zu bestehenden Methoden, für die Benchmarks verfügbar sind. Mit Proxemo stellen wir eine validierte, strukturierte Beobachtungsmethode vor, die nachweislich den Anforderungen formativer UX Evaluationen in den extremen Kontexten von Benutzern mit kognitiven Beeinträchtigungen oder hohen Aufgabenanforderungen gerecht wird. Proxemo ist agnostisch bezüglich der theoretischen Ansätze von Forschenden und vereint reduktionistische und ganzheitliche Perspektiven in einer Methode. Zukünftige Arbeiten sollten die Anwendbarkeit von Proxemo für weitere Domänen erkunden und die Liste der geprüften Gütekriterien erweitern, zum Beispiel um das Kriterium Downstream Utility. In Bezug auf die Grundlagenforschung werden wir versuchen, die Quellen besser zu verstehen, auf denen die empathischen Urteile der Beobachter fußen und schlagen Erinnerungen und ältere Erwachsene als Modellumgebung für die künftige Erforschung gemischter Emotionen vor. KW - Gefühl KW - Wissenschaftliche Beobachtung KW - Methode KW - Benutzererlebnis KW - Benutzerforschung KW - Emotionserkennung KW - Emotion inference KW - Emotionsinterpretation Y1 - 2023 U6 - http://nbn-resolving.de/urn/resolver.pl?urn:nbn:de:bvb:20-opus-305730 ER - TY - THES A1 - Winkler, Julia T1 - The Experience of Emotional Shifts as a Narrative Process: Investigating the Relationship of Emotional Shifts and Transportation and Their Roles in Narrative Persuasion T1 - Das Erleben von emotionalen Wechseln als narrativer Prozess: Untersuchung des Zusammenhangs zwischen emotional dynamischem Erleben von Geschichten und Transportation sowie ihrer Rolle im Kontext narrativer Persuasion N2 - Emotional shifts are often a fundamental part of the narrative experience and engrained into the schematic structures of stories. Recent theoretical work suggests that these shifts are key for narrative influence and are interconnected with transportation, a known mechanism of narrative effects. Empirical research examining this proposition is still scarce, inconclusive, and lacking measures that assess the experience of emotional shifts throughout a narrative to explain effects. This thesis aims to contribute to this research lacuna and investigates the link between emotional shifts, transportation, and story-consistent outcomes using different methods to measure emotional shifts in the moment they occur (Manuscript #1 and #2), and using various narrative stimuli (audiovisual, written, auditive). Manuscript #1 uses real-time-response (RTR) measurement to examine the relationship of valence shifts experienced during film viewing with transportation and post-exposure self-reported emotional flow. Manuscript #2 reports a pilot study and two experiments in which a self-probed emotional retrospection task is used to measure the number and intensity of emotional shifts during reading. I investigate the effect of reviews on transportation, the link between transportation and emotional shifts, and their respective associations with story-consistent attitudes, social sharing intentions, and donation behavior. In Manuscript #3, narrative structures are manipulated. Two experiments examine the effects of audio stories with shifting (positive-negative-positive) vs. positive-only emotional trajectories on the experience of happiness- and sadness-shifts, transportation, and post-exposure emotional flow. Transportation was positively linked to valence shifts (M#1), and the number and intensity of emotional shifts (M#2), and emotional flow (M#1, M#3). In M#3, transportation was predicted by shifts in happiness, but not sadness. Emotional flow was linked to shifts in happiness, sadness, and RTR valence (M#1, M#3). Emotional shifts and transportation were associated with social sharing intentions, but only transportation was linked to some story-consistent attitudes (affective attitudes in particular). N2 - Dynamisches emotionales Erleben ist oft charakteristisch für die Rezeption von Geschichten. Aktuelle theoretische Arbeiten postulieren, dass diese emotionalen Wechsel für den Einfluss von Narrationen entscheidend und mit Transportation, einem bekannten Mechanismus für narrative Wirkungen, verflochten sind. Empirische Evidenz zu dieser These ist noch rar, inkonsistent, und es kommt meist kein Prozessmaß emotionaler Wechsel zum Einsatz, um Effekte zu erklären. Die vorliegende Arbeit soll einen Beitrag zu dieser Forschungslücke leisten und untersucht den Zusammenhang zwischen emotionalen Wechseln, Transportation und persuasiven Wirkungen unter Verwendung verschiedener Stimuli (audiovisuell, schriftlich, auditiv) und Methoden zur Messung emotionaler Veränderungen im Moment ihres Auftretens (Manuskript 1 und 2). Manuskript #1 verwendet Real-Time-Response Messung (RTR) zur Untersuchung der Beziehung zwischen Valenzverschiebungen während der Filmrezeption, Transportation und retrospektiv selbstberichtetem Emotional Flow. Manuskript #2 berichtet eine Pilotstudie und zwei Experimente, die eine Self-Probed Emotional Retrospection Task zur Messung der Anzahl und Intensität emotionaler Wechsel während des Lesens verwenden. Die Experimente untersuchen die Wirkungen einer Rezensions-Manipulation auf Transportation sowie die Zusammenhänge zwischen Transportation, emotionalen Wechseln, Einstellungen, Absichten zum sozialen Teilen und Spendenverhalten. In Manuskript #3 werden Erzählstrukturen manipuliert. In zwei Experimenten werden die Wirkungen auditiver Geschichten mit wechselnden (positiv-negativ-positiv) bzw. nur positiven Strukturen auf erlebte Veränderungen von Freude und Trauer, Transportation, und Emotional Flow untersucht. Transportation stand in positivem Zusammenhang mit Valenzverschiebungen (M#1), der Anzahl und Intensität emotionaler Wechsel (M#2) und Emotional Flow (M#1, M#3). In M#3 wurde Transportation durch Veränderungen von Freude, aber nicht Trauer vorhergesagt. Emotional Flow war mit Veränderungen von Freude, Trauer und RTR-Valenzverschiebungen korreliert (M#1, M#3). Mehr und intensivere emotionale Wechsel und Transportation gingen mit einer erhöhten Absicht einher, Inhalte zu teilen bzw. über Inhalte zu reden. Nur Transportation war jedoch mit einigen der untersuchten (insbesondere affektiven) Einstellungen assoziiert. KW - Gefühl KW - Erzählung KW - Rezeptionsforschung KW - emotional shifts KW - emotion measurement KW - narrative effects KW - narrative persuasion KW - transportation KW - Medienwirkungsforschung KW - Massenmedien + Wirkung KW - Medien + Psychologie Y1 - 2023 U6 - http://nbn-resolving.de/urn/resolver.pl?urn:nbn:de:bvb:20-opus-321794 ER -