Projekt

Zurück zur Übersicht

Aphasia and co-speech gestures

Titel Englisch Aphasia and co-speech gestures
Gesuchsteller/in Müri René
Nummer 138532
Förderungsinstrument Projektförderung (Abt. I-III)
Forschungseinrichtung Klinik und Poliklinik für Neurologie Inselspital
Hochschule Universität Bern - BE
Hauptdisziplin Nervenheilkunde, Psychiatrie
Beginn/Ende 01.01.2012 - 29.02.2016
Bewilligter Betrag 438'000.00
Alle Daten anzeigen

Alle Disziplinen (2)

Disziplin
Nervenheilkunde, Psychiatrie
Neurophysiologie und Hirnforschung

Keywords (4)

Sprache; Gestik; Augenbewegungen; Aphasie

Lay Summary (Deutsch)

Lead
Lay summary
Sprache und Gestik sind eng miteinander verknüpft. Im Alltag ergänzen sie sich in der menschlichen Kommunikation. Das Ziel des Projektes ist es, diese Interaktion bei Patienten mit Sprachverlust (einer sogenannten Aphasie) zu untersuchen. Dabei geht es insbesondere um die Wahrnehmung der Gesten bei diesen Patienten, insbesondere ob sie fähig sind, non-verbale Information durch die Gesten verarbeiten zu können. Dafür wird das Explorationsverhalten (d.h. die Augebewegungen und die Fixationen) von solchen Patienten während eines Dialoges analysiert. Eine Hypothese ist, dass Patienten mit Aphasie, damit sie non-verbale Gesten verarbeiten können, die Gesten instensiver als Gesunde Kontrollen explorieren müssen. Auf der anderen Seite wird in diesem Projekt die Produktion von non-vebalen Gesten bei Aphasie Patienten untersucht. Ist es für einen aphasischen Patienten möglich, sich mittels vermehrter Produktion von Gesten besser verständlich zu machen ? Insbesondere wird hier der Einfluss der sogenannten Apraxie auf die Produktion der non-vermalen Gestik untersucht.
Direktlink auf Lay Summary Letzte Aktualisierung: 21.02.2013

Verantw. Gesuchsteller/in und weitere Gesuchstellende

Mitarbeitende

Publikationen

Publikation
Comprehension of Co-Speech Gestures in Aphasic Patients: An Eye Movement Study
(2016), Comprehension of Co-Speech Gestures in Aphasic Patients: An Eye Movement Study, in PLOS ONE, 11(1), e0146583-e0146583.
Cue Recognition and Integration – Eye Tracking Evidence of Processing Differences in Sentence Comprehension in Aphasia
(2015), Cue Recognition and Integration – Eye Tracking Evidence of Processing Differences in Sentence Comprehension in Aphasia, in PLOS ONE, 10(11), e0142853-e0142853.
Different visual exploration of tool-related gestures in left hemisphere brain damaged patients is associated with poor gestural imitation
(2015), Different visual exploration of tool-related gestures in left hemisphere brain damaged patients is associated with poor gestural imitation, in Neuropsychologia, 71, 158-164.
Perception of co-speech gestures in aphasic patients: A visual exploration study during the observation of dyadic conversations
(2015), Perception of co-speech gestures in aphasic patients: A visual exploration study during the observation of dyadic conversations, in Cortex, 64, 157-168.
Eye gaze behaviour at turn transition: How aphasic patients process speakers’ turns during video observation
, Eye gaze behaviour at turn transition: How aphasic patients process speakers’ turns during video observation, in Journal of Cognitive Neuroscience.

Wissenschaftliche Veranstaltungen

Aktiver Beitrag

Titel Art des Beitrags Titel des Artikels oder Beitrages Datum Ort Beteiligte Personen
Colloque Gesture and Speech in Interaction (GESPIN), Nantes, France Vortrag im Rahmen einer Tagung Turn projection deficits in aphasic patients: Evidence from eye tracking 10.06.2015 Nantes, Frankreich Preisig Basil Christoph;
6th Conference of the International Society for Gesture Studies, Poster Turn projection deficits in aphasic patients: Evidence from eye tracking 11.08.2014 San Diego, Vereinigte Staaten von Amerika Eggenberger Noemi;
. 6th Conference of the International Society for Gesture Studies Poster Perception of co-speech gestures in aphasic patients: Gaze behaviour during dyadic conversations. 11.08.2014 San Diego, Vereinigte Staaten von Amerika Preisig Basil Christoph;
„Sprache, Aphasie und Gestik“ im Rahmen der Mittelbauvereiningung der Universität Bern Vortrag im Rahmen einer Tagung eye tracking techniques in interdisciplinary clinical research - a discussion of advantages and limits 20.11.2012 Bern, Schweiz Eggenberger Noemi;
„Sprache, Aphasie und Gestik“ im Rahmen der Mittelbauvereiningung der Universität Bern (MVUB) Vortrag im Rahmen einer Tagung Gesten – nonverbale aber vielsagende Kommunikationsformen. 20.11.2012 Bern, Schweiz Preisig Basil Christoph;
Monte Verità CSF Conference "Hand, Brain and Technology", Vortrag im Rahmen einer Tagung Perception of co-speech hand gestures in aphasic patients: An eye movement study. 22.01.2012 Monte Verita, Schweiz Eggenberger Noemi;


Selber organisiert

Titel Datum Ort
„Sprache, Aphasie und Gestik“ im Rahmen der Mittelbauvereiningung der Universität Bern 20.11.2012 Berm, Schweiz

Abstract

People commonly gesture while speaking and there is a great behavioral variety of such speech-associated gestures. When aphasia inhibits verbal expression, gestures may be used to compensate for this deficiency, but the compensatory use of gestures requires adaptation to the deprivation of verbal context. Therefore, co-speech gestures cannot rely on disambiguation by concurrent speech, since they have at the same time to carry an increased load of information. Healthy subjects can easily adapt their gestures, when obstacles such as the ignorance of the local language or acoustic problems prevent them from oral communication. The literature concerning aphasia and co-speech gestures is not unanimous and many questions remain open. Use aphasic patients more co-speech gestures to communicate? Are these gestures communicative or are these gestures used to facilitate speech and/or to overcome speech perseveration? Finally, is apraxia a condition that prevents the successful use of co-speech gestures for aphasic patients?In a series of experiments we will examine gesture production and gesture comprehension in patients with aphasia. We will use behavioral analysis of gesture and speech production, event-related potentials and gaze behavior analysis during gesture perception. Furthermore, symptom-lesion analysis in the aphasic patients will be performed, and apraxia will be evaluated by the test of upper limb apraxia (TULIA). Gaze analysis has been shown that eye movement analysis is also a valuable method to study conditions of competitive parallel processing in complex human behavior. In a preliminary experiment, we measured gaze behavior during video presentation of gestures to aphasic patients and healthy controls. Taking together, the results show that there are differences between aphasic patients and healthy controls in the way they look at gestures and that these differences can be successfully assessed by means of eye movement measurements. Aphasic patients seem to be especially handicapped when a gesture is meaningless, which was reflected by significantly increased mean fixation duration and cumulative fixation duration. The project is of primary importance for two reasons: Firstly, we analyze in our project not only co-speech production and language comprehension, but also perception of co-speech gesture by using gaze behavior measurements and ERP analysis. Furthermore, we expect from the lesion symptom mapping of aphasic patients additional information about the cortical organization of the network controlling co-speech gestures and language in aphasia. Thus the project will have impact for the understanding of the development and relationship of language, perception, and action. Secondly, the understanding of the role of apraxia in co-speech gesture perception and production will be important for future aphasia rehabilitation concepts.
-