A temporal and pragmatic analysis of gesture-speech association : a corpus-based approach using the novel MultiModal MultiDimensional (M3D) labeling system

Le langage est essentiellement multimodal. En effet, des études récentes ont montré à la fois la forte relation temporelle entre les gestes co-verbaux et la proéminence prosodique et leur pertinence pragmatique. Cependant, ces études ont eu tendance à se concentrer sur le rôle de la proéminence pros...

Description complète

Enregistré dans:
Détails bibliographiques
Auteurs principaux : Rohrer Patrick (Auteur), Delais-Roussarie Elisabeth (Directeur de thèse), Prieto Pilar (Directeur de thèse), Baumann Stefan (Président du jury de soutenance, Rapporteur de la thèse), Astesano Corine (Rapporteur de la thèse), Ambrazaitis Gilbert (Membre du jury)
Collectivités auteurs : Nantes Université 2022-.... (Organisme de soutenance), Universitat Pompeu Fabra Barcelone, Espagne (Organisme de cotutelle), Éducation, Cognition, Langages, Interactions, Santé (ECLIS) Nantes (Ecole doctorale associée à la thèse), Laboratoire de linguistique de Nantes (Laboratoire associé à la thèse)
Format : Thèse ou mémoire
Langue : anglais
Titre complet : A temporal and pragmatic analysis of gesture-speech association : a corpus-based approach using the novel MultiModal MultiDimensional (M3D) labeling system / Patrick Rohrer; sous la direction de Elisabeth Delais-Roussarie et de Pilar Prieto
Publié : 2022
Accès en ligne : Accès Nantes Université
Note sur l'URL : Accès au texte intégral
Note de thèse : Thèse de doctorat : Langues, civilisations et littérature étrangères : Nantes Université : 2022
Thèse de doctorat : Langues, civilisations et littérature étrangères : Universitat Pompeu Fabra (Barcelone, Espagne) : 2022
Sujets :
LEADER 06682nlm a2200685 4500
001 PPN267831501
003 http://www.sudoc.fr/267831501
005 20240430055300.0
029 |a FR  |b 2022NANU2026 
033 |a http://www.theses.fr/2022NANU2026 
035 |a (OCoLC)1370331158 
035 |a STAR196538 
100 |a 20230217d2022 k y0frey0103 ba 
101 0 |a eng  |d fre  |d eng  |2 639-2 
102 |a FR 
105 |a ||||ma 00|yy 
135 |a dr||||||||||| 
181 |6 z01  |c txt  |2 rdacontent 
181 1 |6 z01  |a i#  |b xxxe## 
182 |6 z01  |c c  |2 rdamedia 
182 1 |6 z01  |a b 
183 |6 z01  |a ceb  |2 RDAfrCarrier 
200 1 |a A temporal and pragmatic analysis of gesture-speech association  |e a corpus-based approach using the novel MultiModal MultiDimensional (M3D) labeling system  |f Patrick Rohrer  |g sous la direction de Elisabeth Delais-Roussarie et de Pilar Prieto 
214 1 |d 2022 
230 |a Données textuelles 
300 |a Thèse soutenue en co-tutelle 
304 |a Titre provenant de l'écran-titre 
314 |a Ecole(s) Doctorale(s) : École doctorale Éducation, langages, interactions, cognition, clinique (Nantes) 
314 |a Partenaire(s) de recherche : Laboratoire de linguistique de Nantes (Laboratoire) 
314 |a Autre(s) contribution(s) : Stefan Baumann (Président du jury) ; Gilbert Ambrazaitis (Membre(s) du jury) ; Stefan Baumann, Corine Astesano (Rapporteur(s)) 
328 0 |b Thèse de doctorat  |c Langues, civilisations et littérature étrangères  |e Nantes Université  |d 2022 
328 0 |b Thèse de doctorat  |c Langues, civilisations et littérature étrangères  |e Universitat Pompeu Fabra (Barcelone, Espagne)  |d 2022 
330 |a Le langage est essentiellement multimodal. En effet, des études récentes ont montré à la fois la forte relation temporelle entre les gestes co-verbaux et la proéminence prosodique et leur pertinence pragmatique. Cependant, ces études ont eu tendance à se concentrer sur le rôle de la proéminence prosodique en tant qu'attracteur principal pour la production de gestes, et peu de recherches empiriques ont évalué d une manière systématique le rôle de la structure phrastique prosodique, ou la contribution conjointe de la proéminence gestuelle et prosodique pour des effets pragmatiques, en particulier en tant comme marqueurs de la structure informationnelle. En outre, aucune étude n'a pris en compte la différence potentielle entre les gestes référentiels et les gestes non référentiels. Une analyse multidimensionnelle des différents traits du geste est cruciale pour permettre une évaluation systématique de leurs caractéristiques prosodiques et pragmatiques. Cette thèse poursuit un double objectif. Tout d'abord, elle propose une nouvelle approche de l'annotation des gestes co-verbaux qui épouse une vision dimensionnelle, selon laquelle les chercheurs devraient considérer les caractéristiques sémantiques, pragmatiques et prosodiques des gestes d'une manière non mutuellement exclusive. En second lieu, cette thèse vise à mieux comprendre les relations prosodiques et pragmatiques des gestes référentiels et non référentiels, en particulier la façon dont la structure phrastique prosodique influence les modèles de production gestuelle, et comment ces deux modes de communication interagissent pour des raisons pragmatiques. 
330 |a Human language is essentially multimodal and recent studies within the field of gesture research have shown both the strong temporal relationship between manual co-speech gestures and prosodic prominence, and have given initial evidence of the relevant pragmatic role of gestures. However, studies have tended to focus on the role of prosodic prominence alone as the main attractor for gesture production, and little empirical research has systematically assessed the role of prosodic phrasal structure in the attraction of gesture, or the joint contribution of gestural and prosodic prominence for pragmatic effects, particularly in terms of signaling information structure. Furthermore, no studies have specifically accounted for potential difference between referential and non-referential gestures. A multidimensional analysis of independent aspects of gesture is crucial to allow for a systematic assessment of their different prosodic and pragmatic characteristics. The thesis contains two main objectives. First, it proposes a novel gesture labeling system (i.e., the MultiModal MultiDimensional (M3D) system) according to which the semantic, pragmatic, and prosodic characteristics of gestures should be assessed in a non-mutually exclusive manner. Second, this thesis applies the system to better understand the prosodic and pragmatic characteristics of both referential and non-referential gestures, particularly in terms of how phrasal prosodic structure influences gestural production patterns, and how these two modes of communication interact for pragmatic effect. 
337 |a Configuration requise : un logiciel capable de lire un fichier au format : PDF 
541 | |a Une analyse temporelle et pragmatique de l association geste-parole  |e une approche basée sur un corpus utilisant le nouveau système d annotation MultiModal MultiDimensionnel (M3D)  |z fre 
606 |3 PPN027227588  |a Gestes  |2 rameau 
606 |3 PPN027283623  |a Prosodie (linguistique)  |2 rameau 
606 |3 PPN196316413  |a Structure informationnelle  |2 rameau 
608 |3 PPN027253139  |a Thèses et écrits académiques  |2 rameau 
610 0 |a Synchronie Geste-Parole 
610 0 |a Gestes co-verbaux 
686 |a 490  |2 TEF 
700 1 |3 PPN267828721  |a Rohrer  |b Patrick  |f 1987-....  |4 070 
701 1 |3 PPN076329828  |a Delais-Roussarie  |b Elisabeth  |f 19..-....  |4 727 
701 1 |3 PPN078171423  |a Prieto  |b Pilar  |4 727 
701 1 |3 PPN115465863  |a Baumann  |b Stefan  |4 956  |4 958 
701 1 |3 PPN057799903  |a Astesano  |b Corine  |f 19..-....  |4 958 
701 1 |3 PPN178800449  |a Ambrazaitis  |b Gilbert  |f 1979-....  |4 555 
711 0 2 |3 PPN258086599  |a Nantes Université  |c 2022-....  |4 295 
711 0 2 |3 PPN061332755  |a Universitat Pompeu Fabra  |c Barcelone, Espagne  |4 995 
711 0 2 |3 PPN223629359  |a Éducation, Cognition, Langages, Interactions, Santé (ECLIS)  |c Nantes  |4 996 
711 0 2 |3 PPN238234231  |a Laboratoire de linguistique de Nantes  |4 981 
801 3 |a FR  |b Abes  |c 20230217  |g AFNOR 
856 4 |q PDF  |s 3588457  |u http://www.theses.fr/2022NANU2026/document  |z Accès au texte intégral 
856 4 |u http://www.theses.fr/2022NANU2026/abes 
856 4 |u https://tel.archives-ouvertes.fr/tel-03994053 
930 |5 441099901:777865750  |b 441099901  |j g 
991 |5 441099901:777865750  |a exemplaire créé automatiquement par STAR 
998 |a 938833