
A Multimodal Language Faculty: A Cognitive Framework for Human Communication
Le langage est traditionnellement considéré comme un système "amodal" qui se décline sous différentes formes telles que la parole, l'écriture ou la signature ; cependant, la communication est multimodale par natureNous associons la parole à des gestes, nous utilisons des emoji avec du texte et nous combinons l'écriture avec des dessins et des images, qu'il s'agisse de gribouillis, de bandes dessinées ou de publicités.
Pourtant, les théories linguistiques et cognitives qui maintiennent la notion amodale traditionnelle du langage ne peuvent pas rendre compte de la richesse de cette communication multimodale. Ce qu'il faut, c'est un nouveau paradigme multimodal du langage.
Ce livre présente un modèle de faculté de langage multimodale qui annonce une réorganisation des structures du langage et de leurs hypothèses directrices. Il montre que les principaux comportements expressifs humains - parler, signer, dessiner - peuvent sembler distincts, mais qu'ils se décomposent en fait en blocs cognitifs similaires, qui se fondent dans un système de communication multimodale à multiples facettes. Il en résulte une conception de la cognition humaine dans laquelle toute communication - qu'il s'agisse de la parole, du geste, du graphisme ou de leurs interactions multimodales - se présente comme des états d'activation émergents à partir d'une architecture cognitive singulière.
L'architecture proposée fournit une "grande théorie unifiée" du langage et de la communication, qui tient compte des connaissances des formalisations linguistiques traditionnelles, de la sémantique conceptuelle, des études sur les gestes, de la sémiotique de Peircean, de la théorie du langage visuel et des lexiques unimodaux et multimodaux, le tout intégré dans un modèle unique. Cette approche globale confronte directement les notions traditionnelles du langage qui ont perduré pendant au moins deux siècles à un nouveau paradigme qui reconnaît la nature multimodale de la communication humaine, nous obligeant à réimaginer ce qu'est le langage et comment il fonctionne.