Le langage naturel ne se limite pas à la seule modalité écrite. Il inclut et interagit avec de nombreuses autres modalités. D’une part, un message peut passer par d’autres modalités langagières, notamment l’audio (parole), les gestes et expressions faciales (langage gestuel ou langue parlée complétée). Il peut également s’accompagner d‘attitudes sociales et de dimensions non verbales, notamment des marques d'affect, de spontanéité, de pathologie, de co-adaptation avec les participants d'un dialogue, etc. Le traitement du langage relève alors du traitement conjoint de multiples canaux d’informations. D’autre part, le langage naturel est souvent utilisé pour décrire des concepts et désigner des entités qui sont essentiellement multimodales (description d'une image, d'un événement, etc.). De nombreux problèmes nécessitent alors de créer des passerelles entre différentes modalités.
L'objectif de ce numéro spécial de la revue TAL est de promouvoir le traitement automatique du langage dans des contextes de multimodalités (plusieurs modalités concourent à la résolution d’un problème) ou d’inter-modalité (passage d’une modalité à une autre). Ainsi, les contributions attendues pour ce numéro spécial s’inscrivent entre autres (mais non exclusivement) dans les domaines d’application suivants :
traitement automatique de l’oral, reconnaissance automatique de la parole, synthèse de la parole dans des contextes multimodaux ;
synthèse d’agents émotifs animés ;
reconnaissance de l’écriture manuscrite et analyse de documents manuscrits ;
compréhension, traduction et résumé de documents multimodaux ;
indexation, recherche et exploration de documents multimédia et/ou multimodaux ;
traitement de signaux biologiques, psychologie ou sociologie computationnelles, pour le traitement du langage ;
interface humain-machine inter-/multimodales pour le traitement du langage ;
autres applications multimodales ou inter-modales (génération de légendes d'images, génération d’images à partir du texte, génération/analyse de chansons, etc.).
Face à la prédominance des travaux sur le traitement du langage écrit et au cloisonnement historique des communautés propres à chaque modalité (traitement d’images, du signal, neurosciences...), les auteur.trice.s sont encouragé.e.s à mettre en avant les spécificités (bénéfices, difficultés, perspectives…) liées à l’inter- ou multimodalité dans leur travail, par exemple à propos de :
la compréhension des interactions entre modalités ;
l’harmonisation ou la compatibilité des représentations ;
le développement de modèles conjoints ou de transfert d’une modalité à une autre ;
la constitution (voire l'annotation) de ressources multimodales ;
etc.
A NOTER
DATES IMPORTANTES (indicatives)
Date limite de soumission de l'article entier : 31 août 2022
Premier retour aux auteurs : mi-décembre 2022
Réponse aux relecteurs et version révisée : 27 janvier 2023
Deuxième retour aux auteurs : mars 2023
Publication : avril-mai 2023
LA REVUE
La revue TAL (Traitement Automatique des Langues) est une revue internationale éditée depuis 1960 par l’ATALA (Association pour le Traitement Automatique des Langues) avec le concours du CNRS. Elle est maintenant publiée en format électronique, avec accès gratuit immédiat aux articles publiés, et impression annuelle à la demande. Cela ne change aucunement son processus de relecture et de sélection.