BEGIN:VCALENDAR VERSION:2.0 PRODID:-//wp-events-plugin.com//7.4.3//EN TZID:Europe/Paris X-WR-TIMEZONE:Europe/Paris BEGIN:VEVENT UID:0-97@lisn.upsaclay.fr DTSTART;TZID=Europe/Paris:20230227T090000 DTEND;TZID=Europe/Paris:20230227T120000 DTSTAMP:20230210T095449Z URL:https://www.lisn.upsaclay.fr/evenements/apprentissage-de-la-langue-des -signes-a-partir-des-sous-titres/ SUMMARY:Apprentissage de la langue des signes à partir des sous-titres DESCRIPTION:La soutenance aura lieu le 27 Février à 09h00\, salle de conf érences du bâtiment 507\, rue du belvédère\, 91400 Orsay.\nRésumé\nL es langues des signes sont un moyen de communication essentiel pour les co mmunautés sourdes. Elles sont des langues visuo-gestuelles\, qui utilisen t comme modalités les mains\, les expressions faciales\, le regard et les mouvements du corps. Elles ont des structures grammaticales complexes et des lexiques riches qui sont considérablement différents de ceux que l'o n trouve dans les langues parlées. Les spécificités des langues des sig nes en termes de canaux de communication\, de structure et de grammaire ex igent des méthodologies distinctes.\nLes performances des systèmes de tr aduction automatique entre des langues écrites ou parlées sont actuellem ent suffisantes pour de nombreux cas d'utilisation quotidienne\, tels que la traduction de vidéos\, de sites web\, d'e-mails et de documents. En re vanche\, les systèmes de traduction automatique pour les langues des sign es n'existent pas en dehors de cas d'utilisation très spécifiques avec u n vocabulaire limité. La traduction automatique de langues des signes est un défi pour deux raisons principales. Premièrement\, les langues des s ignes sont des langues à faibles ressources avec peu de données d'entra înement disponibles. Deuxièmement\, les langues des signes sont des lang ues visuelles et spatiales sans forme écrite\, naturellement représenté es sous forme de vidéo plutôt que d'audio ou de texte.\nPour relever le premier défi\, nous fournissons de grands corpus de données pour l'entra înement et l'évaluation des systèmes de traduction automatique en langu e des signes\, avec des contenus vidéo en langue des signes interprétée et originale\, ainsi que des sous-titres écrits. Alors que les données interprétées nous permettent de collecter un grand nombre d'heures de vi déos\, les vidéos originalement en langue des signes sont plus représen tatives de l'utilisation de la langue des signes au sein des communautés sourdes. Les sous-titres écrits peuvent être utilisés comme supervision faible pour diverses tâches de compréhension de la langue des signes.\n Pour relever le deuxième défi\, cette thèse propose des méthodes perme ttant de mieux comprendre les vidéos en langue des signes. Alors que la s egmentation des phrases est généralement triviale pour les langues écri tes\, la segmentation des vidéos en langue des signes en phrases repose s ur la détection d'indices sémantiques et prosodiques subtils dans les vi déos. Nous utilisons des indices prosodiques pour apprendre à segmenter automatiquement une vidéo en langue des signes en unités de type phrase\ , déterminées par les limites des sous-titres. En développant cette mé thode de segmentation\, nous apprenons ensuite à aligner les sous-titres du texte sur les segments de la vidéo en langue des signes en utilisant d es indices sémantiques et prosodiques\, afin de créer des paires au nive au de la phrase entre la vidéo en langue des signes et le texte. Cette t âche est particulièrement importante pour les données interprétées\, où les sous-titres sont généralement alignés sur l'audio et non sur la langue des signes. En utilisant ces paires vidéo-texte alignées automat iquement\, nous développons et améliorons plusieurs méthodes différent es pour annoter de façon dense les signes lexicaux en interrogeant des mo ts dans le texte des sous-titres et en recherchant des indices visuels dan s la vidéo en langue des signes pour les signes correspondants.\nDirectio n de thèse\nMichèle Gouiffès\, Directrice de recherche\, CNRS\, LISN\nA nnelies Braffort\, Directrice de recherche\, CNRS\, LISN ATTACH;FMTTYPE=image/jpeg:https://www.lisn.upsaclay.fr/app/uploads/2023/02 /Bull.jpg CATEGORIES:IaH,STL,Thèses et HDR LOCATION:LISN Site Belvédère\, Rue du Belvédère Campus universitaire b ât 507 91405 Orsay\, France X-APPLE-STRUCTURED-LOCATION;VALUE=URI;X-ADDRESS=Rue du Belvédère Campus universitaire bât 507 91405 Orsay\, France;X-APPLE-RADIUS=100;X-TITLE=LIS N Site Belvédère:geo:0,0 END:VEVENT BEGIN:VTIMEZONE TZID:Europe/Paris X-LIC-LOCATION:Europe/Paris BEGIN:STANDARD DTSTART:20221030T020000 TZOFFSETFROM:+0200 TZOFFSETTO:+0100 TZNAME:CET END:STANDARD END:VTIMEZONE END:VCALENDAR