CLeLfPC : Corpus de Lecture en LfPC
Ce corpus contient des enregistrements audio/vidéo et annotations de lecture à voix haute en codant en LfPC.
23 participants ont été filmés pour 25 enregistrements d’une série de 10 thèmes, constitués de 4 sessions distinctes :
– 32 syllabes “CV” isolées (1 seule clé produite pour chaque syllabe),
– 32 mots ou expressions,
– phrases isolées,
– textes.
Les annotations de ce corpus permettront notamment de collecter les données suivantes : alignement phonétique, clés LfPC produites, positionnement des voyelles LfPC sur le visage…
Référence sur le site Ortolang
Article sur le site Laboratoire Langage et Parole (Aix-en-Provence)
Vizem Cued Speech
Partenariat avec Brigitte Bigi, auteure du logiciel SPPAS.
Elaboration et Expérimentation d’un système I.A. unique de génération automatique des clés LfPC : à partir d’un fichier audio-vidéo et de sa transcription orthographique, ce système permet de coder automatiquement des vidéos en réalité augmentée par l’ajout d’une main codeuse LfPC.
Ce système de réalité augmentée doit permettre à une personne sourde de recevoir visuellement les paroles d’un locuteur filmé.
Vizem LPC
Projet de modèles virtuels parlant et codant en LfPC de façon fluide, capables de générer des supports adaptés aux enfants sourds et d’apporter une aide à l’accessibilité des jeunes sourds dans leur vie quotidienne.
La modélisation des avatars codeurs de VizemLPC est réalisée avec MetaHuman, leur animation est conçue avec UNREAL Engine.
