Typannot is an innovative transcription system (TranSys) for Sign Languages (SLs), based on robust graphematic and coherent typographic formulas. It is characterized by readability, writability, searchability, genericity and modularity. Typannot can be used to record handshapes, mouth actions, facial expressions, initial locations (LOCini) and movements of the upper limbs (MOV). For LOCini and MOV, Typannot uses intrinsic frames of reference (iFoR) to describe the position of each segment (arm, forearm, hand) in terms of degrees of freedom (DoF). It assumes that the motion is subdivided into a complex moment of initial preparation, leading to the stabilization of a LOCini, and a subsequent phase of MOV deployment based on simple motor patterns. The goal of Typannot is not only to create a new TranSys, but also to provide an instrument to advance the knowledge about SLs. The observation of the SLs makes it possible to formulate various hypotheses, among which: 1) MOV follows a simple motor scheme that aims at minimizing motor control during MOV; 2) proximal→distal flows of MOV are predominant in SLs. Only the use of a TranSys based on iFoR and the description of the DoF makes it possible to explore the data in order to test these hypotheses. CCS CONCEPTS • Human-centered computing~Interaction devices • Human-centered computing~Gestural input • Human-centered computing~Accessibility • Social and professional topics~People with disabilities
Transcrire les langues des signes (LS) nécessite de prendre en considération leur nature gestuelle et de comprendre les raisons (parmi lesquelles centration sur les mains et utilisation d’un cadre de référence égocentré) pour lesquelles des systèmes typographiques (HamNoSys, SignWriting) ont échoué à s’imposer comme outil de transcription. La gestualité met en mouvement tous les segments du membre supérieur selon des degrés de liberté, en fonction d’amplitudes particulières et à travers une série de cadres de référence intrinsèque centrée sur chaque segment. Typannot, le système typographique présenté ici, repose sur ces
caractéristiques et les intègre dans une hiérarchie structurelle ménageant un niveau informationnel correspondant aux traits (caractères), rassemblés dans
un niveau de glyphes composés. La facilité d’utilisation de Typannot est assurée par le respect de quatre principes de conception (généricité, modularité, lisibilité et inscriptibilité) et l’utilisation d’une interface de saisie ménageant ces niveaux d’informations. Afin d’illustrer l’usage de Typannot, ont été menée des analyses portant sur les configurations et l’emplacement propre de la main, qui montrent l’influence de la gestualité praxique sur la gestualité symbolique (c.-à-d. les signes des LS). Vue la durée d’annotation encore très importante qu’un tel système de transcription impose, l’objectif est de permettre une "dictée gestuelle", une transcription directe à partir des données de capture de mouvement. Cette perspective devrait aussi faciliter la transcription de l’ensemble des gestes dits co-verbaux de n’importe quelle langue vocale.
scite is a Brooklyn-based organization that helps researchers better discover and understand research articles through Smart Citations–citations that display the context of the citation and describe whether the article provides supporting or contrasting evidence. scite is used by students and researchers from around the world and is funded in part by the National Science Foundation and the National Institute on Drug Abuse of the National Institutes of Health.