Abstract
In this paper, we give an analytical survey of peculiarities of the Russian sign language and calc signed (gesture) speech, including state-of-the-art of sign lexicons and grammatical constructions, as well as methods for formalization of sign lexicon items. In the course of the multidisciplinary research, a virtual 3D model of human being’s avatar has been adopted for the Russian sign language synthesis, and a multipurpose model of multimodal audio-visual synthesizer aimed for text to Russian auditory speech and calc signed speech transformation.
Highlights
Основными компонентами многомодальной системы синтеза являются: 1) имитационная модель головы/лица человека, в которой настраиваются управляющие параметры для передачи мимики, выражения лица и движений губ при говорении [18]; 2) компьютерная система акустического синтеза разговорной русской речи, осуществляющая преобразование текст-речь по произвольному входному русскоязычному тексту [6]; 3) русскоязычная бимодальная система «говорящая голова» на основе виртуальной 3D-модели головы/лица человека и компьютерного синте
At the current stage of the work, we are filling the sign vocabulary with more elements (fingerspelling alphabet, digits and the mostly used gestures and words) using an especial editor, which analyses input HamNoSys symbols and translates them into corresponding movements of the hands of the virtual 3D avatar
Summary
В статье дан аналитический обзор особенностей русского жестового языка и калькирующей жестовой речи, в том числе жестовых лексиконов и грамматических конструкций данного языка, а также возможных методов формализованного представления элементов словаря жестов. Жестовый язык (ЖЯ) является способом межчеловеческой коммуникации, в котором для передачи информации используются только визуально-кинетические средства (жесты рук, артикуляция губ, мимика и эмоции, проявляющиеся на лице). Русский жестовый язык (РЖЯ) объединяет в себе несколько разновидностей жестовой коммуникации. Выделяют так называемую «ручную азбуку» (дактильную азбуку), использующуюся для жестовой передачи букв русского алфавита, и собственно жестовую речь, ориентированную на передачу не графем. Отметим характерные различия данных алфавитов: ― все буквы русской азбуки показываются одной рукой, а британской — двумя руками; ― ряд букв русской азбуки отображается посредством динамических жестов, в то время как жесты британской азбуки — статические; ― конфигурации кисти и пальцев рук в русском дактиле более сложны.
Sign-in/Register to view highlights & summary Sign-in/Register to access full text options 
Talk to us
Join us for a 30 min session where you can share your feedback and ask us any queries you have
Schedule a callDisclaimer: All third-party content on this website/platform is and will remain the property of their respective owners and is provided on "as is" basis without any warranties, express or implied. Use of third-party content does not indicate any affiliation, sponsorship with or endorsement by them. Any references to third-party content is to identify the corresponding services and shall be considered fair use under The CopyrightLaw.
