Translingual visemes mapping for Lithuanian speech animation

Abstract

Methodology of Lithuanian phonemes visualization using visemes set of the base language appended by new visemes defined to animate specific Lithuanian phonemes is proposed. Translingual visemes mapping for Lithuanian speech animation is applied. Phoneme to viseme mapping module is one of the most important parts of the framework for Lithuanian speech animation. Facial animation engine compatible with MPEG-4 standard is used to integrate data flows. The base language of the exploited engine is English and the proposed architecture explains how it can be driven by Lithuanian phonetics to get samples of animated Lithuanian speech. Translingual phoneme to viseme mapping module offered in this paper is suitable to animate foreign languages.

Straipsnyje pristatoma lietuvių kalbos fonemų vizualizavimo metodika, kuriai naudojama bazinės kalbos vizemų aibė, papildyta specifinėms lietuvių kalbos fonemoms animuoti skirtomis vizemomis. Lietuvių kalbai animuoti naudojamas skirtingų kalbų vizemų atitaikymas. Fonemų ir vizemų atitaikymo modulis yra viena iš svarbiausių Lietuvių kalbai animuoti skirtos architektūros dalių. Duomenų srautams integruoti naudojamas veido animavimo „variklis“, suderintas su MPEG-4 standartu. Jo bazinė kalba yra anglų, taigi pristatomas animavimo karkasas paaiškina, kaip „variklį“ pritaikyti lietuvių kalbai animuoti. Straipsnyje pasiūlytas skirtingų kalbų fonemų ir vizemų atitaikymo modulis tinka ir kitoms pasaulio kalboms animuoti.