Constraint-Based Visemes for the Synthesis of Lip-Synchronization Animation

Bc. Jan Krejsa

Master's thesis

Anotácia:

Cílem této práce bylo navrhnout a implementovat algoritmus, který generuje animace úst synchronizované se zvukovou stopou. Pro tento účel práce navrhuje novou definici vizémů v podobě množin omezujících podmínek pro artikulační orgány (rty, čelist, jazyk, atd.). Výsledky uživatelského testování ukázaly, že navrhované řešení produkuje přirozenější animace oproti běžným metodám založeným na interpolaci mezi klíčovými snímky.

Abstract:

The goal of this thesis was to design and implement an algorithm for the offline generation of lip-sync animation. To this end, it redefines visemes as sets of constraints on the facial articulators (lips, jaw, tongue, ...). User evaluation confirms that the suggested solution produces more natural animation than standard keyframe interpolation techniques.

Keywords

lip-sync, lip synchronization, lip animation, speech animation, facial animation, visemes, phonemes

Jazyk práce: English

Datum vytvoření / odevzdání či podání práce: 11. 12. 2019

Obhajoba závěrečné práce

• Obhajoba proběhla 4. 2. 2020
• Vedúci: doc. Fotios Liarokapis, PhD
• Oponent: RNDr. Filip Škola

Masaryk University

Faculty of Informatics

Master programme / odbor:
Informatics / Computer Graphics