Um Sistema de Geração de Expressões Faciais Dinâmicas em Animações Faciais 3D com Processamento de Fala

Tese de Doutorado
(indexada pela 1ªvez em 30/1/2012)
Nome:
Paula Salgado Lucena Rodrigues 
Instituição: PUC-Rio - Departamento de Informática
Programa: Programa de Pós-graduação em Informática
Orientador: Bruno Feijó e Luiz Carlos Pacheco Rodrigues Velho
Ano: 2008
País: Brasil

Resumo
Esta tese apresenta um sistema para geração de expressões faciais  dinâmicas sincronizadas com a fala em uma face realista tridimensional.  Entende-se por expressões faciais dinâmicas aquelas que variam ao longo  do tempo e que semanticamente estão relacionadas às emoções, à fala e a  fenômenos afetivos que podem modificar o comportamento de uma face em  uma animação. A tese define um modelo de emoção para personagens  virtuais falantes, de- nominado VeeM (Virtual emotion-to-expression  Model ), proposto a partir de uma releitura e uma reestruturação do  modelo do círculo emocional de Plutchik. O VeeM introduz o conceito de  um hipercubo emocional no espaço canônico do R4 para combinar emoções  básicas, dando origem a emoções derivadas. Para validação do VeeM é  desenvolvida uma ferramenta de autoria e apresentação de animações  faciais denominada DynaFeX (Dynamic Facial eXpression), onde um  processamento de fala é realizado para permitir o sincronismo entre  fonemas e visemas. A ferramenta permite a definição e o refinamento de  emoções para cada quadro ou grupo de quadros de uma animação facial. O  subsistema de autoria permite também, alternativamente, uma manipulação  em alto-nível, através de scripts de animação. O subsistema de  apresentação controla de modo sincronizado a fala da personagem e os  aspectos emocionais editados. A DynaFeX faz uso de uma malha poligonal  tridimensional baseada no padrão MPEG-4 de animação facial, favorecendo a  interoperabilidade da ferramenta com outros sistemas de animação  facial.

Palavras-chave: animação facial, expressões faciais dinâmicas, processamento de fala, personagens virtuais

Para o texto completo, clique aqui!