Abordagem Multimodal para Reconhecimento Automático de Emoções Aplicada ao Estudo de Níveis de Tensão em Telejornais

Moisés Henrique Ramos Pereira, Flávio Lus Cardeal Pádua, Giani David Silva

Resumo


Este artigo aborda o problema de análise de níveis de tensão em telejornais, por meio do reconhecimento automático multimodal de emoções em seus participantes. Para tanto, a metodologia proposta faz uso de métodos computacionais do estado da arte para processamento e análise de expressões faciais, bem como modulações sonoras de falas. Este trabalho tem como objetivo contribuir para o estudo semiodiscursivo de telejornais e suas práxis enunciativas, auxiliando, por exemplo, na identificação das estratégias de comunicação de tais programas. Nesse contexto, apresenta-se a caracterização do problema no âmbito dos estudos da chamada análise do discurso das mídias e os métodos computacionais para o reconhecimento multimodal de emoções a partir dos conteúdos audiovisuais dos vídeos associados aos programas. Além disso, descreve alguns dos principais trabalhos relacionados, a metodologia empregada, a descrição do corpus utilizado e alguns dos resultados experimentais alcançados.

Texto completo:

PDF

Referências


AYADIA, M. E.; KAMEL, M. S.; KARRAY, F.. Survey On Speech Emotion Recognition: Features, Classification Schemes and Databases. Pattern Recognition, v. 44, n. 3, 2011, p. 572-587. Disponível em: http://www.sciencedirect.com/science/article/pii/S0031320310004619. Acesso em: 19 fev. 2015.

BARTLETT, M. S., et al. Fully Automatic Facial Action Recognition in Spontaneous Behavior. 7th International Conference on Automatic Face and Gesture Recognition - FGR 2006, p. 223-230, IEEE, 2006.

BETTADAPURA, V. Face Expression Recognition and Analysis: The State of the Art. ArXiv e-prints, Março 2009, p. 1-27. Disponível em: http://arxiv.org/pdf/1203.6722.pdf. Acesso em: 05 jan. 2015.

BRAIGHI-ANDRADE, A. A. Análise de Telejornais: um Modelo de Exame da Apresentação e Estrutura de Noticiários Televisivos. Rio de Janeiro: E-Papers, 2013.

CHARAUDEAU, P. Discurso das Mídias. São Paulo: Contexto, 2006.

CHARAUDEAU, P.; GHIGLIONE, R.. A Palavra Confiscada: um Gênero Televisivo: o Talk Show. Instituto Piaget, Lisboa, 1997.

CONCEICAO, F. L. A. Metodologia Baseada em Mineração de Dados para Apoio à Análise do Discurso de Telejornais. Dissertação (Mestrado em Modelagem Matemática e Computacional) - Centro Federal de Educação Tecnológica de Minas Gerais, Belo Horizonte, Agosto 2013.

DAVID-SILVA, G. A Informação Televisiva: uma Encenação da Realidade (Comparação entre Telejornais Brasileiros e Franceses). Tese (Doutorado em Estudos Linguísticos) - Universidade Federal de Minas Gerais, Belo Horizonte, 2005.

EKMAN, P.; FRIESEN, W. Facial Action Coding System (FACS): Manual. Consulting Psychologists Press, Palo Alto, 1978.

FECHINE, Y. Performance dos Apresentadores dos Telejornais: a Construção do Ethos. Revista FAMECOS - Mídia, Cultura e Tecnologia, Porto Alegre, v. 1, n. 36, 2008, p. 69-76. Disponível em: http://revistaseletronicas.pucrs.br/ojs/index.php/revistafamecos/article/view/4417/3317. Acesso em: 03 dec. 2014.

FLAUSINO, C. V. Choro Gratuito: a Violência no Telejornalismo Brasileiro. CBCC’03. Anais do XXVI Congresso Brasileiro de Ciências da Comunicação. São Paulo, 2003

FLORIAN E., et al. Recent Developments in openSMILE, the Munich Open-Source Multimedia Feature Extractor. In: ACM Multimedia (MM), Barcelona, October 2013. Proceedings of the 21st ACM international conference on Multimedia, p. 835-838.

GAGE, D. L.; MEYER, C. O Filme Publicitário. 2. ed. São Paulo: Atlas, 1991.

GODOY-COTES, C. S. O Estudo dos Gestos Vocais e Corporais no Telejornalismo Brasileiro. Tese - Pontifícia Universidade Católica de São Paulo, Sao Paulo, 2008.

GOFFMAN, E. The lecture. Forms of talk. Pennsylvania, University of Pennsylvania Press, 1981, p. 162-195.

GUTMANN, J. F. O Que Dizem os Enquadramentos de Câmera no Telejornal? Um Olhar sobre Formas Audiovisuais Contemporâneas do Jornalismo. Brazilian Journalism Research, v. 8, 2012, p. 64-79. Disponível em: http://bjr.sbpjor.org.br/bjr/article/view/422. Acesso em: 20/02/2015.

HERNANDES, N.. A Mídia e seus Truques: o que Jornal, Revista, TV, Rádio e Internet Fazem para Captar e Manter a Atenção do Público. 1. ed. São Paulo: Contexto, 2006.

JACOB, H. D. Desenvolvimento de um Modelo de Atenção Visual para Sumarização Automática de Vídeos de Programas Televisivos. Dissertação (Mestrado em Modelagem Matemática e Computacional) - Centro Federal de Educação Tecnológica de Minas Gerais, Belo Horizonte, Agosto 2013.

LITTLEWORT, G, et al. Dynamics of Facial Expression Extracted Automatically from Video. CVPRW’04. Conference on Computer Vision and Pattern Recognition Workshop, IEEE, 2004.

MACHON, L. M.. Estrutura Rítmica na Locução de Notícias. Brazilian Journalism Research, v. 8, p. 8-27, 2012. Disponível em: http://bjr.sbpjor.org.br/bjr/article/view/487. Acesso em: 07 jan. 2015.

PANG, B.; LEE, L. Opinion Mining and Sentiment Analysis. Foundations and Trends in Information Retrieval. Hanover, January, 2008. v. 2, n. 1-2, p. 1-135.

PEETERS, G. Chroma-Based Estimation of Musical Key from Audio-Signal Analysis. ISMIR. International Symposium for Music Information Retrieval. Victoria, Canada, 2006.

PEREIRA, F. et al. Comunicações Audiovisuais: Tecnologias, Normas e Aplicações. IST Press, 1. ed. 2009.

PEREIRA, M. H. R., et al. SAPTE: A Multimedia Information System to Support the Discourse Analysis and Information Retrieval of Television Programs. Journal Multimedia Tools and Applications, v. 74, n. 2, 2015.

PIMENTEL, R. M. L. Memória e Apagamento no Imaginário dos Telejornais. Discursos Fotográficos, Londrina, v. 5, n. 6, Junho 2009, p. 13-33.

SABINO, J. L. F.; DAVID-SILVA, G.; PÁDUA, F. L. C.. AD e Eventos da Mídia: Uma Análise da Espetacularização do Conflito Verbal. Acta Semiótica et Linguística, Paraíba, v. 19, p. 1-15, 2014.

SOUZA, C. L. et al. A Unified Approach to Content-Based Indexing and Retrieval of Digital Videos from Television Archives. Artificial Intelligence Research, v. 3, p. 49-61, 2014. Disponível em: http://www.sciedu.ca/journal/index.php/air/article/view/5251. Acesso em: 15 fev. 2015.

VIOLA, P.; JONES, M. J. Rapid Object Detection using a Boosted Cascade of Simple Features. IEEE Computer Society. Conference on Computer Vision and Pattern Recognition, v. 1, 2001, p. 511–518. Disponível em: https://www.cs.cmu.edu/~efros/courses/LBMV07/Papers/viola-cvpr-01.pdf. Acesso em: 05 dec. 2014.




DOI: https://doi.org/10.25200/BJR.v11n2.2015.728

Métricas do artigo

Carregando Métricas ...

Metrics powered by PLOS ALM

Apontamentos

  • Não há apontamentos.


ISSN da versão online: 1981-9854

ISSN da versão impressa (descontinuada a partir de 2008): 1808-4079



Datas de publicação da revista

30 de abril - 30 de agosto - 30 de dezembro

 

Creative Commons License

This work is licensed under a Creative Commons Attribution-NonCommercial-NoDerivatives 4.0 International License.