Emotify: emotional game for children with autism spectrum disorder based-on machine learning

Rouhi Amirreza, Spitale Micol, Catania Fabio, Cosentino Giulia, Gelsomini Mirko, Garzotto Franca

Publicação:

Companion Proceedings of the 24th International Conference on Intelligent User Interfaces

Ano:

2019

Tipo:

Artigo de conferência

URL:

Resumo

As crianças com perturbação do espectro do autismo (PEA) enfrentam frequentemente o desafio de detetar e exprimir emoções. Ou seja, têm dificuldade em reconhecer a alegria, a tristeza e a raiva nos outros e em exprimir os seus próprios sentimentos. Esta dificuldade provoca graves limitações na comunicação e no funcionamento social. O artigo propõe um jogo educativo falado, que recorre a técnicas de aprendizagem automática, para ajudar as crianças com PEA a compreender como identificar e exprimir corretamente as emoções. O jogo centra-se em quatro estados emocionais (alegria, tristeza, raiva e neutralidade) e está dividido em dois níveis de dificuldade crescente: o primeiro passo consiste em aprender a reconhecer e a exprimir sentimentos e, na segunda fase, as competências emocionais do utilizador são examinadas e avaliadas. A aplicação integra um reconhecedor multilingue de emoções a partir do tom da voz.