WIYE: building a corpus of children’s audio and video recordings with a story-based app

Spitale Micol, Catania Fabio, Cosentino Giulia, Gelsomini Mirko, Garzotto Franca

Publicação:

Companion Proceedings of the 24th International Conference on Intelligent User Interfaces

Ano:

2019

Tipo:

Artigo de conferência

URL:

Resumo

Este artigo descreve o procedimento para criar um conjunto de dados emocionais, designado WIYE (What Is Your Emotion?), composto por conteúdos semânticos e gravações de áudio e vídeo de crianças. Os dados foram recolhidos através de uma aplicação de narração interativa de histórias, que levou crianças dos 4 aos 12 anos a descobrir a sua esfera emocional e as suas capacidades de expressão emocional. Durante a história, cada episódio é dedicado a uma emoção específica. Os estados emocionais investigados são a tristeza, a raiva, o medo, a surpresa e a alegria. Este corpus pode ser explorado por tecnologias conversacionais: pode ser utilizado com algoritmos de classificação de aprendizagem automática para treinar modelos que reconheçam as emoções expressas pelas crianças a partir do tom da voz, da expressão facial e dos conteúdos das conversas.