WIYE: building a corpus of children’s audio and video recordings with a story-based app

Spitale Micol, Catania Fabio, Cosentino Giulia, Gelsomini Mirko, Garzotto Franca

Publicación:

Companion Proceedings of the 24th International Conference on Intelligent User Interfaces

Año:

2019

Tipo:

Artículo de congreso

Resumen

Este artículo describe el procedimiento para crear un conjunto de datos emocionales, denominado WIYE (What Is Your Emotion?), compuesto por contenidos semánticos y grabaciones de audio y vídeo de niños. Los datos se recopilaron mediante una aplicación interactiva de narración de cuentos, que llevó a niños de 4 a 12 años a descubrir su esfera emocional y sus habilidades de expresión de las emociones. A lo largo del cuento, cada episodio se dedica a una emoción específica. Los estados emocionales investigados son la tristeza, la ira, el miedo, la sorpresa y la alegría. Este corpus puede ser aprovechado por las tecnologías conversacionales: puede utilizarse con algoritmos de clasificación de aprendizaje automático para entrenar modelos que reconozcan las emociones expresadas por los niños a partir del tono de su voz, de su expresión facial y del contenido de sus conversaciones.