WIYE: building a corpus of children’s audio and video recordings with a story-based app

Spitale Micol, Catania Fabio, Cosentino Giulia, Gelsomini Mirko, Garzotto Franca

Erschienen in:

Companion Proceedings of the 24th International Conference on Intelligent User Interfaces

Jahr:

2019

Typ:

Konferenzbeitrag

URL:

Zusammenfassung

Dieser Beitrag beschreibt das Verfahren zur Erstellung eines Emotionsdatensatzes namens WIYE (What Is Your Emotion?), der aus semantischen Inhalten sowie Audio- und Videoaufnahmen von Kindern besteht. Die Daten wurden mit einer interaktiven Erzählanwendung erhoben, die Kinder im Alter von 4 bis 12 Jahren dazu anleitete, ihre Gefühlswelt und ihre Fähigkeit zum Emotionsausdruck zu entdecken. Im Verlauf der Geschichte ist jede Episode einer bestimmten Emotion gewidmet. Die untersuchten Emotionszustände sind Traurigkeit, Wut, Angst, Überraschung und Freude. Dieses Korpus kann von Konversationstechnologien genutzt werden: Es lässt sich mit Klassifikationsalgorithmen des maschinellen Lernens einsetzen, um Modelle zu trainieren, die von Kindern ausgedrückte Emotionen anhand der Stimmhöhe, des Gesichtsausdrucks und der Gesprächsinhalte erkennen.