top of page

Emotify: emotional game for children with autism spectrum disorder based-on machine learning

Emotify: gioco emotivo per bambini con disturbi dello spettro autistico basato su apprendimento automatico

Rouhi Amirreza, Spitale Micol, Catania Fabio, Cosentino Giulia, Gelsomini Mirko, Garzotto Franca

Venue:

Companion Proceedings of the 24th International Conference on Intelligent User Interfaces

Year:

2019

Type:

Conference Paper

URL:

Abstract (EN)

Children with Autism Spectrum Disorder (ASD) often face the challenge of detecting and expressing emotions. I.e., it's hard for them to recognize happiness, sadness and anger in other people and to express their own feelings. This difficulty produces severe impairments in communication and social functioning. The paper proposes a spoken educational game, exploiting Machine Learning techniques, to help children with ASD to understand how to correctly identify and express emotions. The game focuses on four emotional states (happiness, sadness, anger and neutrality) and is divided in two levels with increasingly difficulty: the first step is to learn how to recognize and express feelings and in the second phase emotional skills by the user are examined and evaluated. The application integrates a multilingual emotion recognizer from the pitch of the voice.

Abstract (IT)

I bambini con disturbi dello spettro autistico (ASD) affrontano spesso difficoltà nel rilevare e esprimere emozioni, compromettendo la loro capacità di riconoscere la felicità, la tristezza e la rabbia negli altri e di esprimere i propri sentimenti. Questo lavoro propone un gioco educativo basato sul riconoscimento delle emozioni attraverso tecniche di apprendimento automatico, volto ad aiutare i bambini ASD a comprendere meglio le emozioni. Il gioco si concentra su quattro stati emotivi: felicità, tristezza, rabbia e neutralità, ed è suddiviso in due fasi di difficoltà crescente.

bottom of page