Michelzinho: Jogo sério para o ensino de habilidades emocionais em pessoas com autismo ou deficiência intelectual

This paper presents a “serious”class game to help teach emotional and social skills in people with autistic spectrum disorder (ASD) and intellectual disability. The application allows developing the skills to recognize and express the basic emotions: joy, sadness, anger, disgust, surprise and fear. Through the theory of facial action coding system and digital image processing techniques it was possible to detect facial expressions and classify them into one of the six basic emotions. Initial experiments were carried out to acquire initial data and to make improvements in the application before its definitive completion. In addition, the proposal was evaluated on the dataset of images Ck+, obtaining an accuracy rate of 88.8% for the classification of basic emotions. Experiments with ASD carriers were conducted to evaluate the contributions and limitations of the proposed work. Resumo. Esse trabalho apresenta um jogo da classe “sério”para auxiliar no ensino de competências emocionais e sociais em pessoas com Transtorno do Espectro Autista (TEA) e deficiência intelectual. A aplicação permite desenvolver as habilidades de reconhecer e expressar as emoções básicas: alegria, tristeza, raiva, desgosto, surpresa e medo. Por meio da teoria de sistema de codificação de ação facial e técnicas de processamento digital de imagens foi possı́vel detectar expressões faciais e classifica-las em uma das seis emoções básicas. Experimentos iniciais foram realizados para a aquisição e dados iniciais e a realização de melhorias na aplicação antes de sua finalização definitiva. Essa proposta foi avaliada em imagens da base Ck+, obtendo uma taxa de precisão de 88% para a classificação das emoções básicas. Experimentos com portadores do TEA foram realizados para avaliar as contribuições e limitações do trabalho proposto.