SoniCUBE: Unindo música e jogos através de um sistema embarcado

Abstract

A música e o aprendizado musical são conhecidos por desenvolver habilidades cognitivas, motoras, mentais e sociais do indivíduo. No entanto, muitos métodos tradicionais podem ser desafiadores e desmotivadores para iniciantes. Tornar o aprendizado musical mais divertido e envolvente é essencial para manter as pessoas motivadas e engajadas. Este trabalho explora a interseção entre música e tecnologia, oferecendo uma nova experiência de entretenimento e aprendizado musical, permitindo aos usuários utilizar notas musicais para interagir com jogos eletrônicos. Para isso, foi desenvolvido o SoniCUBE, um sistema embarcado capaz de capturar e interpretar notas musicais e mapeá-las corretamente para os botões de um joystick, utilizando uma plataforma ESP32 e um sensor de som MAX9814, sendo necessária apenas uma conexão Bluetooth. O sistema foi testado em diferentes cenários de uso, utilizando diversos instrumentos musicais e jogos eletrônicos. Para avaliar a experiência de jogo e a eficácia do mapeamento de notas e da conexão Bluetooth, foram observadas a responsividade do sistema e a precisão na interpretação das notas musicais. Os resultados indicaram que o SoniCUBE alcançou os objetivos propostos, oferecendo uma experiência de jogo e confirmando a eficácia das funcionalidades implementadas.