DEVELOPMENT OF A MULTIMEDIA SERVICE FOR TELEMONITORING

Abstract

[ES] En esta tesis, diseñamos una aplicación para proporcionar información sobre los eventos de audio circundantes a personas sordas y personas con problemas de audición para recibir notificaciones sobre los sonidos. Nuestro diseño se enfoca en sonidos que no son del habla, como el sonido de alarma, el llanto del bebé y el golpeteo de las puertas. El procesamiento de sonido en el proyecto se basa en dos características, detección de tono y Coeficientes Cepstrales de Mel Frequency. La técnica de reconocimiento utilizada para predecir el sonido es el modelo de mezcla gaussiana. El proyecto también les da a las personas sordas la oportunidad de ver un video de transmisión de la cámara colocada donde el sonido se adquiere. En la parte de visualización representamos la información en una aplicación móvil. [EN] In this thesis we designed an application for providing information about the surrounding audio events to deaf individuals and hard-of-hearing people to be notified about sounds. Our design focuses on non-speech sounds such as the sound of alarm, baby crying and door knocking. The sound processing in the project is based on two features, pitch detection and Mel Frequency Cepstral Coefficients. The recognition technique used for predicting the sound is Gaussian Mixture Model. The project also gives the deaf persons the chance of viewing a video streaming of camera placed where the sound acquires.