This thesis presents the development of SoundRise 2.0, a web-based platform designed for real-time vocal analysis, aimed at supporting the learning of children with hearing impairments. As a modern iteration of the original SoundRise application from 2012, this version integrates advanced technologies such as Web Audio API and Three.js, enhancing accessibility and user experience through an immersive and interactive graphical interface. SoundRise 2.0 transforms complex vocal parameters—such as pitch, intensity, and timbre—into an intuitive visual representation, facilitating the development of communication skills in educational and therapeutic settings. The work encompasses the design and implementation of algorithms for vocal signal analysis, with a focus on pitch detection through autocorrelation and vocal intensity measurement using the Root Mean Square (RMS). The architectural structure of the application is also explored, emphasizing the adoption of a cross-platform architecture that ensures seamless accessibility across various devices. SoundRise 2.0 stands out for its innovative approach, combining technological and pedagogical research to offer an effective and versatile tool for vocal education and rehabilitation.

Questa tesi esplora lo sviluppo di SoundRise 2.0, una piattaforma web progettata per l'analisi vocale in tempo reale, destinata a sostenere l’apprendimento dei bambini con disabilità uditive. Evoluzione dell’applicazione originale SoundRise del 2012, questa nuova versione integra tecnologie avanzate come Web Audio API e Three.js, migliorando l'accessibilità e l'esperienza utente attraverso un’interfaccia grafica immersiva e interattiva. SoundRise 2.0 traduce parametri vocali complessi – quali il pitch, l’intensità e il timbro – in una rappresentazione visiva intuitiva, pensata per favorire lo sviluppo delle competenze comunicative in un contesto didattico e terapeutico. Il lavoro include la progettazione e l’implementazione di algoritmi per l’analisi vocale, con particolare attenzione alla rilevazione del pitch tramite autocorrelazione e al calcolo dell’intensità vocale mediante Root Mean Square (RMS). Viene inoltre esaminata la struttura architetturale dell’applicazione, con un focus sull’adozione di un’architettura multipiattaforma, che ne permette l’utilizzo su una vasta gamma di dispositivi, garantendo così un accesso fluido e immediato. SoundRise 2.0 si distingue per il suo approccio innovativo, unendo ricerca tecnologica e pedagogica per offrire uno strumento efficace e versatile nell'ambito dell'educazione e della riabilitazione vocale.

SoundRise 2.0: Sviluppo di un sistema web-based di analisi vocale per supportare persone con disabilità uditive

ZANETTI, ANDREA
2023/2024

Abstract

This thesis presents the development of SoundRise 2.0, a web-based platform designed for real-time vocal analysis, aimed at supporting the learning of children with hearing impairments. As a modern iteration of the original SoundRise application from 2012, this version integrates advanced technologies such as Web Audio API and Three.js, enhancing accessibility and user experience through an immersive and interactive graphical interface. SoundRise 2.0 transforms complex vocal parameters—such as pitch, intensity, and timbre—into an intuitive visual representation, facilitating the development of communication skills in educational and therapeutic settings. The work encompasses the design and implementation of algorithms for vocal signal analysis, with a focus on pitch detection through autocorrelation and vocal intensity measurement using the Root Mean Square (RMS). The architectural structure of the application is also explored, emphasizing the adoption of a cross-platform architecture that ensures seamless accessibility across various devices. SoundRise 2.0 stands out for its innovative approach, combining technological and pedagogical research to offer an effective and versatile tool for vocal education and rehabilitation.
2023
SoundRise 2.0: Development of a web-based speech analysis system to support people with hearing disabilities
Questa tesi esplora lo sviluppo di SoundRise 2.0, una piattaforma web progettata per l'analisi vocale in tempo reale, destinata a sostenere l’apprendimento dei bambini con disabilità uditive. Evoluzione dell’applicazione originale SoundRise del 2012, questa nuova versione integra tecnologie avanzate come Web Audio API e Three.js, migliorando l'accessibilità e l'esperienza utente attraverso un’interfaccia grafica immersiva e interattiva. SoundRise 2.0 traduce parametri vocali complessi – quali il pitch, l’intensità e il timbro – in una rappresentazione visiva intuitiva, pensata per favorire lo sviluppo delle competenze comunicative in un contesto didattico e terapeutico. Il lavoro include la progettazione e l’implementazione di algoritmi per l’analisi vocale, con particolare attenzione alla rilevazione del pitch tramite autocorrelazione e al calcolo dell’intensità vocale mediante Root Mean Square (RMS). Viene inoltre esaminata la struttura architetturale dell’applicazione, con un focus sull’adozione di un’architettura multipiattaforma, che ne permette l’utilizzo su una vasta gamma di dispositivi, garantendo così un accesso fluido e immediato. SoundRise 2.0 si distingue per il suo approccio innovativo, unendo ricerca tecnologica e pedagogica per offrire uno strumento efficace e versatile nell'ambito dell'educazione e della riabilitazione vocale.
udito
supporto
applicazione
File in questo prodotto:
File Dimensione Formato  
Zanetti_Andrea.pdf

accesso aperto

Dimensione 1.3 MB
Formato Adobe PDF
1.3 MB Adobe PDF Visualizza/Apri

The text of this website © Università degli studi di Padova. Full Text are published under a non-exclusive license. Metadata are under a CC0 License

Utilizza questo identificativo per citare o creare un link a questo documento: https://hdl.handle.net/20.500.12608/71328