Nuove tecnologie e disabilità Il riconoscimento vocale Relatore: Dr Angelo Paglino

Utilizzare il computer con la voce 1992 Prodotto: Dragon Dictate Vocabolario italiano di parole Parlato discreto

Scheda audio / USB Segnale vocaleConversione analogico/digitaleStringa di bit Come funziona un sistema di riconoscimento vocale

… kw  … re CARATTERISTICHE FONETICHE INDIVIDUALI Fonema: unità minima distintiva di suono nell’ambito di una lingua

Come funziona un sistema di riconoscimento vocale kw  re … OCCORRENZE CURE5 CUORE57 CURIE9... Cuore n  i’limiti … OCCORRENZE NE’ LIME A T1 NEI LIMITI102 NEL LIMITE85... nei limiti CARATTERISTICHE LINGUISTICHE INDIVIDUALI

Come funziona un sistema di riconoscimento vocale Ogni persona possiede caratteristiche fonetiche e linguistiche particolari L’unico modo di ottimizzare le prestazioni di un riconoscitore vocale è quello di “insegnargli” le caratteristiche fonetiche e linguistiche peculiari della persona

Come funziona un sistema di riconoscimento vocale La manutenzione è obbligatoria e continua –Profilo fonetico –Modello del linguaggio Atteggiamento collaborativo dell’utente Formazione Ottimizzazione del segnale acustico –Scheda audio / USB –Microfono utilizzato

Miglioramento dell’accuratezza

Come funziona un sistema di riconoscimento vocale Costo % Accuratezza

Previsioni Ogni anno il margine d’errore scende del 10% relativo Entro il 2017 il riconoscimento vocale dovrebbe essere competitivo con la comprensione umana Doc. Microsoft a Speechtek 2004

Utilizzare il computer con la voce 2006 Prodotto: Dragon NaturallySpeaking Vocabolario italiano di parole Vocabolari personali Parlato continuo 140 parole minuto

Riconoscimento vocale: applicazioni Dragon NaturallySpeaking 8 Professional

Riconoscimento vocale: applicazioni Modalità normale: dettatura + comandi Modalità dettatura: comporre un testo Modalità comandi: navigazione

Il disabile motorio I disabili motori utilizzano la modalità “comandi” per muoversi in MS Windows, sostituendo la voce al mouse. I disabili motori utilizzano la modalità “normale” o la modalità “dettatura” per creare i testi sostituendo la voce alla tastiera.

Filmato: navigare a voce in internet, , giocare.

Il disabile sordo Il progetto Voice della Commissione Europea Sottotitolare una lezione in classe Creare i sottotitoli di una video cassetta

Il progetto VOICE

Coordinamento: Centro Comune di Ricerca (CCR) della Commissione Europea sito di Ispra – Italia User needs: Università di Linz (Austria) Sviluppo: FBL S.r.l. società di Informatica sede di Mortara (PV) Italia Responsabile del progetto: ing. Giuliano Pirelli – CCR Ispra

Il progetto VOICE Obiettivo: inserimento dell’alunno audioleso nel gruppo-classe “trasmettere a tutti gli alunni di una classe le stesse informazioni, con le stesse parole, nello stesso istante” (Dr Dionigi Ioghà)

Il progetto VOICE Un incontro fortunato Una dimostrazione di riconoscimento vocale “senza rete”. L’interesse della “Commissione” Una fase di sperimentazione. Il progetto (finanziato) La disseminazione dei risultati Il sito voice.jrc.it

Dopo il progetto …. Adeguamento alla tecnologia corrente Un prodotto per il mercato Dragon NaturallySpeaking + VoiceMeeting

Il prodotto di sottotitolazione Il motore di riconoscimento: Nuance Dragon NaturallySpeaking. Gestione del sottotitolo e multimedialità: FBL VoiceMeeting

Dragon NaturallySpeaking Un prodotto industriale offerto in più versioni e in più lingue. Noi utilizzeremo la versione Professional. Permette di salvare il testo e la voce che lo generato. Permette di creare vocabolari personalizzati. Dispone di SDK per lo sviluppo applicativo

Dragon NaturallySpeaking Creazione e manutenzione dei profili vocali. Creazione e gestione dei vocabolari utente.

VoiceMeeting Presentazione grafica dei sottotitoli. Gestione delle pause. Multimedialità (parole chiave per richiamare immagini, filmati..). Report.

Laboratorio Presentazione dei prodotti Dragon NaturallySpeaking e VoiceMeeting Creazione di un profilo vocale Prove di dettatura al computer. Costruire una lezione con VoiceMeeting. La gestione delle pause. Controllare i risultati.

Sottotitolare una video cassetta Creazione automatica dei sottotitoli e dei time-code. Limiti: Un solo parlatore. Vantaggi: tempio ridotti, contenimento dei costi, disponibilità del testo in formato digitale.

Filmato iniziale

Creazione sottotitoli e time-code

Filmato finale

Grazie. Angelo Paglino Riferimenti: FBL S.r.l. contrada della torre Mortara (PV)