Francesco Beritelli Dipartimento di Ingegneria Elettronica Elettrica e Informatica

1. I principali standard di codifica della voce in ambito ITU-T ed ETSI Francesco Beritelli Dipartimento di Ingegneria Elettronica Elettrica e Informatica Università di Catania

2. Tecniche di codifica della voce Tecniche e algoritmi di compressione/decompressione del segnale vocale in forma digitale che riducono il bit rate sul canale di comunicazione, garantendo una riproduzione trasparente, ovvero una qualità quanto più simile a quella del segnale originario non compresso, con il minimo ritardo introdotto e calcolo computazionale richiesto Tecniche di codifica della voce - Francesco Beritelli

3. Motivazioni • Migliore utilizzo delle risorse di canale • Incremento del numero di conversazioni • Migliore qualità della voce (es. MCR limitati) • Riduzione della memoria nei sistemi di registrazione o archiviazione audio • Riduzione costi e tempi di trasmisisone Tecniche di codifica della voce - Francesco Beritelli

4. Contesti applicativi • Comunicazioni radiomobili e via satellite • Telefonia VoIP • Riproduttori audio • Registratori digitali • Segreterie telefoniche • Sistemi di infonavigazione • Dispositivi per guide audio turistiche • Ecc. Tecniche di codifica della voce - Francesco Beritelli

5. Le varie codifiche … S Codifica di sorgente Codifica della voce Cifratura dei dati Codifica di canale Codifica di linea Tecniche di codifica della voce - Francesco Beritelli

6. Compressione/Decompressione del segnale vocale • bit rate rb=fc*b, • La frequenza di campionamento fc (NB o WB) e la risoluzione b determinano la qualità del segnale originale non compresso • Fattore di compressione = input bit rate/output bit rate (es. 64/8=8) Tecniche di codifica della voce - Francesco Beritelli

7. senza perdita Algoritmi di compressione con e senza perdita con perdita • Nei sistemi con perdita ovviamente in ricezione non è possibile riprodurre • fedelmente la forma d’onda originaria ma una versione degradata. • Tutti i sistemi di compressione utilizzati nelle tecniche di codifica del segnale • vocale sono con perdita Tecniche di codifica della voce - Francesco Beritelli

8. ASR TTS voce testo voce • (10 car/sec x 6 bit = 60 bit/sec) L’informazione nel segnale vocale Oltre al testo: identità, emozione, accento, intonazione, area di appartenenza, ecc Tecniche di codifica della voce - Francesco Beritelli

9. Principali cause di ridondanza RIDONDANZA STATISTICA - disuniformità della distribuzione statistica delle ampiezze (gaussiana a breve termine): è possibile ridurre la risoluzione del quantizzatore (quindi il numero dei livelli) per gli intervalli di minor interesse. - variabilità nel tempo delle ampiezze: è conveniente utilizzare estremi di quantizzazione che non siano costanti ma che si adattino alla dinamica corrente. - correlazione fra i campioni: un campione è correlato con la serie di campioni precedente per cui non è conveniente codificarli isolatamente. - disuniformità della distribuzione dell’energia in frequenza: è possibile adottare caratteristiche di quantizzazione differenti per ciascuna porzione dello spettro. RIDONDANZA PERCETTIVA - fenomeni di mascheramento dell’udito: è possibile adottare tecniche di quantizzazione che mascherino tramite il segnale il rumore di quantizzazione. Tecniche di codifica della voce - Francesco Beritelli

10. Caratteristiche del segnale vocale • Banda 20-10000 Hz • Banda standardizzata ITU-T: • Narrowband (20÷4000 Hz, qualità telefonica) • Wideband (20÷7000 Hz, qualità audioconferenza) • Media nulla, distribuzione non uniforme • Segnale non stazionario con correlazione a breve e lungo termine • Struttura “on-off” nel tempo con il 40 % di attività vocale e circa il 60 % di pause di silenzio • Suoni vocalizzati, non vocalizzati e misti Tecniche di codifica della voce - Francesco Beritelli

11. Valutazione delle prestazioni • Fattore di compressione • Riferimento ITU-T G.711 a 64kbit/s • Valori tipici 2 ÷ 32 • Qualità percepita • Ritardo introdotto • Robustezza alla degradazione del canale • Robustezza ai rumori ambientali • Complessità computazionale • Trasparenza alla trasmissione dati in banda fonica Tecniche di codifica della voce - Francesco Beritelli

12. Metodi di valutazione della qualità • Soggettivi: • MOS (Mean Opinion Scores): metrica definita dalla ITU-T P.800 con scala a 5 valori, da 1 (qualità pessima) a 5 (qualità eccellente). Metodo complesso e costoso. • Oggettivi: • SNR (rumore di codifica: r(n)=y(n)-x(n)) • E-model (SNR, degradazione codec, ritardo, perdite): valori tra 0 e 100 mappati con MOS • PESQ (ITU-T P.862): predice il MOS effettuando una comparazione tra sequenza codificata e originale basata su modelli matematici psico-acustici Tecniche di codifica della voce - Francesco Beritelli

13. Perceptual Evaluation of Speech Quality (PESQ) Tecniche di codifica della voce - Francesco Beritelli

14. Principali tecniche di codifica • codifica di forma d’onda: sfrutta le caratteristiche statistiche del segnale vocale nel dominio del tempo quali: • la distribuzione non uniforme delle ampiezze del segnale • la non stazionarietà • la correlazione dei campioni • Buona qualità se non si scende sotto i 24 kbit/s, un basso ritardo e bassa complessità. • codifica parametrica (o per modelli): tale codifica non è relativa ai campioni della forma d’onda, ma ai parametri di un modello matematico della sorgente che ha generato il segnale (sistema fonatorio umano). Con questo tipo di codifica necessito di un buffer per l’analisi delle trame e quindi introduco ritardi. Di contro riesco a raggiungere un bassissimo bit rate (fino a 2 kbit/s) a scapito dell’intellegibilità del segnale. -codifica di analisi per sintesi: tale codifica sfrutta i vantaggi delle due tecniche precedenti raggiungendo un buon compromesso fra compressione e qualità del segnale vocale (4÷16kbit/s) Tecniche di codifica della voce - Francesco Beritelli

15. Metodi di compressionedella voce (MOS vs Bit-rate) Tecniche di codifica della voce - Francesco Beritelli

16. Codifica di forma d’onda Sfruttano le caratteristiche statistiche del segnale indipendentemente dalle specifiche del sistema che lo ha generato • Distribuzione non uniforme delle ampiezze → Log PCM • Non stazionarietà (varianza) → APCM • Correlazione del segnale → DPCM Tecniche di codifica della voce - Francesco Beritelli

17. Quantizzazione uniforme/non uniforme Tecniche di codifica della voce - Francesco Beritelli

18. Leggi di compressione A e µ Tecniche di codifica della voce - Francesco Beritelli

19. SNRq uniforme vs non unif. Tecniche di codifica della voce - Francesco Beritelli

20. Standard ITU-T G.711 Log PCM a 64 kbit/s • Banda telefonica 0÷4kHz • Frequenza di campionamento 8kHz • Distribuzione non uniforme • Compressione della dinamica (legge A o µ) • 12 bit lineari/campione → 8 bit logaritmi/campione • Compressione da 96kbit/sec → 64kbit/sec • Qualità MOS 4.3 • Standard per l’accesso base ISDN Tecniche di codifica della voce - Francesco Beritelli

21. Standard ITU-T G.721 ADPCM a 32 kbit/sec • Adattamento backward per ridurre il ritardo • Codifica del segnale differenza a 16 livelli (4bit) • Banda 0÷4 kHz • Toll quality (MOS 4.1) • Bassa complessità • Robusto al BER rispetto al PCM • Sensibile alla perdita di diverse trame • Molto diffuso per la rete fissa (PSTN e VoIP) • ITU-T G.726 ADPCM 16, 24, 32, 40 kbit/s Tecniche di codifica della voce - Francesco Beritelli

22. Standard di Codifica WideBand ITU-T G.722 a 64 kbit/sec Tecniche di codifica della voce - Francesco Beritelli

23. Predizione a lungo termine LTP M rappresenta il periodo di vibrazione delle corde vocali (il suo inverso è il pitch o frequenza fondamentale) Tecniche di codifica della voce - Francesco Beritelli

24. Esempio di analisi del pitch • Per una stima accurata servono algoritmi di analisi del pitch molto complessi • L’ordine del predittore può variare (1÷3) e anche l’ampiezza della finestra di analisi (2÷4 sottotrame di analisi) • M viene codificato in genere con 7 bit (128 valori) • b viene codificato in genere con 3 bit Tecniche di codifica della voce - Francesco Beritelli

25. CODIFICHE PARAMETRICHE • Estrazione e codifica dei parametri del modello analitico associato al sistema che ha prodotto il segnale (sistema fonatorio) • Modello a due stati del residuo di predizione a lungo termine r(n) • Vantaggi: basso bit-rate (2,4 kbit/sec) • Svantaggi: alto ritardo e qualità metallica • Applicazioni in ambito militare (LPC10 DoD) Tecniche di codifica della voce - Francesco Beritelli

26. Sistema fonatorio umano e relativo diagramma a blocchi Tecniche di codifica della voce - Francesco Beritelli

27. x(n) Buffer 20 ms V/UV Decisione V/UV P C A N A L E P Analisi Pitch V/UV x^(n) LPC X ai Noise Analisi LPC ai G G Stima del Guadagno DECODIFICATORE CODIFICATORE Vocoder a predizione lineare Tecniche di codifica della voce - Francesco Beritelli

28. Caratteristiche Vocoder LPC Tecniche di codifica della voce - Francesco Beritelli

29. CODIFICHE IBRIDE DI ANALISI PER SINTESI (AbS) • x^(n)=d^(n)+x~LPC(n)=r(n)+ x~LTP(n)+x~LPC(n) • Utilizzo di un modello più raffinato per la codifica del residuo di predizione a lungo termine r(n) • Superano i limiti dei più semplici modelli parametrici • Richiedono per r(n) un numero di bit meno elevato delle tecniche DPCM con LTP • Utilizzano in fase di codifica la sintesi per ricavare i parametri ottimi (o sub-ottimi) che minimizzano un indice errore dopo un filtro di pesatura percettiva • Tecniche che richiedono un elevato calcolo computazionale Tecniche di codifica della voce - Francesco Beritelli

30. How are you? …... VAD & Comfort Noise Generation Speech Comfort Noise Tecniche di codifica della voce - Francesco Beritelli

31. Voice Activity Detection (VAD) Talkspurt Decoding Talkspurt Coding Channel High Bit-rate 1 VAD Decision Speech 0 Background Noise Coding Very Low Bit-rate Noise LPC G Comfort Noise Generator (CNG) Tecniche di codifica della voce - Francesco Beritelli

32. Parametri di valutazione prestazionale di un VAD • OGGETTIVI: - FEC (Front End Clipping) - MSC (Mid Speech Clipping) - OVER - NDS (Noise Detected as Speech) • SOGGETTIVI: - MOS Tecniche di codifica della voce - Francesco Beritelli

33. Codifica ON-OFF A ON OFF B OFF ON • Utilizzo di un codec CBR + VAD (source driven) • Codifica CBR dei tratti di ON (Talkspurt) • Trasmissione periodica dei SID nei tratti di OFF (silenzio o rumore ambientale) • Sintesi dei tratti di OFF in Rx tramite un CFG • Prestazioni dipendono dal rumore ambientale Tecniche di codifica della voce - Francesco Beritelli

34. Modalità di codifica AMR Tecniche di codifica della voce - Francesco Beritelli

35. Prestazioni AMR vs. GSM EFR Tecniche di codifica della voce - Francesco Beritelli

36. Robustezza iLBC alla packet loss Tecniche di codifica della voce - Francesco Beritelli

37. Codifica audio SILK • E’ uno codec audio royalty free adottato in Skype 4.0 (2009) • E’ scalabile in banda, bit rate e complessità: Tecniche di codifica della voce - Francesco Beritelli

38. Codifica audio SILK • Il ritardo algoritmo è di 25 ms = frame size (20ms) + look-ahead (5ms) • Prestazioni MOS al variare del bit-rate e del packet-loss: Tecniche di codifica della voce - Francesco Beritelli

39. Standard di codifica vocale ITU-T Tecniche di codifica della voce - Francesco Beritelli

40. Standard di codifica vocale ETSI Tecniche di codifica della voce - Francesco Beritelli

41. Reti radiomobili LTE • Modulazioni avanzate (QAM, OFDMA) • Tecniche di diversità di antenna (MIMO) • Multi accesso (3GPP, WiFi, Wi-Max) • Incremento della velocità di trasmissione in UL e DL • Riduzione dei ritardi (RTT da 60ms a 25ms) grazie alla riduzione dei nodi di rete • Commutazione di pacchetto -> VoIP • Voce/dati integrati Tecniche di codifica della voce - Francesco Beritelli