llisterri, j. (2016). com ha après a parlar...
TRANSCRIPT
![Page 1: Llisterri, J. (2016). Com ha après a parlar Siri?liceu.uab.cat/~joaquim/publicacions/Llisterri_16_Assis... · 2016. 5. 19. · ComensentenSiri? La tecnologia: reconeixementautomàticdelaparla](https://reader035.vdocuments.mx/reader035/viewer/2022071004/5fc12bb252074b199e385fa0/html5/thumbnails/1.jpg)
Com ha après a parlar Siri?
Joaquim LlisterriÀrea de Lingüística General
Departament de Filologia Espanyola
http://liceu.uab.cat/~joaquim
L’estudi del so i de la parla a la Facultat de LletresServei de Tractament de la Parla i del So
Universitat Autònoma de Barcelona19 de maig de 2016
Joaquim Llisterri Com ha après a parlar Siri?
![Page 2: Llisterri, J. (2016). Com ha après a parlar Siri?liceu.uab.cat/~joaquim/publicacions/Llisterri_16_Assis... · 2016. 5. 19. · ComensentenSiri? La tecnologia: reconeixementautomàticdelaparla](https://reader035.vdocuments.mx/reader035/viewer/2022071004/5fc12bb252074b199e385fa0/html5/thumbnails/2.jpg)
Què és un assistent virtual?
ç Interacció mitjançant la parla
Joaquim Llisterri Com ha après a parlar Siri?
![Page 3: Llisterri, J. (2016). Com ha après a parlar Siri?liceu.uab.cat/~joaquim/publicacions/Llisterri_16_Assis... · 2016. 5. 19. · ComensentenSiri? La tecnologia: reconeixementautomàticdelaparla](https://reader035.vdocuments.mx/reader035/viewer/2022071004/5fc12bb252074b199e385fa0/html5/thumbnails/3.jpg)
Assistents virtuals
SiriApple
CortanaMicrosoft
Google NowGoogle
Joaquim Llisterri Com ha après a parlar Siri?
![Page 4: Llisterri, J. (2016). Com ha après a parlar Siri?liceu.uab.cat/~joaquim/publicacions/Llisterri_16_Assis... · 2016. 5. 19. · ComensentenSiri? La tecnologia: reconeixementautomàticdelaparla](https://reader035.vdocuments.mx/reader035/viewer/2022071004/5fc12bb252074b199e385fa0/html5/thumbnails/4.jpg)
Assistents virtuals
IndigoArtificial Solutions
Assistant.aiSpeaktoit
Sherpa NextSherpa
Joaquim Llisterri Com ha après a parlar Siri?
![Page 5: Llisterri, J. (2016). Com ha après a parlar Siri?liceu.uab.cat/~joaquim/publicacions/Llisterri_16_Assis... · 2016. 5. 19. · ComensentenSiri? La tecnologia: reconeixementautomàticdelaparla](https://reader035.vdocuments.mx/reader035/viewer/2022071004/5fc12bb252074b199e385fa0/html5/thumbnails/5.jpg)
Qui és Siri?
Cendrowski, M. (2012). The Beta Test Initiation, The Big Bang Theory, Season 5, Episode 14.United States: Chuck Lorre Productions, Warner Bros Television. Consultat a
https://www.youtube.com/watch?v=WXqRmBrBboA
Joaquim Llisterri Com ha après a parlar Siri?
![Page 6: Llisterri, J. (2016). Com ha après a parlar Siri?liceu.uab.cat/~joaquim/publicacions/Llisterri_16_Assis... · 2016. 5. 19. · ComensentenSiri? La tecnologia: reconeixementautomàticdelaparla](https://reader035.vdocuments.mx/reader035/viewer/2022071004/5fc12bb252074b199e385fa0/html5/thumbnails/6.jpg)
La primera veu de Siri per a l’anglès americà
Susan Bennethttp://susancbennett.com
Joaquim Llisterri Com ha après a parlar Siri?
![Page 7: Llisterri, J. (2016). Com ha après a parlar Siri?liceu.uab.cat/~joaquim/publicacions/Llisterri_16_Assis... · 2016. 5. 19. · ComensentenSiri? La tecnologia: reconeixementautomàticdelaparla](https://reader035.vdocuments.mx/reader035/viewer/2022071004/5fc12bb252074b199e385fa0/html5/thumbnails/7.jpg)
La veu de Siri
La tecnologia: conversió de text en parla
Les veus de Siri tenen com a base un corpusd’enregistraments realitzats per locutors professionals
Els enregistraments es processen per a crear una base dedades amb fragments de parla etiquetats fonèticament
son las ocho en punto
Joaquim Llisterri Com ha après a parlar Siri?
![Page 8: Llisterri, J. (2016). Com ha après a parlar Siri?liceu.uab.cat/~joaquim/publicacions/Llisterri_16_Assis... · 2016. 5. 19. · ComensentenSiri? La tecnologia: reconeixementautomàticdelaparla](https://reader035.vdocuments.mx/reader035/viewer/2022071004/5fc12bb252074b199e385fa0/html5/thumbnails/8.jpg)
Base de dades etiquetada fonèticament
Joaquim Llisterri Com ha après a parlar Siri?
![Page 9: Llisterri, J. (2016). Com ha après a parlar Siri?liceu.uab.cat/~joaquim/publicacions/Llisterri_16_Assis... · 2016. 5. 19. · ComensentenSiri? La tecnologia: reconeixementautomàticdelaparla](https://reader035.vdocuments.mx/reader035/viewer/2022071004/5fc12bb252074b199e385fa0/html5/thumbnails/9.jpg)
Conversió de text en parla
Tractament del textd’entrada
Transcripció fonèticaautomàtica
la alarma de las ocho estáactivada
la a"larma De las "otSoes"ta kti"BaDa
Joaquim Llisterri Com ha après a parlar Siri?
![Page 10: Llisterri, J. (2016). Com ha après a parlar Siri?liceu.uab.cat/~joaquim/publicacions/Llisterri_16_Assis... · 2016. 5. 19. · ComensentenSiri? La tecnologia: reconeixementautomàticdelaparla](https://reader035.vdocuments.mx/reader035/viewer/2022071004/5fc12bb252074b199e385fa0/html5/thumbnails/10.jpg)
Conversió de text en parla
Selecció de fragments de la base de dades
las otSo
Joaquim Llisterri Com ha après a parlar Siri?
![Page 11: Llisterri, J. (2016). Com ha après a parlar Siri?liceu.uab.cat/~joaquim/publicacions/Llisterri_16_Assis... · 2016. 5. 19. · ComensentenSiri? La tecnologia: reconeixementautomàticdelaparla](https://reader035.vdocuments.mx/reader035/viewer/2022071004/5fc12bb252074b199e385fa0/html5/thumbnails/11.jpg)
Conversió de text en parla
Concatenació de fragments
Joaquim Llisterri Com ha après a parlar Siri?
![Page 12: Llisterri, J. (2016). Com ha après a parlar Siri?liceu.uab.cat/~joaquim/publicacions/Llisterri_16_Assis... · 2016. 5. 19. · ComensentenSiri? La tecnologia: reconeixementautomàticdelaparla](https://reader035.vdocuments.mx/reader035/viewer/2022071004/5fc12bb252074b199e385fa0/html5/thumbnails/12.jpg)
Conversió de text en parla
Assignació de la prosòdia
Joaquim Llisterri Com ha après a parlar Siri?
![Page 13: Llisterri, J. (2016). Com ha après a parlar Siri?liceu.uab.cat/~joaquim/publicacions/Llisterri_16_Assis... · 2016. 5. 19. · ComensentenSiri? La tecnologia: reconeixementautomàticdelaparla](https://reader035.vdocuments.mx/reader035/viewer/2022071004/5fc12bb252074b199e385fa0/html5/thumbnails/13.jpg)
Com ens enten Siri?
La tecnologia: reconeixement automàtic de la parla
Creació d’un corpus d’entrenament per a que Siri“aprengui”
Representatiu de la comunitat de parlantsRepresentatiu de les variants de la llenguaRepresentatiu de les característiques fonètiques de lallengua
A partir del corpus d’entrenament es creen:Models acústics per a cada so de la llenguaModel de llenguatge amb les probabilitats d’aparició deles paraulesDiccionari de pronúncia amb la transcripció fonètica deles paraules
Joaquim Llisterri Com ha après a parlar Siri?
![Page 14: Llisterri, J. (2016). Com ha après a parlar Siri?liceu.uab.cat/~joaquim/publicacions/Llisterri_16_Assis... · 2016. 5. 19. · ComensentenSiri? La tecnologia: reconeixementautomàticdelaparla](https://reader035.vdocuments.mx/reader035/viewer/2022071004/5fc12bb252074b199e385fa0/html5/thumbnails/14.jpg)
Reconeixement automàtic de la parla
Anàlisi del senyal d’entrada en paràmetres acústics
Mañana despiértame a las ocho
Joaquim Llisterri Com ha après a parlar Siri?
![Page 15: Llisterri, J. (2016). Com ha après a parlar Siri?liceu.uab.cat/~joaquim/publicacions/Llisterri_16_Assis... · 2016. 5. 19. · ComensentenSiri? La tecnologia: reconeixementautomàticdelaparla](https://reader035.vdocuments.mx/reader035/viewer/2022071004/5fc12bb252074b199e385fa0/html5/thumbnails/15.jpg)
Reconeixement automàtic de la parla
Senyal d’entrada
?
Models acústics
Model per a [a]
Model per a [i]
Joaquim Llisterri Com ha après a parlar Siri?
![Page 16: Llisterri, J. (2016). Com ha après a parlar Siri?liceu.uab.cat/~joaquim/publicacions/Llisterri_16_Assis... · 2016. 5. 19. · ComensentenSiri? La tecnologia: reconeixementautomàticdelaparla](https://reader035.vdocuments.mx/reader035/viewer/2022071004/5fc12bb252074b199e385fa0/html5/thumbnails/16.jpg)
Reconeixement automàtic de la parla
Segmentació i etiquetatge fonètic a partir dels modelsacústics de cada so de la parla apresos del corpusd’entrenament
Joaquim Llisterri Com ha après a parlar Siri?
![Page 17: Llisterri, J. (2016). Com ha après a parlar Siri?liceu.uab.cat/~joaquim/publicacions/Llisterri_16_Assis... · 2016. 5. 19. · ComensentenSiri? La tecnologia: reconeixementautomàticdelaparla](https://reader035.vdocuments.mx/reader035/viewer/2022071004/5fc12bb252074b199e385fa0/html5/thumbnails/17.jpg)
Reconeixement automàtic de la parla
Model de llenguatgea
las
ochosieteseis
la
una
Diccionari fonètic
mañana [maJana]a [a]las [las]ocho [otSo]
Joaquim Llisterri Com ha après a parlar Siri?
![Page 18: Llisterri, J. (2016). Com ha après a parlar Siri?liceu.uab.cat/~joaquim/publicacions/Llisterri_16_Assis... · 2016. 5. 19. · ComensentenSiri? La tecnologia: reconeixementautomàticdelaparla](https://reader035.vdocuments.mx/reader035/viewer/2022071004/5fc12bb252074b199e385fa0/html5/thumbnails/18.jpg)
Reconeixement automàtic de la parla
Cerca en el model de llenguatge creat durant l’etapad’entrenament
Cerca en un diccionari amb la transcripció fonètica deles paraules
Joaquim Llisterri Com ha après a parlar Siri?
![Page 19: Llisterri, J. (2016). Com ha après a parlar Siri?liceu.uab.cat/~joaquim/publicacions/Llisterri_16_Assis... · 2016. 5. 19. · ComensentenSiri? La tecnologia: reconeixementautomàticdelaparla](https://reader035.vdocuments.mx/reader035/viewer/2022071004/5fc12bb252074b199e385fa0/html5/thumbnails/19.jpg)
Reconeixement automàtic de la parla
Representació ortogràfica
ç Comprensió del llenguatge natural
Joaquim Llisterri Com ha après a parlar Siri?
![Page 20: Llisterri, J. (2016). Com ha après a parlar Siri?liceu.uab.cat/~joaquim/publicacions/Llisterri_16_Assis... · 2016. 5. 19. · ComensentenSiri? La tecnologia: reconeixementautomàticdelaparla](https://reader035.vdocuments.mx/reader035/viewer/2022071004/5fc12bb252074b199e385fa0/html5/thumbnails/20.jpg)
Quina feina fa un fonetista?
Disseny dels corpus i selecció de parlants per a laconversió de text en parla i per al reconeixementautomàtic de la parla
Validació d’eines d’etiquetatge fonètic i de transcripciófonètica automàtica
Verificació de l’etiquetatge fonètic dels corpus
Models de prosòdia per a la conversió de text en parla
Validació de diccionaris de pronúncia per alreconeixement automàtic de la parla
Avaluació de la qualitat lingüística dels sistemes
Joaquim Llisterri Com ha après a parlar Siri?
![Page 21: Llisterri, J. (2016). Com ha après a parlar Siri?liceu.uab.cat/~joaquim/publicacions/Llisterri_16_Assis... · 2016. 5. 19. · ComensentenSiri? La tecnologia: reconeixementautomàticdelaparla](https://reader035.vdocuments.mx/reader035/viewer/2022071004/5fc12bb252074b199e385fa0/html5/thumbnails/21.jpg)
La fonètica pot contribuir al desenvolupament de lestecnologies de la parla
Joaquim Llisterri Com ha après a parlar Siri?