les sons de la parole: analyse et application

72
LES SONS DE LA PAROLE: ANALYSE ET APPLICATION Céline DE LOOZE Daniel HIRST

Upload: sana

Post on 23-Feb-2016

42 views

Category:

Documents


0 download

DESCRIPTION

LES SONS DE LA PAROLE: ANALYSE ET APPLICATION. Céline DE LOOZE Daniel HIRST. L’ETUDE DES SONS DE LA PAROLE: UNE INTRODUCTION. L’ETUDE DES SONS DE LA PAROLE: UNE INTRODUCTION. Les sons: événements physiques qui peuvent être enregistrés et analysés. - PowerPoint PPT Presentation

TRANSCRIPT

ANALYSE ET INTERPRTATION DE LEMPAN TEMPOREL DES VARIATIONS PROSODIQUES EN ANGLAIS ET EN FRANAIS

LES SONS DE LA PAROLE: ANALYSE ET APPLICATIONCline DE LOOZE Daniel HIRST

1LETUDE DES SONS DE LA PAROLE: UNE INTRODUCTIONLETUDE DES SONS DE LA PAROLE: UNE INTRODUCTIONLes sons: vnements physiques qui peuvent tre enregistrs et analyss

LETUDE DES SONS DE LA PAROLE: UNE INTRODUCTIONLes sons: vnements physiques qui peuvent tre enregistrs et analyss

Ltude des sons reprsentation acoustique

LETUDE DES SONS DE LA PAROLE: UNE INTRODUCTIONLes sons: vnements physiques qui peuvent tre enregistrs et analyss

Ltude des sons reprsentation acoustique

Praat: logiciel dvelopp par Paul Boersma et DavidWeenink linstitut de phontique de lUniversitdAmsterdamLES SONS DE LA PAROLELES SONS DE LA PAROLECaractristiques et reprsentation acoustiques

LES SONS DE LA PAROLECaractristiques et reprsentation acoustiques

Paramtres prosodiques et fonctions prosodiquesLES SONS DE LA PAROLECaractristiques et reprsentation acoustiques

Paramtres prosodiques et fonctions prosodiques

Applications (dmonstration en parole de synthse)

CARACTERISTIQUES ET REPRESENTATIONCARACTERISTIQUES ET REPRESENTATION

CARACTERISTIQUES ET REPRESENTATION

Oscillogramme

CARACTERISTIQUES ET REPRESENTATION

OscillogrammeSpectrogramme

CARACTERISTIQUES ET REPRESENTATIONCARACTERISTIQUES ET REPRESENTATIONLoscillogramme

CARACTERISTIQUES ET REPRESENTATIONLoscillogramme

Oscillations/ priodesCARACTERISTIQUES ET REPRESENTATIONLoscillogramme

Oscillations/ priodesCARACTERISTIQUES ET REPRESENTATIONLoscillogramme

Oscillations/ priodes

CARACTERISTIQUES ET REPRESENTATIONLoscillogramme

Oscillations/ priodes

Vibrations descordes vocalesCARACTERISTIQUES ET REPRESENTATIONCARACTERISTIQUES ET REPRESENTATIONLe spectrogramme

CARACTERISTIQUES ET REPRESENTATIONLe spectrogramme

CARACTERISTIQUES ET REPRESENTATIONLe spectrogramme

CARACTERISTIQUES ET REPRESENTATIONLe spectrogramme

Courbedintensit (dB)CARACTERISTIQUES ET REPRESENTATIONReprsentation en trois dimensions:Temps, Frquence, Intensit

CARACTERISTIQUES ET REPRESENTATIONCARACTERISTIQUES ET REPRESENTATIONVois ou non vois? pulsations

CARACTERISTIQUES ET REPRESENTATIONVois ou non vois? pulsations

CARACTERISTIQUES ET REPRESENTATIONCARACTERISTIQUES ET REPRESENTATIONTimbre ou qualit formants

CARACTERISTIQUES ET REPRESENTATIONCARACTERISTIQUES ET REPRESENTATIONPriodes/sec = Frquence Fondamentale (fo)

CARACTERISTIQUES ET REPRESENTATIONCARACTERISTIQUES ET REPRESENTATIONCaractristiques dun son:CARACTERISTIQUES ET REPRESENTATIONCaractristiques dun son: qualit ou timbreCARACTERISTIQUES ET REPRESENTATIONCaractristiques dun son: qualit ou timbre amplitudeCARACTERISTIQUES ET REPRESENTATIONCaractristiques dun son: qualit ou timbre amplitude hauteurCARACTERISTIQUES ET REPRESENTATIONCaractristiques dun son: qualit ou timbre amplitude hauteur+ dure CARACTERISTIQUES ET REPRESENTATIONCaractristiques dun son: qualit ou timbre amplitude hauteur+ dure

CARACTERISTIQUES ET REPRESENTATIONCaractristiques dun son: qualit ou timbre amplitude hauteur+ dure

LES SONS DE LA PAROLECaractristiques et reprsentation acoustiques

Paramtres prosodiques et fonctions prosodiques

Applications (dmonstration en parole de synthse)PARAMETRES PROSODIQUES

PARAMETRES PROSODIQUES

Au niveau perceptif Variations de la mlodie, de lintonation, de lnergie et du rythme

Au niveau acoustique Modifications de la frquence fondamentale, de lintensit (force de voix) et de la dure

PARAMETRES PROSODIQUES LEURS FONCTIONSPARAMETRES PROSODIQUES LEURS FONCTIONSParticipent lidentit lexicale des mots dans certaines langues (fonctions lexicales)Renseignent sur le sexe, lge, laspect physique, ltat de sant, la personnalit ou le groupe linguistique du locuteur (fonctions extra-linguistiques)Communiquent des motions (fonctions para-linguistiques)

PARAMETRES PROSODIQUES LEURS FONCTIONSFONCTION LEXICALE Variations de quantit (dure segmentale)En finnois/taka/ (derrire)/takka/ (chemine) /taaka/ (fardeau)En franais, dans la chane parle: /ilpaRto/ (il part tt) /ilpaRtto/ (ils partent tt) /ilabatylSje~/ (il a battu le chien) /ilaabatylSje~/ (Il a abattu le chien)

PARAMETRES PROSODIQUES LEURS FONCTIONSFONCTION LEXICALE Variations des tons (hauteur)En chinois mandarin, /ma/ = fantme (ton haut), mre (monte), cheval (monte glottalise) mas (chute), tombeau (chute + monte), jeune plant de riz (chute glottalise)

Variations des accents (pitch accent)En japonais/hanadesu/(cest une fleur)/hanadesu/ (cest un nez)

PARAMETRES PROSODIQUES LEURS FONCTIONSFONCTION EXTRA-LINGUISTIQUE

Les diffrences de tessiture/ registre (hauteur et tendue de voix) permettent de distinguer un homme dune femme. entre autres dues lpaisseur, la taille et la tension des cordes vocales (Ladefoged, 2001)

PARAMETRES PROSODIQUES LEURS FONCTIONSFONCTION PARA-LINGUISTIQUE

Les variations de tempo (dbit de parole), de registre, damplitude (force de voix) permettent de distinguer la joie de la colre, les motions fortes (joie, colre) des motions modres (ennui, satsifaction) (Mozzicconacci, 1998; Hamzah, 2004)

LES SONS DE LA PAROLECaractristiques et reprsentation acoustiques

Aspects prosodiques de la parole et fonctions prosodiques

Applications (dmonstration en parole de synthse)APPLICATIONDcrire la prosodie des languesAnalyse automatique de la prosodieLogiciels dapprentissage dune langue trangreDomaine de la santTechnologie de la parole: reconnaissance et synthseAPPLICATIONDcrire la prosodie des languesAnalyse automatique de la prosodieLogiciels dapprentissage dune langue trangreDomaine de la santTechnologie de la parole: reconnaissance et synthseAPPLICATIONDcrire la prosodie des languesAnalyse automatique de la prosodieLogiciels dapprentissage dune langue trangreDomaine de la santTechnologie de la parole: reconnaissance et synthseAPPLICATIONDcrire la prosodie des languesAnalyse automatique de la prosodieLogiciels dapprentissage dune langue trangreDomaine de la santTechnologie de la parole: reconnaissance et synthseAPPLICATIONDcrire la prosodie des languesAnalyse automatique de la prosodieLogiciels dapprentissage dune langue trangreDomaine de la santTechnologie de la parole: reconnaissance et synthseAPPLICATIONDcrire la prosodie des languesAnalyse automatique de la prosodieLogiciels dapprentissage dune langue trangreDomaine de la santTechnologie de la parole: reconnaissance et synthseAPPLICATIONAPPLICATIONDmoMbrola: Synthtiseur de parole multilingue propos par le Laboratoire TCTS de la Facult Polytechnique de Mons (Belgique)APPLICATIONDonnes dentre: paramtres prosodiquesAPPLICATIONDonnes dentre: paramtres prosodiques_7550127g59u9650180d60m84O:1715090n79I132N204_7550127

APPLICATIONDonnes dentre: paramtres prosodiques_7550127g59u9650180d60m84O:1715090n79I132N204_7550127

APPLICATIONDonnes dentre: paramtres prosodiques_7550127g59u9650180d60m84O:1715090n79I132N204_7550127

TranscriptionPhontique

SAMPAAPIAPPLICATIONDonnes dentre: paramtres prosodiques_7550127g59u9650180d60m84O:1715090n79I132N204_7550127

APPLICATIONDonnes dentre: paramtres prosodiques_7550127g59u9650180d60m84O:1715090n79I132N204_7550127

DureSegmentale

APPLICATIONDonnes dentre: paramtres prosodiques_7550127g59u9650180d60m84O:1715090n79I132N204_7550127

APPLICATIONDonnes dentre: paramtres prosodiques_7550127g59u9650180d60m84O:1715090n79I132N204_7550127

Frquence fondamentale(Hertz)

APPLICATIONDonnes dentre: paramtres prosodiques_7550127g59u9650180d60m84O:1715090n79I132N204_7550127

PhonmesDure segmentaleFrquence fondamentale

CONCLUSIONCONCLUSIONCaractristiques acoustiques dun son:Timbre AmplitudeHauteurDureParamtres prosodiques et fonctions prosodiques:Frquence fondamentale, intensit, dureFonctions lexicales, extra-linguistiques, para-linguistiques

Applications Dans les logiciels dapprentissage de langues trangres Dans le domaine de la sant Synthse vocale

MERCI DE VOTRE ATTENTIONEXEMPLES DE LOGICIEL DE TECHNOLOGIE DE LA PAROLEReconnaissance de la paroleVerimote propos par ConfigateSpeakerKey par la socit ITT et BUYTEL CipherVox par MotorolaHelp Yourself & SecurPBX par le groupe de tlphonie OTTAWASpeakez par T-NetixVeriVoice par Verivoice

Synthse de la paroleACNA (Annuaire)Phonetone par Lotus (serveurs de lecture vocale de messages lectroniques)Digalo (lecture de textes en 8 langues)Kali et LAIPTTS-MoulinAParole (synthse vocale du franais)JAWS par HENTER-JOYCEEXEMPLES DE LOGICIEL D APPRENTISSAGE DES LANGUESTalk to me par AuralogVideoVoice par Micro Video IncAutres socits: Syracuse, Comest, Neuroconcept, Open Mind, EmmeWinPitchGermain et Martin (2000)Apprentissage de loral en langue seconde