dr. divényi péter (dr. pierre l. divenyi) speech and hearing research (mtz 151) ,

42
Dr. Divényi Péter (Dr. Pierre L. Divenyi) Speech and Hearing Research (MTZ 151), VA Northern California Health Care Systems Martinez, CA 94553 USA [email protected] +1 925 370 67 45 (minusz 9 óra eltérés) Bpesti szam: 06 20 923 29 17

Upload: rae-sears

Post on 01-Jan-2016

27 views

Category:

Documents


3 download

DESCRIPTION

Dr. Divényi Péter (Dr. Pierre L. Divenyi) Speech and Hearing Research (MTZ 151) , VA Northern California Health Care Systems Martinez, CA 94553 USA [email protected] +1 925 370 67 45 (minusz 9 óra elt é r é s) Bpesti szam: 06 20 923 29 17. A mérnöki cél: - PowerPoint PPT Presentation

TRANSCRIPT

Page 1: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,

Dr. Divényi Péter

(Dr. Pierre L. Divenyi)

Speech and Hearing Research (MTZ 151),

VA Northern California Health Care Systems

Martinez, CA 94553

USA

[email protected]

+1 925 370 67 45 (minusz 9 óra eltérés)

Bpesti szam: 06 20 923 29 17

Page 2: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,

A mérnöki cél:

A hallàsi processzust modellben vagy algoritmusban kifejezni

Page 3: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,

1. (2., 3., stb.)

A hallàsi rendszer egyszerű

Page 4: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,
Page 5: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,
Page 6: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,

BM_mm = (16,7) log10 ((0,006046) freq + 1)(Greenwood egyenlőség)

Basilar membrane (=alaphàrtya?)

Page 7: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,

Tonotópia

Page 8: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,

0 10 20 30 40 50 60 70 80 90 100-2

-1.5

-1

-0.5

0

0.5

1

1.5

2

Sawtooth wave -- Waveform representation

Time

Am

pli

tud

e

Page 9: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,

0 100 200 300 400 500 6000

20

40

60

80

100

120

140

160

180

Sawtooth wave -- Amplitude Spectrum. (Fourier Spectrum)

Frequency

Am

pli

tud

e

Page 10: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,

0 10 20 30 40 50 60 70 80 90 100-1

-0.8

-0.6

-0.4

-0.2

0

0.2

0.4

0.6

0.8

1

Square wave. Waveform representation.

Time

Am

pli

tud

eSquare wave -- Waveform representation.

Page 11: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,

0 100 200 300 400 500 6000

20

40

60

80

100

120

140

160

180

Square wave. Amplitude Spectrum. (Fourier Spectrum)A

mp

litu

de

Frequency

Square wave -- Amplitude Spectrum. (Fourier Spectrum)

Page 12: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,
Page 13: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,
Page 14: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,
Page 15: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,
Page 16: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,

Masking:

The amount/process by which thethreshold of audibility for one soundis raised by the presence of another sound.

Page 17: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,

Masking noise bandwidth (Hz)Sig

nal

th

resh

old

leve

l (d

B S

PL

)

50 320070

76

What does this graph tell us about masking?

Page 18: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,
Page 19: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,
Page 20: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,
Page 21: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,
Page 22: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,
Page 23: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,
Page 24: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,

Kritikus sàv példa (track 2)

Page 25: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,
Page 26: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,
Page 27: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,

1. A hallàsi rendszer egyszerű:

-- lineàris (1 dB be, 1 dB ki)

-- sàvszűrő ~àllandó Q-val

-- mindez az egész frekvenciasàvra érvényes

Page 28: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,
Page 29: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,
Page 30: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,
Page 31: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,

Időalapi hangmagassàg észlelés (=“pitch” vagy “virtual pitch” vagy “residue pitch”) (track 37)

Page 32: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,

Temporal Modulation Transfer Function (TMTF)

Page 33: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,
Page 34: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,

2. A hallàsi rendszer egyszerű:

-- idővàlasz frekvenciaszerinti rezgésre vezethető

-- idővàlasz hossza a sàvszűrő szelességévelarànyos

-- idővàlasz az ingerhez pontosan kapcsolódik

Page 35: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,
Page 36: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,
Page 37: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,
Page 38: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,
Page 39: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,
Page 40: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,

3. A hallàsi rendszer egyszerű:

-- egy hangforràs térbeli felismerése a két fül és a fej fizikai struktúràjàból pontosan elorelàtható

Page 41: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,

Vége – nagyon örültem

Page 42: Dr.  Divényi Péter (Dr.  Pierre L. Divenyi) Speech and Hearing Research  (MTZ 151) ,

Bocsànat – egy néhàny dolog kimaradt