Acous&c Environment Recogni&on Graduate Student - - PowerPoint PPT Presentation

▶

Oct 02, 2023 336 likes •466 views

Acous&c Environment Recogni&on Graduate Student Mentor: Hedieh Ekhlasi Interns: Reyna Castellanos Jesus Flores Jose Chavez

SLIDE 1

Acous&c ¡Environment ¡ Recogni&on ¡

Graduate ¡Student ¡Mentor: ¡Hedieh ¡Ekhlasi ¡ ¡Interns: ¡ ¡ ¡ ¡ ¡ ¡ ¡ ¡Reyna ¡Castellanos ¡ ¡ ¡Jesus ¡Flores ¡ ¡ ¡Jose ¡Chavez ¡ ¡ ¡ ¡Edgar ¡Rey ¡Libao ¡

SLIDE 2

What ¡Is ¡Acous&c ¡Recogni&on? ¡

Restaurant ¡ ¡

SLIDE 3

Beach ¡ Restaurant ¡ Street ¡

Time ¡(sec) ¡

10 ¡ 20 ¡ 0 ¡ 20 ¡

Wave ¡Pressure ¡(kHz) ¡ ¡

20 ¡ 20 ¡ 0 ¡ 0 ¡

Sound ¡Intensity ¡ Low ¡ High ¡

Average ¡Environment ¡Waveforms ¡

SLIDE 4

How ¡Our ¡Research ¡Helps ¡Others ¡

Cochlear ¡Implants ¡

¡ ¡ ¡

NIH ¡Medical ¡Arts ¡

SLIDE 5

Research ¡Plan ¡

Collect ¡audio ¡samples ¡

¡

Process ¡the ¡samples ¡ ¡
Build ¡a ¡model ¡for ¡each ¡environment ¡
Test ¡the ¡models ¡for ¡accuracy ¡
U&lize ¡HTK ¡

SLIDE 6

Data ¡Collec&on ¡

20 ¡audio ¡samples ¡for ¡each ¡environment. ¡
20 ¡second ¡samples ¡per ¡environment. ¡

¡

SLIDE 7

Feature ¡Extrac&on ¡ (5 ¡tes&ng ¡data) ¡ Decoder ¡ Acous&c ¡ Model ¡ Dic&onary ¡ Language ¡ Model ¡ Environment ¡ Recogni&on ¡ (end ¡result) ¡ Feature ¡Extrac&on ¡ (15 ¡training ¡data) ¡ Ini&alized ¡ Model ¡

Process ¡Data ¡and ¡Build ¡Models ¡

Update ¡ Model ¡

SLIDE 8

Test ¡Models ¡for ¡Accuracy ¡

Recognized ¡ ¡ Environments ¡ Input ¡Environments ¡

Feature ¡Extrac&on ¡ ¡ (tes&ng ¡data) ¡ ¡ Decoder ¡ ¡ Street ¡ Beach ¡ Restaurant ¡ Recognized ¡Environments ¡ ¡

SLIDE 9

Created ¡models ¡
Analyzed ¡data ¡with ¡decoder ¡ ¡
Found ¡how ¡accurately ¡our ¡system ¡works ¡
It ¡is ¡s&ll ¡not ¡as ¡accurate ¡as ¡human ¡capabili&es ¡

¡

Environmental ¡Recogni&on: ¡ ¡ ¡A ¡New ¡and ¡Exci&ng ¡Process ¡

SLIDE 10

Future ¡Plans ¡

Create ¡new ¡smartphone ¡applica&ons ¡
Improve ¡sound ¡quality ¡

¡

Refine ¡ear ¡implants ¡

SLIDE 11

Acknowledgements ¡

Jack ¡Kent ¡Cooke ¡Founda&on ¡
University ¡of ¡California, ¡Santa ¡Barbara ¡
Center ¡for ¡Science ¡and ¡Engineering ¡Partnerships ¡
CNSI-‑California ¡NanoSystems ¡Ins&tute ¡
JKCB ¡Program ¡Director: ¡Maria ¡Teresa ¡Napoli ¡
Coordinators: ¡Jens-‑Uwe ¡Kuhn, ¡Chrysafis ¡Andreou ¡
Resident ¡Advisors: ¡Spencer ¡Igram, ¡Kori ¡Lay, ¡Sarah ¡Maxel, ¡