24
Referat zum Thema: Exemplartheorien Referenten: Regina Kaiser, Raphael Winkelmann Seminar: Perzeption für Fortgeschrittene Dozent: Uwe Reichel M.A. Datum: 23.12. 2008

Referat zum Thema: Exemplartheorien - LMU Münchenreichelu/kurse/perz_fort/referate... · Referat zum Thema: Exemplartheorien Referenten: Regina Kaiser, Raphael Winkelmann Seminar:

  • Upload
    others

  • View
    1

  • Download
    0

Embed Size (px)

Citation preview

Page 1: Referat zum Thema: Exemplartheorien - LMU Münchenreichelu/kurse/perz_fort/referate... · Referat zum Thema: Exemplartheorien Referenten: Regina Kaiser, Raphael Winkelmann Seminar:

Referat zum Thema: Exemplartheorien

Referenten: Regina Kaiser, Raphael WinkelmannSeminar: Perzeption für FortgeschritteneDozent: Uwe Reichel M.A.Datum: 23.12. 2008

Page 2: Referat zum Thema: Exemplartheorien - LMU Münchenreichelu/kurse/perz_fort/referate... · Referat zum Thema: Exemplartheorien Referenten: Regina Kaiser, Raphael Winkelmann Seminar:

Referat zum Thema: Exemplartheorien

Referenten: Regina Kaiser, Raphael WinkelmannSeminar: Perzeption für FortgeschritteneDozent: Uwe Reichel M.A.Datum: 23.12. 2008

Thema:Speech Perception without Speaker Normalization

An Exemplar Model

Ein Paper von Keith Johnson (1997)

Page 3: Referat zum Thema: Exemplartheorien - LMU Münchenreichelu/kurse/perz_fort/referate... · Referat zum Thema: Exemplartheorien Referenten: Regina Kaiser, Raphael Winkelmann Seminar:

Referat zum Thema: Exemplartheorien

Referenten: Regina Kaiser, Raphael WinkelmannSeminar: Perzeption für FortgeschritteneDozent: Uwe Reichel M.A.Datum: 23.12. 2008

Thema:Speech Perception without Speaker Normalization

An Exemplar Model

Ein Paper von Keith Johnson (1997)

Details und Resultate einiger Simulationen

Page 4: Referat zum Thema: Exemplartheorien - LMU Münchenreichelu/kurse/perz_fort/referate... · Referat zum Thema: Exemplartheorien Referenten: Regina Kaiser, Raphael Winkelmann Seminar:

Referat zum Thema: Exemplartheorien

Referenten: Regina Kaiser, Raphael WinkelmannSeminar: Perzeption für FortgeschritteneDozent: Uwe Reichel M.A.Datum: 23.12. 2008

Das Versuchssetting● Korpus

– 39 englische Muttersprachler (14 m/ 25 w) mussten die Wörter aid, awed, had, head, heed, hid, hood, hud, odd, owed und who'd fünf mal sprechen

– Parameterextraktion: F0-F3 (im Vokalzentrum) + Vokaldauer

Page 5: Referat zum Thema: Exemplartheorien - LMU Münchenreichelu/kurse/perz_fort/referate... · Referat zum Thema: Exemplartheorien Referenten: Regina Kaiser, Raphael Winkelmann Seminar:

Referat zum Thema: Exemplartheorien

Referenten: Regina Kaiser, Raphael WinkelmannSeminar: Perzeption für FortgeschritteneDozent: Uwe Reichel M.A.Datum: 23.12. 2008

Das Versuchssetting● Korpus

– 39 englische Muttersprachler (14 m/ 25 w) mussten die Wörter aid, awed, had, head, heed, hid, hood, hud, odd, owed und who'd fünf mal sprechen

– Parameterextraktion: F0-F3 (im Vokalzentrum) + Vokaldauer

Merkmalsvektoren == ExemplareMerkmalsvektoren == Exemplare

Page 6: Referat zum Thema: Exemplartheorien - LMU Münchenreichelu/kurse/perz_fort/referate... · Referat zum Thema: Exemplartheorien Referenten: Regina Kaiser, Raphael Winkelmann Seminar:

Referat zum Thema: Exemplartheorien

Referenten: Regina Kaiser, Raphael WinkelmannSeminar: Perzeption für FortgeschritteneDozent: Uwe Reichel M.A.Datum: 23.12. 2008

Das Versuchssetting● Korpus

– 39 englische Muttersprachler (14 m./ 25 w.) mussten die Wörter aid, awed, had, head, heed, hid, hood, hud, odd, owed und who'd 5 mal sprechen

– Parameterextraktion: F0-F3 (im Vokalzentrum) + Vokaldauer

– Exemplare wurden mit folgenden Lables versehen:● Intendiertes Wort● Geschlecht des Sprechers● Identität des Sprechers

Page 7: Referat zum Thema: Exemplartheorien - LMU Münchenreichelu/kurse/perz_fort/referate... · Referat zum Thema: Exemplartheorien Referenten: Regina Kaiser, Raphael Winkelmann Seminar:

Referat zum Thema: Exemplartheorien

Referenten: Regina Kaiser, Raphael WinkelmannSeminar: Perzeption für FortgeschritteneDozent: Uwe Reichel M.A.Datum: 23.12. 2008

Die Vokalidentifizierung● Jeweils ein Exemplar wurde aus dem

bestehenden Korpus entnommen, um es danach wieder zu identifizieren.

● Formeln:

Page 8: Referat zum Thema: Exemplartheorien - LMU Münchenreichelu/kurse/perz_fort/referate... · Referat zum Thema: Exemplartheorien Referenten: Regina Kaiser, Raphael Winkelmann Seminar:

Referat zum Thema: Exemplartheorien

Referenten: Regina Kaiser, Raphael WinkelmannSeminar: Perzeption für FortgeschritteneDozent: Uwe Reichel M.A.Datum: 23.12. 2008

Die Vokalidentifizierung● Jeweils ein Exemplar wurde aus dem

bestehenden Korpus entnommen um es danach wieder zu identifizieren.

● Formeln:

wurden durch ein simulated annealing algorithm ermittelt

Page 9: Referat zum Thema: Exemplartheorien - LMU Münchenreichelu/kurse/perz_fort/referate... · Referat zum Thema: Exemplartheorien Referenten: Regina Kaiser, Raphael Winkelmann Seminar:

Referat zum Thema: Exemplartheorien

Referenten: Regina Kaiser, Raphael WinkelmannSeminar: Perzeption für FortgeschritteneDozent: Uwe Reichel M.A.Datum: 23.12. 2008

Die Vokalidentifizierung● Jeweils ein Exemplar wurde aus dem

bestehenden Korpus entnommen um es danach wieder zu identifizieren.

● Formeln:

wurden durch ein simulated annealing algorithmus ermittelt

base activation level=1 kein Gauss-sches Rauschen wurde addiert (e=0)

Page 10: Referat zum Thema: Exemplartheorien - LMU Münchenreichelu/kurse/perz_fort/referate... · Referat zum Thema: Exemplartheorien Referenten: Regina Kaiser, Raphael Winkelmann Seminar:

Referat zum Thema: Exemplartheorien

Referenten: Regina Kaiser, Raphael WinkelmannSeminar: Perzeption für FortgeschritteneDozent: Uwe Reichel M.A.Datum: 23.12. 2008

Die Vokalidentifizierung● Model Parameters and Errors

Page 11: Referat zum Thema: Exemplartheorien - LMU Münchenreichelu/kurse/perz_fort/referate... · Referat zum Thema: Exemplartheorien Referenten: Regina Kaiser, Raphael Winkelmann Seminar:

Referat zum Thema: Exemplartheorien

Referenten: Regina Kaiser, Raphael WinkelmannSeminar: Perzeption für FortgeschritteneDozent: Uwe Reichel M.A.Datum: 23.12. 2008

Die Vokalidentifizierung● Model Parameters and Errors

ACHTUNG: gleiche Gewichte bedeuten nicht gleichgroße Gewichtung

Page 12: Referat zum Thema: Exemplartheorien - LMU Münchenreichelu/kurse/perz_fort/referate... · Referat zum Thema: Exemplartheorien Referenten: Regina Kaiser, Raphael Winkelmann Seminar:

Referat zum Thema: Exemplartheorien

Referenten: Regina Kaiser, Raphael WinkelmannSeminar: Perzeption für FortgeschritteneDozent: Uwe Reichel M.A.Datum: 23.12. 2008

Die Vokalidentifizierung● Vowel Confusion Matrix

Page 13: Referat zum Thema: Exemplartheorien - LMU Münchenreichelu/kurse/perz_fort/referate... · Referat zum Thema: Exemplartheorien Referenten: Regina Kaiser, Raphael Winkelmann Seminar:

Referat zum Thema: Exemplartheorien

Referenten: Regina Kaiser, Raphael WinkelmannSeminar: Perzeption für FortgeschritteneDozent: Uwe Reichel M.A.Datum: 23.12. 2008

Die Geschlechtsidentifizierung

Page 14: Referat zum Thema: Exemplartheorien - LMU Münchenreichelu/kurse/perz_fort/referate... · Referat zum Thema: Exemplartheorien Referenten: Regina Kaiser, Raphael Winkelmann Seminar:

Referat zum Thema: Exemplartheorien

Referenten: Regina Kaiser, Raphael WinkelmannSeminar: Perzeption für FortgeschritteneDozent: Uwe Reichel M.A.Datum: 23.12. 2008

Die Geschlechtsidentifizierung● Model Parameters and Errors

Page 15: Referat zum Thema: Exemplartheorien - LMU Münchenreichelu/kurse/perz_fort/referate... · Referat zum Thema: Exemplartheorien Referenten: Regina Kaiser, Raphael Winkelmann Seminar:

Referat zum Thema: Exemplartheorien

Referenten: Regina Kaiser, Raphael WinkelmannSeminar: Perzeption für FortgeschritteneDozent: Uwe Reichel M.A.Datum: 23.12. 2008

Erkennung synthetischer Stimuli

Page 16: Referat zum Thema: Exemplartheorien - LMU Münchenreichelu/kurse/perz_fort/referate... · Referat zum Thema: Exemplartheorien Referenten: Regina Kaiser, Raphael Winkelmann Seminar:

Referat zum Thema: Exemplartheorien

Referenten: Regina Kaiser, Raphael WinkelmannSeminar: Perzeption für FortgeschritteneDozent: Uwe Reichel M.A.Datum: 23.12. 2008

Erkennung synthetischer Stimuli● Erzeugung eines hood/hud-Kontinuums mit

folgenden Formantwerten (einmal mit F0=120 Hz und einmal mit F0=240 Hz) :

Page 17: Referat zum Thema: Exemplartheorien - LMU Münchenreichelu/kurse/perz_fort/referate... · Referat zum Thema: Exemplartheorien Referenten: Regina Kaiser, Raphael Winkelmann Seminar:

Referat zum Thema: Exemplartheorien

Referenten: Regina Kaiser, Raphael WinkelmannSeminar: Perzeption für FortgeschritteneDozent: Uwe Reichel M.A.Datum: 23.12. 2008

Erkennung synthetischer Stimuli● Verwendung derselben, im

Vokalidentifizierungsprozess ermittelten, Gewichte und Sensitivitätsparameter

● Um mit Hörer-Identifikationstest vergleichbare Ergebnisse zu ermitteln wurde die Wahrscheinlichkeit, dass ein Token als hood identifiziert wird, mit der Ähnlichkeit des Tokens zur hood Kategorie geteilt durch die Summe der Ähnlichkeiten der hood und hud Kategorien, verglichen.

Page 18: Referat zum Thema: Exemplartheorien - LMU Münchenreichelu/kurse/perz_fort/referate... · Referat zum Thema: Exemplartheorien Referenten: Regina Kaiser, Raphael Winkelmann Seminar:

Referat zum Thema: Exemplartheorien

Referenten: Regina Kaiser, Raphael WinkelmannSeminar: Perzeption für FortgeschritteneDozent: Uwe Reichel M.A.Datum: 23.12. 2008

Erkennung synthetischer Stimuli

Page 19: Referat zum Thema: Exemplartheorien - LMU Münchenreichelu/kurse/perz_fort/referate... · Referat zum Thema: Exemplartheorien Referenten: Regina Kaiser, Raphael Winkelmann Seminar:

Referat zum Thema: Exemplartheorien

Referenten: Regina Kaiser, Raphael WinkelmannSeminar: Perzeption für FortgeschritteneDozent: Uwe Reichel M.A.Datum: 23.12. 2008

Erkennung synthetischer Stimuli

Grenzen können durch die Base Activation manipuliert werden

Page 20: Referat zum Thema: Exemplartheorien - LMU Münchenreichelu/kurse/perz_fort/referate... · Referat zum Thema: Exemplartheorien Referenten: Regina Kaiser, Raphael Winkelmann Seminar:

Referat zum Thema: Exemplartheorien

Referenten: Regina Kaiser, Raphael WinkelmannSeminar: Perzeption für FortgeschritteneDozent: Uwe Reichel M.A.Datum: 23.12. 2008

Simulation des „Presentation Type“ Effekts

Page 21: Referat zum Thema: Exemplartheorien - LMU Münchenreichelu/kurse/perz_fort/referate... · Referat zum Thema: Exemplartheorien Referenten: Regina Kaiser, Raphael Winkelmann Seminar:

Referat zum Thema: Exemplartheorien

Referenten: Regina Kaiser, Raphael WinkelmannSeminar: Perzeption für FortgeschritteneDozent: Uwe Reichel M.A.Datum: 23.12. 2008

Simulation des „Presentation Type“ Effekts

● Die Gewichtung der F0 wird in einem Sprecher-isoliertem-Setting wesentlich geringer ausfallen als bei einem nicht isoliertem

● Getrennte Ermittlung der Gewichte eines isolierten- und unisolierten Settings an Hand des simulated annealing Algorithmuses

Page 22: Referat zum Thema: Exemplartheorien - LMU Münchenreichelu/kurse/perz_fort/referate... · Referat zum Thema: Exemplartheorien Referenten: Regina Kaiser, Raphael Winkelmann Seminar:

Referat zum Thema: Exemplartheorien

Referenten: Regina Kaiser, Raphael WinkelmannSeminar: Perzeption für FortgeschritteneDozent: Uwe Reichel M.A.Datum: 23.12. 2008

Simulation des „Presentation Type“ Effekts

Page 23: Referat zum Thema: Exemplartheorien - LMU Münchenreichelu/kurse/perz_fort/referate... · Referat zum Thema: Exemplartheorien Referenten: Regina Kaiser, Raphael Winkelmann Seminar:

Referat zum Thema: Exemplartheorien

Referenten: Regina Kaiser, Raphael WinkelmannSeminar: Perzeption für FortgeschritteneDozent: Uwe Reichel M.A.Datum: 23.12. 2008

Simulation des „Presentation Type“ Effekts

Page 24: Referat zum Thema: Exemplartheorien - LMU Münchenreichelu/kurse/perz_fort/referate... · Referat zum Thema: Exemplartheorien Referenten: Regina Kaiser, Raphael Winkelmann Seminar:

Referat zum Thema: Exemplartheorien

Referenten: Regina Kaiser, Raphael WinkelmannSeminar: Perzeption für FortgeschritteneDozent: Uwe Reichel M.A.Datum: 23.12. 2008

Vielen Dank für Eure Aufmerksamkeit

Quellen:- Johnson Keith. Speech Perception without Speaker Normalization. An Exemplar

Model. In Keith Johnson and John W. Mullennix, editors, Talker Variability in Speech Processing, pages 145 – 166. Academic Press, San Diego, 1997.

- http://en.wikipedia.org/wiki/Simulated_annealing (letzter Zugriff: 21.12.2008 20:00)