Uitspraak trainen met een computer: is dat mogelijk? Ambra Neri Catia Cucchiarini, Helmer Strik Radboud Universiteit Nijmegen, CLST.

Presentatie over: "Uitspraak trainen met een computer: is dat mogelijk? Ambra Neri Catia Cucchiarini, Helmer Strik Radboud Universiteit Nijmegen, CLST."— Transcript van de presentatie:

1

2 Uitspraak trainen met een computer: is dat mogelijk? Ambra Neri Catia Cucchiarini, Helmer Strik Radboud Universiteit Nijmegen, CLST

3 Helmer StrikDe dag vd Fonetiek, Utrecht, 22-12-052 Inleiding Context: CAPT: Computer Assisted Pronunciation Training Automatische feedback op uitspraak(-fouten) Wat is het effect op de uitspraak? Buitenlanders die Nederlands leren (NT2).

4 Helmer StrikDe dag vd Fonetiek, Utrecht, 22-12-053 Inleiding Doelstellingen: Bepalen wat belangrijke uitspraakfouten zijn: 11 doelklanken Automatische detectie van uitspraakfouten. Geven van feedback over uitspraakfouten. Bestuderen van de effecten van deze feedback op het leerproces. Opstellen van richtlijnen voor het gebruiken van spraak-technologie en -analyse in computerondersteund taalonderwijs (COTO).

5 Helmer StrikDe dag vd Fonetiek, Utrecht, 22-12-054 Dutch CAPT systeem Overzicht Het programma bevat 4 lessen die ieder bestaan uit: 1. Video: soap-opera met Nederlandse acteurs (uit Nieuwe Buren, een communicatieve multimediale leermethode) 2. 3 verschillende soorten oefeningen:  22 dialogen: rol spelen  46 oefeningen: vragen beantwoorden  38 oefeningen: woorden uitspreken

6 Helmer StrikDe dag vd Fonetiek, Utrecht, 22-12-055 Video: een voorbeeld

7 Helmer StrikDe dag vd Fonetiek, Utrecht, 22-12-056

8 Helmer StrikDe dag vd Fonetiek, Utrecht, 22-12-057

9 Helmer StrikDe dag vd Fonetiek, Utrecht, 22-12-058

10 Helmer StrikDe dag vd Fonetiek, Utrecht, 22-12-059

11 Helmer StrikDe dag vd Fonetiek, Utrecht, 22-12-0510

12 Helmer StrikDe dag vd Fonetiek, Utrecht, 22-12-0511 Proefpersonen Alle proefpersonen volgden ‘reguliere’ lessen. 3 groepen, Exp. + 2 controle groepen: Exp. - 15 pp.- Dutch CAPT systeem wel feedback over uitspraak NiBu - 10 pp.- Nieuwe Buren geen feedback over uitspraak Geen - 5 pp.- Niets extra’s [geen feedback over uitspraak]

13 Helmer StrikDe dag vd Fonetiek, Utrecht, 22-12-0512 Evaluatie Proefpersonen: Vragenlijsten - resultaten: positief Sets van 5 fonetisch rijke zinnen inspreken  Pre (set 1) – voor het exp.  Post (set 1) – na het exp.  Gen (set 2) – na het exp. 6 experts: Beoordeling sets van 5 fonetisch rijke zinnen Segmentele kwaliteit Hoge agreement

14 Helmer StrikDe dag vd Fonetiek, Utrecht, 22-12-0513 Resultaten: scores 6 experts

15 Helmer StrikDe dag vd Fonetiek, Utrecht, 22-12-0514 Extra analyses Vervolgens zijn extra analyses uitgevoerd om meer inzicht te krijgen in de resultaten. O.a. tellen van het aantal gemaakte fouten Voor 11 doelklanken Voor andere klanken

16 Helmer StrikDe dag vd Fonetiek, Utrecht, 22-12-0515 Percentage fouten 0.00% 5.00% 10.00% 15.00% 20.00% 25.00% Exp.ControleExp.Controle 11 doelklankenandere klanken % errors (relative to type) pre-test post-test

17 Helmer StrikDe dag vd Fonetiek, Utrecht, 22-12-0516 Scores 6 experts Nadere analyse van de scores van de 6 experts. Correlaties - van expert scores met 0.88 - % foutenin klanken 0.67 - % fouten in 11 doelklanken 0.85 - % fouten in andere klanken In de fonetisch rijke zinnen: 18.5% : doelklanken 81.5% : andere klanken

18 Helmer StrikDe dag vd Fonetiek, Utrecht, 22-12-0517 Metadata Onevenwichtige verdeling van Arabische sprekers over de groepen: Geen in controle groepen (NiBu & Geen) Wel in Exp. groep  6 (40%) Arabisch (Ar)  9 (60%) Indo-Europees (IE)

19 Helmer StrikDe dag vd Fonetiek, Utrecht, 22-12-0518 Metadata

20 Helmer StrikDe dag vd Fonetiek, Utrecht, 22-12-0519 Conclusies Uitspraak trainen met een computer: is dat mogelijk? Antwoord: Ja! Automatisch gegenereerde feedback : Significant grotere reductie in aantal fouten voor de doelklanken

21 Helmer StrikDe dag vd Fonetiek, Utrecht, 22-12-0520 Meer informatie Voor meer informatie, zie //lands.let.ru.nl/projects/DutchCAPT.html //lands.let.ru.nl/staff/neri.php //lands.let.ru.nl/staff/catia.php //lands.let.ru.nl/staff/strik.php zap.to/helmer

22 Helmer StrikDe dag vd Fonetiek, Utrecht, 22-12-0521 Meer informatie Voor meer informatie, zie //lands.let.ru.nl/projects/DutchCAPT.html //lands.let.ru.nl/staff/neri.php //lands.let.ru.nl/staff/catia.php //lands.let.ru.nl/staff/strik.php zap.to/helmer