Uitspraak trainen met een computer:
is dat mogelijk?
Ambra Neri Catia Cucchiarini, Helmer StrikRadboud Universiteit Nijmegen, CLST
Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 2
InleidingInleiding
Context:CAPT: Computer Assisted Pronunciation TrainingAutomatische feedback op uitspraak(-fouten)Wat is het effect op de uitspraak?Buitenlanders die Nederlands leren (NT2).
Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 3
InleidingInleiding
Doelstellingen:Bepalen wat belangrijke uitspraakfouten zijn:11 doelklankenAutomatische detectie van uitspraakfouten.Geven van feedback over uitspraakfouten.Bestuderen van de effecten van deze feedback op het leerproces.Opstellen van richtlijnen voor het gebruiken van spraak-technologie en -analyse in computerondersteund taalonderwijs (COTO).
Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 4
Dutch CAPT systeemDutch CAPT systeemOverzichtOverzicht
Het programma bevat 4 lessen die ieder bestaan uit:
1. Video: soap-opera met Nederlandse acteurs (uit Nieuwe Buren, een communicatieve multimediale leermethode)
2. 3 verschillende soorten oefeningen: 22 dialogen: rol spelen 46 oefeningen: vragen beantwoorden 38 oefeningen: woorden uitspreken
Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 5
Video: een voorbeeldVideo: een voorbeeld
Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 6
Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 7
Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 8
Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 9
Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 10
Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 11
ProefpersonenProefpersonen
Alle proefpersonen volgden ‘reguliere’ lessen.
3 groepen, Exp. + 2 controle groepen:Exp. - 15 pp. - Dutch CAPT systeem
wel feedback over uitspraakNiBu - 10 pp. - Nieuwe Buren
geen feedback over uitspraakGeen - 5 pp. - Niets extra’s
[geen feedback over uitspraak]
Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 12
EvaluatieEvaluatie
Proefpersonen:Vragenlijsten - resultaten: positiefSets van 5 fonetisch rijke zinnen inspreken Pre (set 1) – voor het exp. Post (set 1) – na het exp. Gen (set 2) – na het exp.
6 experts:Beoordeling sets van 5 fonetisch rijke zinnenSegmentele kwaliteitHoge agreement
Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 13
Resultaten: scores 6 expertsResultaten: scores 6 experts
3,7
4,75,0
5,65,66,0
3,5
4,0
4,5
5,0
5,5
6,0
6,5
pre post
Exp
Geen
NiBu
Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 14
Extra analysesExtra analyses
Vervolgens zijn extra analyses uitgevoerd om meer inzicht te krijgen in de resultaten.
O.a. tellen van het aantal gemaakte foutenVoor 11 doelklankenVoor andere klanken
Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 15
Percentage foutenPercentage fouten
0.00%
5.00%
10.00%
15.00%
20.00%
25.00%
Exp. Controle Exp. Controle
11 doelklanken andere klanken
% errors (relative to type)
pre-test
post-test
Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 16
Scores 6 expertsScores 6 experts
Nadere analyse van de scores van de 6 experts.
Correlaties - van expert scores met0.88 - % fouten in klanken0.67 - % fouten in 11 doelklanken0.85 - % fouten in andere klanken
In de fonetisch rijke zinnen:18.5% : doelklanken81.5% : andere klanken
Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 17
MetadataMetadata
Onevenwichtige verdeling van Arabische sprekers over de groepen: Geen in controle groepen (NiBu & Geen)Wel in Exp. groep 6 (40%) Arabisch (Ar) 9 (60%) Indo-Europees (IE)
Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 18
MetadataMetadata
3,7
4,7
3,3
4,04,0
5,15,0
5,65,66,0
3,0
3,5
4,0
4,5
5,0
5,5
6,0
pre post
Exp
Exp_Ar
Exp_IE
Geen
NiBu
Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 19
ConclusiesConclusies
Uitspraak trainen met een computer:is dat mogelijk? Antwoord: Ja!
Automatisch gegenereerde feedback : Significant grotere reductie in aantal fouten voor de doelklanken
Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 20
Meer informatieMeer informatie
Voor meer informatie, zie
//lands.let.ru.nl/projects/DutchCAPT.html//lands.let.ru.nl/staff/neri.php//lands.let.ru.nl/staff/catia.php//lands.let.ru.nl/staff/strik.phpzap.to/helmer
Helmer Strik De dag vd Fonetiek, Utrecht, 22-12-05 21
Meer informatieMeer informatie
Voor meer informatie, zie
//lands.let.ru.nl/projects/DutchCAPT.html//lands.let.ru.nl/staff/neri.php//lands.let.ru.nl/staff/catia.php//lands.let.ru.nl/staff/strik.phpzap.to/helmer