Slimme virtuele klas leert Mandarijn alsof hij in China

Deze nieuwe 360-graden omgeving repliceert de drukke straten en restaurants van Beijing en bevat slimme virtuele assistenten voor studenten om mee te communiceren alsof ze in het land zijn. Voorlopige resultaten suggereren dat de installatie het begrip en het leren verbetert

De beste manier om een taal te leren is meestal om jezelf onder te dompelen in een omgeving waar mensen het spreken. Constante blootstelling, samen met druk om te communiceren, helpt je snel te leren en de nieuwe woordenschat te oefenen. Maar niet iedereen heeft de mogelijkheid om in het buitenland te wonen of te studeren.

In een nieuwe samenwerking met IBM Research heeft het Rensselaer Polytechnic Institute (RPI) zojuist een alternatief geïntroduceerd voor zijn Chinese studenten: een 360-graden virtuele omgeving die hen teleporteert naar de drukke straten van Beijing, China of naar een druk Chinees restaurant. Studenten kunnen onderhandelen met straatverkopers of eten bestellen. De omgeving is uitgerust met verschillende kunstmatige intelligentie (AI) mogelijkheden om in real time te reageren. Hoewel dit type klaslokaal grotendeels experimenteel is, zal deze zomer voor het eerst in een cursus van zes weken worden gebruikt om studiepunten te verdienen.

Het project werd geboren uit twee RPI leraren die role-playing games gebruikt om hun studenten te helpen chinees te leren. Tegelijkertijd hebben de afgelopen jaren verschillende studies aangetoond dat interactieve leeromgevingen het taalbegrip en -retentie kunnen vergroten. Een studie gepubliceerd in 2018 wees ook uit dat het bestuderen van Japans in een virtuele 3D-omgeving de kansen van studenten vergrootte om de woordenschat te leren die ze terloops vonden door middel van simulatie. Op basis van deze ideeën werkten docenten samen met IBM Research om te onderzoeken of ze deze voordelen voor hun eigen studenten konden repliceren.

Naast het omringen van studenten met digitale projecties van een scène, maakt de omgeving gebruik van verschillende soorten sensoren om zich aan te passen aan de woorden en acties van studenten. De microfoons van de deelnemers voeren hun audio rechtstreeks in in spraakherkenningsalgoritmen. Camera’s volgen hun bewegingen en gebaren om op te nemen wanneer ze naar meerdere objecten wijzen of verschillende virtuele agents benaderen. Als een student wijst naar een bord met voedsel en vraagt wat het is, kan een virtuele agent u antwoorden met de naam en beschrijving van het gerecht. Verhalende generatie technologie kan ook elke agent om meer geavanceerde antwoorden op vragen te bouwen via Wikipedia on the fly. (Echter, gesprek onderwerpen zijn nog steeds enigszins beperkt tot een taak van de student probeert te voltooien.)

 

Geef een reactie

Het e-mailadres wordt niet gepubliceerd. Vereiste velden zijn gemarkeerd met *