分享:

国外学中文有新招:一键“穿越”到北京街头!

 微信图片_20190718084903.jpg

▲图片来源:伦斯勒理工学院

“虚拟”语言环境

一般来说,学习语言的最佳方式就是让自己沉浸在相应的语言环境里,通过不断的曝光以及沟通的压力,可以帮助我们快速掌握并练习新的词汇。

不过显然,并不是每个人都有机会在国外生活或者学习。

最近,位于纽约的伦斯勒理工学院为他们的学生提供了一种新型学习模式——360度虚拟环境。

该学院和IBM研究院达成了新的合作,通过运用AI和VR技术,为学习中文的学生创建了一个虚拟的“语言环境”。

该技术会将它们传送到北京繁忙的街道或者拥挤的中餐馆,由于这项技术在不同场景中配备了AI功能,因此学生可以直接与街头小贩订购食物甚至讨价还价,系统都会自动给出回应。

微信图片_20190718084913.jpg

▲图片来源:伦斯勒理工学院

除了围绕学生对场景进行数字投影外,环境还使用几种类型的传感器来动态适应学生的言语和行为。

参与者佩戴的麦克风将其音频直接汇集进语音识别算法,当摄像机指向各种物体或走向不同的虚拟人物时,摄像机会跟踪它们的移动和手势。

例如,如果学生指向餐厅场景中的食物并询问它是什么,虚拟人物可以使用名称和描述进行响应。同时,场景运用的叙事生成技术还允许每个人物使用维基百科的知识给出更加详细的答案。

技术和前景

据研究人员介绍,这个虚拟环境运用的很多技术都是通过购买就能获得的,但是由于语言环境的复杂性,他们也为该项目专门开发了一些新的算法。

例如,普通话有五种音调,这对许多刚刚接触中文的学习者来说是一个挑战。有时候学生可能想说“卖”(卖mài),但最后却变成了“买”(买mǎi),它们传达的是两种截然不同的意思。

因此,研究人员创建了一种算法来分析学生发音中的音调,并将它们与母语人士进行比较,然后直接在环境中提供音频和视觉反馈。它允许学生向虚拟环境里的人物询问应该说些什么,然后立即开始练习新的词汇。

微信图片_20190718084919.jpg

▲图片来源:伦斯勒理工学院 

此外,研究人员“惊喜”地发现,虚拟环境提高了学生在语言学习中的参与度和乐趣,并帮助他们快速获得新词。

例如,在初次购买食物之前,学生没有被教导如何支付他们的食物,但通过观察他们的同伴并与虚拟任务交谈,许多学生获得了必要的词汇,更快掌握了新词。

如果该课程提供了改善学生学习成果的有力证据,它就可以扩展到其他语言的学习上。它甚至还可以在大学之外用于指导高管、培训政府工作人员,或者进行任何其他可能受益于情景模拟和角色扮演的活动。

负责该计划的IBM研究院认知和沉浸式系统实验室主任Hui Su表示,尽管他的团队目前仍处于了解其有效性的早期阶段,但是他相信这项计划将有助于研究人员了解认知和沉浸式环境如何影响学习,协作和感知。

随着5G的到来,AI和VR将更能发挥其优势,帮助虚拟教学环境更快得到普及。

在不久的将来,相信我们也能在英语课堂上“一键穿越”到美国了。

0人收藏
返回列表
本网站转载的所有的文章、图片、音频视频文件等资料的版权归版权所有人所有,本站采用的非本站原创文章及图片等内容无法一一联系确认版权者。如果本网所选内容的文章作者及编辑认为其作品不宜公开自由传播,或不应无偿使用,请及时通过电子邮件或电话通知我们,以迅速采取适当措施,避免给双方造成不必要的经济损失。

文章点评:

这里空空如也,期待你的发声

服务热线

0731-85305959

功能和特性

价格和优惠

获取内部资料

微信服务号

微信服务号