当前位置: 首页 > 资讯

用VR学习外语,进行虚拟场景生动对话,你还会学不好英语?

       2017-09-15

罗马尼亚公司ATi Studio 研发的 Mondly VR 是一款新的语言学习软件,具有语音识别功能,是一款把聊天机器人应用到语言学习中的app。目前可以在谷歌的Daydream 平台上使用。


Mondly联合创始人Alexandru Iliescu说:“流利使用语言不在于你知道多少单词,而是如何使用单词进行沟通。Mondly的目标是使用新技术推动语言学习,帮我们的用户成为更好的沟通者,获得更丰富的人生经历。”




Mondly VR 将学生从枯燥的书本和卡片中,转移到一个更为丰富可以交流和互动的沉浸式环境中,这样使得学生们从接触新语言的第一天就开始爱上它。


戴上 VR 设备之后,你就可以和虚拟的人物在一个场景中对话。会话的语句是通过云端来推送的,它具备机器学习能力,可以给你一个正确的发音演示,上下文提示,或者建议的短语,随时都会有翻译的文本显示。


据悉,Mondly VR 可以教授 30 种不同的语言,包括英语、日语、汉语和西班牙语,甚至芬兰语、俄语和阿拉伯语。




测试者通过三星的 Gear VR 设备测试了一下这个功能。测试结果表明,系统对西班牙语的语音识别功能很出色,特别是在测试者自己的西班牙语口音非常糟糕的情况下还能有不错表现。


随后,测试者又更换了日语来进行测试。不过,Mondly VR在对日语口音的识别上还是存在一些问题。但是测试者也提到,语音识别本身是很棒的。


测试者还说,因为音节数量有限,日语也成为了测试计算机语音识别的理想案例。




不过目前 Mondly VR 似乎无法解析其完美转录的语言。你总能看到这个应用程序是如何在屏幕中央解释你的发音的。通过使用文本读出器,我们可以确认语音识别软件正确地听到了我们的语音。


但是出于某种原因,无论我们做了多少次尝试,这款应用都不会接受输入是有效的。测试者尝试了 十几次,每次都耐心地向谈话对象解释我们来自哪里,它依然回答说:“我不明白”,于是测试者放弃了。


这个问题也许来源于软件的语音识别技术。比如说日语有三种书写系统,如果语法分析器使用错误的系统编写一个音节,那么整个课程就不能再继续运行下去了。




有了 VR 技术的帮助,你在面对一些生活场景时使用语言将变得更加从容。而其挑战在于,如何让云端的服务器在语言识别和语音交互能力上更加先进,以此提升用户的学习速度。


需要指出的是,目前该应用不支持中文,但Mondly 开启了语言学习的新大门。这款教育VR应用程序目前可在Oculus商店和三星Gear VR商店购买。而中投顾问产业研究中心预测,中国在线语言教育市场将在2020年增长至590亿元。TechNavios则预测美国市场在未来五年将保持年均8.6%的增速。


您希望通过VR学习外语吗?