利用AI+VR技术打造沉浸式的立体化学习体验

通常学习一门语言的最好方法是让自己沉浸在人们说这种语言的环境中。不断的接触，加上交流的压力，可以帮助你快速地掌握和练习新词汇，但并不是每个人都有机会在国外生活或学习。

日前，来自美国仁斯利尔理工大学和IBM研究院的研究人员为学习中文的学生提供了另一种选择：在一个360度的虚拟环境，可以将他们传送到北京繁忙的街道或拥挤的中餐馆。学生们可以与街头小贩讨价还价或点餐，环境中配备了不同的人工智能功能，可以实时响应他们。

该项目的灵感来自仁斯利尔理工大学的两名教师，他们经常使用角色扮演游戏来帮助学生学习中文。与此同时，在过去的几年里，一些研究发现，互动学习环境可以提高语言理解和记忆。2018年发表的一项研究还发现，在3D虚拟环境中学习日语，会让学生更有可能在模拟中偶然遇到的词汇。在这些想法的基础上，教授们与IBM研究院达成了合作，探索他们能否为自己的学生复制这一模式。

除了用数字投影环绕学生之外，虚拟环境中还使用了几种类型的传感器来适应学生的言语和动作。参与者佩戴的麦克风将他们的声音直接输入语音识别算法。当他们指向不同的对象或走向不同的虚拟代理时，摄像机会跟踪他们的动作和手势。例如，如果一个学生指向餐厅场景中的一个菜，并询问它是什么，虚拟代理可以用名称和描述进行响应。叙事性生成技术还允许每个虚拟代理使用维基百科上的知识，为即兴提问构建更复杂的答案。

随着人工智能技术的发展，该技术正被越来越多应用到教育领域，可以预见，未来的教学场景将不再仅限于简单的文本、图像、音视频等，沉浸式的立体化学习体验或将成为趋势。