跳过主要内容
研究和创新

研究人员旨在通过语音和情感检测来改进教育软件

图片来自水晶岛游戏。图片来源:北卡州立大学IntelliMedia集团。

立即发布

克里斯蒂波伊尔博士 919.513.0876
詹姆斯·莱斯特 919.515.7534

北卡罗来纳州立大学(North Carolina State University)的研究人员从美国国家科学基金会(National Science Foundation)获得了120万美元的拨款,用于改进教育软件,使其能够评估面部表情、肢体语言、讲话和其他线索,以便更好地对学生在学习过程中的情绪状态做出反应。

“教育软件可能是一个有价值的工具,但到目前为止,这些工具没有考虑到学生的情绪或影响,”北卡罗来纳州立大学计算机科学助理教授、该基金的共同主要研究者(PI) Kristy Boyer博士说。“我们计划开发和测试将情感和对话整合到教育游戏和其他软件中的技术和技术。”

最终目标是开发一种软件工具,通过评估学生的语言和非语言线索,并使用这些信息来定制程序如何对每个学生作出反应,从而支持学习过程。

研究人员的第一步将是修改现有的游戏《水晶岛》(Crystal Island),使其融入口语对话,并影响追踪眼球运动、面部表情和姿势的传感器。然后,研究人员将在中学使用该程序来收集关于学生如何与该程序互动的初步数据,包括自然语言(学生说了什么)和非语言线索(学生做了什么)。

“这些初步数据将作为我们所做的所有后续建模的基础,以及我们如何开发游戏应对学生的技术,”北卡罗来纳州立大学计算机科学教授、该基金的PI James Lester博士说。

这项资助为期三年,专门用于中学科学教育,但研究结果预计将广泛适用于其他学科和年龄组。该项目的合作伙伴包括北卡罗来纳州计算机科学系高级研究科学家Brad Mott博士和北卡罗来纳州科学、技术、工程和数学教育教授Eric Wiebe博士。

希普曼-

留下一个响应

您的电子邮件地址将不会被公布。所有字段都是必需的。