0
Virtual Human Toolkit
ICT虚拟人类工具包是模块,工具和库的集合,旨在帮助和支持研究人员和开发人员创建虚拟人类对话角色。该工具包是一个持续不断,不断变化的创新系统,其基础是在南加州大学(USC)创新技术研究所(ICT)及其合作伙伴进行的基础研究的推动下。该工具包旨在与研究项目的专有或第三方软件轻松混合和匹配,提供了广泛接受的平台,可在此平台上构建新技术。我们希望,作为一个研究社区,我们可以进一步开发和探索虚拟人类研究和技术。ICT虚拟人工具包基于通用的模块化体系结构,使用户能够按原样使用所有模块,与专有组件耦合的一个或多个模块,或其他现有系统中的一个或多个模块。我们的技术强调自然语言互动,非语言行为和感知。其主要模块如下。有关体系结构,消息传递API和其他组件的概述,请参见文档。MultiSense:一种多模式传感框架,可作为集成和融合传感器技术并开发用于人类行为识别的概率模型的平台。MultiSense跟踪并分析用户的面部表情,身体姿势,声学特征,语言模式和高级行为描述符(例如,注意力,坐立不安)。它使用感知标记语言(PML)。NPCEditor:NPCEditor的核心是统计文本分类算法,该算法根据用户的话语选择字符的响应。角色设计者应指定一组响应和一组示例话语,它们应通过提供的创作工具产生每个响应。NPCEditor还包含一个对话管理器,用于指定如何使用分类器结果。