蚂蚁集团×浙江大学提出 TRACE:让 AI 在流式对话中按需推理、读懂情绪
蚂蚁集团与浙江大学提出面向流式视频情绪理解的 TRACE 框架,通过跟踪模型预测轨迹评估判断可靠性,并按需引入多模态上下文重判。团队同时构建流式评测数据集 StreamMER,在 StreamMER 上将仅在线音频判断的准确率从 59.87% 提升至 69.47%,同时避免 44.42% 的上下文重判调用。
蚂蚁集团与浙江大学提出面向流式视频情绪理解的 TRACE 框架,通过跟踪模型预测轨迹评估判断可靠性,并按需引入多模态上下文重判。团队同时构建流式评测数据集 StreamMER,在 StreamMER 上将仅在线音频判断的准确率从 59.87% 提升至 69.47%,同时避免 44.42% 的上下文重判调用。
OpenAI 深入探讨了其文本转语音模型 Voice Engine 背后的技术,并进一步阐述了该模型的工作原理。此外,OpenAI 还分享了相关的安全研究成果。