16 lines
1.2 KiB
Markdown
16 lines
1.2 KiB
Markdown
# Predicting Turn-Taking and Backchannel in Human-Machine Conversations Using Linguistic, Acoustic, and Visual Signals
|
||
|
||
- 会议：ACL 2025
|
||
- 阅读深度：摘要级筛选
|
||
- 官方链接：https://aclanthology.org/2025.acl-long.743/
|
||
|
||
## 摘要（中文转述）
|
||
|
||
该工作构建超过 210 小时的 MM-F2F 对话数据，研究联合语言、声学和视觉线索的轮次转换及 backchannel 预测。框架强调模态间关系，并支持不同输入模态组合，论文报告其在两个任务上的改进。这里按摘要级证据记录，不把这些结果直接外推到第一视角多人在线预测。
|
||
|
||
## 与当前项目的关系
|
||
|
||
它支持把笼统的 wearer/others 活动进一步拆成 transition 子类型进行诊断。即使训练标签暂时不变，也可以从目标序列派生 onset、offset、overlap onset 和短促 backchannel-like 片段，分别报告性能，判断模型真正改善了哪种动态。
|
||
|
||
补充边界：短促语音不必然是 backchannel；仅凭三路活动标签不能得到可靠的互动功能标签。若要报告真正的 backchannel 或说话对象识别，需要相应标注和协议，不能把活动时长规则当作语义真值。
|