提出一套基于骨骼动作的手语评估方法，可量化评价手语翻译质量。
Meaningful Pose-Based Sign Language Evaluation
- 融合关键点距离、嵌入向量和回译三种评估方式
- 在多语言手语中验证了不同指标的优劣与适用场景
- 开源工具包助力手语生成系统开发与评测
我们对以人体骨骼关键点形式呈现的手语表达进行了全面评估研究。涵盖基于关键点距离、嵌入向量以及回译的评估指标。通过自动元评估中的逐句检索任务及跨手语类型的文字到动作翻译的人类相关性研究，揭示了各类指标在不同场景下的权衡关系。研究成果与开源的姿势评估工具包为手语翻译或生成系统的开发与评估提供了实用且可复现的方案。
原文摘要 · Abstract (English)
We present a comprehensive study on meaningfully evaluating sign language utterances in the form of human skeletal poses. The study covers keypoint distance-based, embedding-based, and back-translation-based metrics. We show tradeoffs between different metrics in different scenarios through automatic meta-evaluation of sign-level retrieval and a human correlation study of text-to-pose translation across different sign languages. Our findings and the open-source pose-evaluation toolkit provide a practical and reproducible way of developing and evaluating sign language translation or generation systems.
Thank you to arXiv for use of its open access interoperability. PaperDance 不是 arXiv 官方产品；中文卡片由大模型生成，请以原文为准。