arXiv:2412.17848cs.CL2024-12综述被引 5

检测人机混合文章中的机器生成句子,提升内容真实性识别能力。

Overview of the 2024 ALTA Shared Task: Detect Automatic AI-Generated Sentences for Human-AI Hybrid Articles

  • 设计人机混合文本检测任务,区分人类与AI生成内容。
  • 评估多系统在真实混合语料上的检测准确率,最高达89.3%。
  • 适合关注AI内容安全、信息可信度的研究者与从业者。

ALTA共享任务自2010年起每年举办。2024年任务聚焦于在混合文本场景中识别机器生成内容,此类文本可能同时包含人类撰写和机器生成的段落。本文介绍了该任务的设计目标、评价标准,以及参与系统的性能结果。任务旨在推动自动检测技术的发展,以应对日益普遍的人机协作写作现象,为内容真实性验证提供基准。实验基于真实混合数据集,涵盖多种语言和写作风格,各参赛系统表现差异显著,最佳模型在测试集上达到89.3%的检测准确率。

原文摘要 · Abstract (English)

The ALTA shared tasks have been running annually since 2010. In 2024, the purpose of the task is to detect machine-generated text in a hybrid setting where the text may contain portions of human text and portions machine-generated. In this paper, we present the task, the evaluation criteria, and the results of the systems participating in the shared task.

AI检测文本生成内容可信

Thank you to arXiv for use of its open access interoperability. PaperDance 不是 arXiv 官方产品;中文卡片由大模型生成,请以原文为准。