在2026年的ACL会议上,阿里巴巴的研究团队凭借其在Deep Research Agent领域的杰出研究成果,从全球数万篇论文中脱颖,赢得了最佳资源论文奖,成为中国唯一获此殊荣的公司。该篇论文深刻分析了当前Agent在处理复杂规则推理任务时所面临的挑战,并提出了全新的专家Agent评测基准,为大型模型在实际应用中的可靠性提升指明了新方向。
这项研究的意义在于,它针对跨境电商等场景中的精准分类任务,提出了一种新的智能体基准HSCodeComp。在这一基准下,Agent需要像经验丰富的关务专家一样,精准地将商品属性与严格的关税归类规则对齐,确保商品能够被正确分类。通过对14个主流大模型和9个先进Agent框架进行全面的评测,结果显示,即便是表现最佳的Agent系统,准确率也仅为约45%,而人类专家的准确率则高达95%。
此外,研究还揭示了Agent系统存在的缺陷,包括推理链过长、领域知识不足和推理幻觉,这些发现为Agent架构的优化提供了明确的指导。基于这些研究成果,阿里巴巴已开发了以Qwen基座为核心的Agent框架,并在HSCodeComp基准上取得了65.0%的高准确率,位居AI系统之首。
ACL评审委员会对阿里巴巴的研究给予了高度评价,认为该基准针对Agent应用的关键挑战——对严格层级化自然语言规则的遵循能力,提供了极具说服力的研究动机和严谨的评测流程。目前,HSCodeComp基准的数据集与评测代码已在Hugging Face和GitHub上开源,以期推动学术界和工业界共同探索,助力Agent技术迈向真正的“专家级”。
免责声明:本文内容仅供参考,不构成投资建议。投资有风险,操作需谨慎。
ebc集团总部位于英国伦敦,是由拥有逾三十年行业经验的国际金融精英团队领航的跨国金融企业。我们在东京、新加坡、香港等多地设有分支机构,EBC外汇平台为您提供全球领先的在线外汇与差价合约交易服务,以稳健的官方风范赢得全球赞誉。
本站内容仅供参考,不构成投资建议