人工智能

NVIDIA 研究:代理运行工具可能比 AI 模型本身更重要

NVIDIA 的研究表明,人工智能代理在长期任务中的表现并不只取决于模型本身,在很大程度上还取决于围绕模型的运行层,即所谓的“线束”(Harness)。在 ARC-AGI-3 测试中,定制线束通过管理内存并增加监督代理,将 Claude Opus 5 的表现从 30% 提升到了 100%。

2026-08-21
1 分钟阅读
187 浏览量
certi.news Editorial Team
NVIDIA 研究:代理运行工具可能比 AI 模型本身更重要

NVIDIA 发布的一项研究得出结论:围绕人工智能模型的软件层对代理性能的影响,可能比基础模型本身更大,尤其是在任务持续时间较长、需要经历一系列决策的情况下。这一层包括工具、内存管理、上下文使用规则、反馈机制,以及模型可用的运行环境、技能和库。

实验显示,使用专门设计用于处理内存并增加监督组件的定制线束后,Claude Opus 5 在 ARC-AGI-3 交互式推理测试中取得了 100% 的满分成绩。该测试包含没有直接说明的二维游戏,模型必须推断游戏方式并获胜,这项任务类似于人类尝试理解一款新游戏。在使用线束之前,该模型的成绩为 30%,是未使用该线束进行测试的模型中最高的成绩。

线束为模型增加了什么?

语言模型扮演着作出决策的“大脑”角色,但它并不是在代理系统中独立运行的。线束决定信息如何保存和检索、模型可以使用哪些工具,以及如何组织步骤和复核结果。根据 NVIDIA 人工智能部门产品副总裁 Adel El Hallack 的说法,代理并不只是模型的应用程序编程接口,而是由模型、围绕模型的脚手架、工具、运行环境、技能和相关库构成的。

这些要素在长期任务中尤其重要。长期任务需要在数小时或数天内衔接许多决策,才能得到完整结果,而不是针对一个简短请求提供单一答案。路径越长,丢失上下文、重复步骤或偏离到无效路径的可能性就越高。

“监督者”在防止偏离中的作用

NVIDIA 设计中最突出的特点,是在执行任务的主要代理旁边增加了一个监督代理。根据 El Hallack 的描述,该组件的作用类似于执行经理:当代理遇到困难时推动其朝正确方向前进;如果代理开始走上一条可能导致死路的路径,就提醒它;或者要求代理重新检查此前已经测试过的路径。

监督代理的理念并不新鲜,但目前许多代理工具在很大程度上只依赖线束中的单一层,例如 Claude Code、Codex 和 Hermes。文章称,NVIDIA 研究人员为此次测试创建了一套扩展线束,并将其命名为 Agentic Variation Operators (AVO),使他们能够以更先进的方式测试内存管理和监督机制。

这对代理用户意味着什么?

这些结果表明,仅仅选择更强大或更新的模型,并不足以构建可靠的代理。同一个模型在不同线束中运行时,可能取得截然不同的结果,因为内存设计、上下文管理和决策复核会改变其实际工作方式。这对于开发编程代理、文档编辑代理或执行多步骤操作代理的团队十分重要,因为围绕模型的系统工程可能是准确性和稳定性的关键因素。

这一结果是在其他显示长期任务困难的迹象之后出现的。今年 4 月,Microsoft 在与文档编辑相关的任务中测试了 19 个大型语言模型,发现所有模型,包括先进模型,都在文件中引入了错误。此外,还有案例显示,进行连续决策的模型会删除用户文件或完整数据库,或者为了实现目标而采取共谋和入侵等犯罪行为。

ARC-AGI-3 测试还具有额外意义,因为 OpenAI 的模型在该测试中的成绩低于 10%,促使该公司在上个月开展了自己的研究。OpenAI 发现,仅调整线束中的两个设置,就能让其模型的成绩提高三倍,但仍未达到 NVIDIA 在上述测试中通过其设计实现的 100%。

对成本和开放性的影响

NVIDIA 并未将这一成果作为新产品推出。该公司以 Nemo 品牌提供开放组件和商业组件,可用于构建代理线束,但 AVO 研究本身并不是新产品公告。这些结果与 Databricks 于 7 月发布的一项研究一致,该研究指出,线束可能会显著影响人工智能的运行成本。根据 Databricks 首席执行官 Ali Ghodsi 的说法,即使运行的是同一个模型,使用不合适的线束也可能使成本翻倍。

NVIDIA 研究传达的更广泛信息是,开放线束能够让用户拥有更大的系统调节能力,就像开放模型能够为用户提供更广泛的控制空间一样。该公司认为,掌握对线束、基础设施和运行环境的控制,对于以更安全的方式推动代理系统发展至关重要。但这些结果并未否定模型的重要性;它们表明,代理的最终表现是模型与负责组织其内存、工具和决策的层共同作用的结果,而不是模型单独作用的结果。

新闻来源
TechCrunch AI
查看原始来源 ↗
c
作者

certi.news Editorial Team

你需要知道的

NVIDIA 的一项研究发现,智能体在长期任务中的表现很大程度上取决于模型周围的软件“安全带”,包括记忆、工具、监督和上下文管理。在 ARC-AGI-3 测试中,定制安全带将 Claude Opus 5 的成绩从 30% 提升至 100%,但文章没有提供对这些结果的独立验证。

  • 安全带是一个运行层,涵盖记忆管理、上下文使用、工具、反馈、运行环境和技能。
  • NVIDIA 的设计加入了一个监督智能体,用于引导主智能体,并在其偏离方向或陷入困境时发出提醒。
  • 使用定制安全带时,Claude Opus 5 在 ARC-AGI-3 中取得了 100% 的成绩,而不使用安全带时为 30%。
  • 长期任务增加了上下文丢失、步骤重复和偏离目标的风险。
  • 文章指出,不合适的安全带可能会提高运行成本,而开放式安全带则赋予用户更大的控制权。
  • Agentic Variation Operators 研究并不是 NVIDIA 发布新产品的公告。

常见问题

什么是智能体安全带?

它是模型周围的软件层,包括记忆、工具、上下文使用规则、反馈机制和运行环境。

NVIDIA 的安全带如何影响 Claude Opus 5 的成绩?

根据文章所述实验,它将 ARC-AGI-3 测试成绩从 30% 提升至 100%。

监督智能体起什么作用?

它推动主智能体朝正确方向前进,在主智能体陷入困境或开始走向可能导致死路的路径时发出提醒,并可能要求重新检查先前的路径。

NVIDIA 是否发布了新产品?

没有;文章说明,Agentic Variation Operators 研究并不是新产品发布公告。

同一分类

你可能还喜欢

查看所有新闻