SheepNav

AI 资讯

每日聚合最新人工智能动态

来源:Anthropic清除筛选 ×

arXiv:2606.13722v1 Announce Type: new Abstract: This paper introduces YeasierAgent, an application-building paradigm based on symbiotic agents, narrative worlds, and scene-aware interaction. It challenges the conventional device-coupled model of software by redefining applications as collaborative spaces among users, agents, and worlds. We present a system architecture that achieves two primary contributions: (1) enabling the rapid, cross-platform construction of agent-native applications by uti

Anthropic2个月前原文

近日,一篇 arXiv 论文《WorkBench Revisited: Workplace Agents Two Years On》重新审视了 2024 年推出的职场智能体基准测试 WorkBench,揭示了两年间 AI 智能体的巨大进步。数据显示,2024 年 3 月最佳智能体 GPT-4 仅能完成 43% 的任务,且 26% 的任务中会出现意外有害行为(如发错邮件);而到 2026 年 6 月,**Claude Opus 4.8** 以 **89%** 的任务完成率和仅 **2.5%** 的意外有害行为率大幅领先。 ### 能力与安全不再对立 论文指出,在 WorkBench 上,**能力与安全呈现正相关**,而非传统的权衡关系。即完成任务越多的模型,造成的意外损害反而越少。这一发现打破了“更强能力必然伴随更高风险”的固有认知,为开发更可靠的 AI 智能体提供了积极信号。 ### 错误尚未根除 尽管进步显著,前沿模型仍会犯一些**基本错误**,例如向错误收件人发送邮件,且这类错误有时会导致不可逆的后果。这表明,虽然多数错误类型已被消除,但安全护栏仍需进一步完善。 ### 开源模型崛起,成本大幅降低 论文特别强调了**开源权重模型**的崛起。它们以极低的成本达到了此前仅专有模型才能实现的性能水平,而前沿模型的成本则保持相对稳定。这一趋势有望推动 AI 智能体在更广泛场景中的落地应用。 ### 基准测试更新 研究团队同步发布了 WorkBench 的更新版本,包含数据与代码质量改进、最新模型得分,以及自 2024 年以来的智能体进展分析。 总体而言,WorkBench 的两年回顾展示了 AI 智能体在职场任务中的显著进步,尤其是在安全性与能力的协同提升方面。然而,基本错误的持续存在提醒我们,通往完全可靠的自主智能体仍有很长路要走。

Anthropic2个月前原文

## 泥孩子谜题:一个关于知识与无知的经典,它的起源竟跨越两个世纪? 在人工智能与认知逻辑领域,有一个流传甚广的谜题——**泥孩子谜题**(Muddy Children Puzzle)。它表面上是一个简单的逻辑游戏:一群孩子在外玩耍后,父亲宣布“至少有一个孩子额头上有泥”,然后反复询问“谁知道自己的额头有泥?”随着无人回答,最终所有泥孩子都推理出自己脏了。这个谜题精妙地展示了**共同知识**(common knowledge)与**公共宣告**(public announcement)如何改变群体的认知状态,成为认知逻辑发展的关键基石。 但这样一个影响深远的谜题,究竟是谁第一个提出的?答案竟是一片模糊。 ## 起源:一场跨越两百年的“寻踪” 最近,一篇由 Hans van Ditmarsch 撰写的论文《History of the Muddy Children Puzzle》(arXiv:2606.13703)系统梳理了该谜题的起源。作者追踪了**过去两个世纪**的逻辑与文学出版物,发现这个谜题并非由某一位学者在20世纪凭空创造,而是经历了漫长的演变。 早期版本可以追溯到**19世纪的逻辑谜题集**,其中涉及“帽子谜题”或“数字推理”的变体。例如,一个经典的“蓝眼睛与棕眼睛”逻辑谜题本质上与泥孩子谜题同构。论文指出,**“泥孩子”这个具体名称的首次出现可能是在20世纪中叶**,但核心的“知识迭代”逻辑结构早已存在。 ## 变体与创新:从数字到自指 泥孩子谜题的魅力在于其可扩展性。论文列举了多种变体: - **数字版**:孩子们知道泥点的数量,通过计数推理出自己是否脏了。 - **彩色帽子版**:参与者戴不同颜色的帽子,需要推断自己帽子的颜色。 - **自指帽子谜题**:论文作者还提出了一种全新的变体,其中涉及**自我指涉**(self-reference),进一步挑战推理的边界。 这些变体不仅在逻辑学中被用作教学工具,在**多智能体系统**(multi-agent systems)和**分布式人工智能**中也具有实际意义——它们模拟了智能体如何通过观察他人的反应来更新自己的信念。 ## 为什么AI社区应该关注? 对于AI研究者来说,泥孩子谜题不仅仅是一个智力游戏。它直接关联到**认知逻辑**(epistemic logic)的核心概念,而认知逻辑正是构建**推理型AI**(如自动驾驶、机器人协作)的理论基础。当一个AI系统需要感知其他智能体的知识状态时,它实际上就在解决一个“泥孩子”类问题。 论文的发布也提醒我们:许多看似现代的AI理论基础,其实植根于古老的逻辑难题。理解它们的起源,有助于我们更好地把握未来AI推理能力的演进方向。 ## 小结 泥孩子谜题的起源虽不明确,但这恰恰反映了逻辑学中“共同知识”概念的普适性——它像一条暗流,在不同时代、不同文化中反复出现。Hans van Ditmarsch 的这篇论文不仅是一次历史追溯,更是对认知逻辑核心思想的致敬。对于AI从业者和逻辑爱好者来说,这都是一份值得细读的文献。

Anthropic2个月前原文

一项新研究挑战了“安全微调模型中的拒绝行为由单一线性方向介导”的观点。来自 arXiv 的预印本论文《Refusal Beyond a Single Direction》对两种主流干预方法——**Diff-in-Means (DiM)** 与 **Iterative Nullspace Projection (INLP)**——进行了系统比较,发现 INLP 在拒绝抑制方面可与 DiM 匹敌,且能提供更精细的可调能力。 ## 背景:从单一方向到多维空间 Arditi 等人(2024)曾提出,安全微调聊天模型的拒绝行为由残差流中的一个线性方向控制,可通过有害与无害激活的均值差(DiM)恢复。基于此,研究人员开发了激活添加和方向消融等干预手段。然而,新研究认为这一图景可能过于简化。 ## 核心发现:INLP 的竞争优势 研究者在五个开源聊天模型上对比了 DiM 干预(激活添加、方向消融)与 INLP 干预(零空间投影、反事实翻转)。结果显示: - **INLP 反事实翻转**在拒绝抑制上可与 **DiM 方向消融** 竞争; - 零空间投影效果始终较弱; - 将 INLP 限制在提取子空间的主要方向上,能在保持近基线困惑度的同时保留大部分抑制效果,从而提供**可调节的能力**。 ## 几何差异:缺失与对立的不同编码 更引人注目的是几何层面的发现:两种 INLP 干预将激活向量投射到截然不同的区域。零空间投影使变换后的激活**坍缩到有害与无害聚类之间**,而反事实翻转则将它们移入**相反的聚类**。这表明模型对“概念缺失”和“概念对立”采用了不同的编码方式——这一区分值得未来深入研究。 ## 意义与展望 该研究不仅挑战了“单一方向”假设,还为模型可解释性和安全对齐提供了新工具。INLP 的丰富参数化使得干预更具可调性,有助于在安全性和模型能力之间取得更精细的平衡。论文作者指出,未来工作可进一步探索不同概念编码的几何本质。

Anthropic2个月前原文

大型语言模型(LLM)作为智能体部署时,常需从海量工具目录中检索合适工具。传统嵌入检索依赖紧凑编码器,难以捕捉专业工具语义。参数化工具检索通过将每个工具编码为虚拟标记(virtual token)追加到LLM词表,经两阶段微调(记忆→检索监督微调)使模型自身充当检索器,在标准ToolBench基准上表现强劲。然而,这些基准使用详尽完整的查询,且采用约束解码限制输出路径,无法揭示模型是否真正理解工具。 为此,研究团队提出 **ToolSense**——一个开源LLM驱动诊断框架。该框架输入任意工具目录,自动生成三类基准: - **现实检索基准(RRB)**:包含三个模糊层级的查询 - **多项选择(MCQ)探测基准** - **问答(QA)探测基准** ### 关键发现:知识与检索的割裂 将ToolSense应用于ToolBench(约4.7万工具),评估五种参数模型训练配置后,研究者发现了一个惊人现象——**知识-检索分离**。在RRB查询上,多个配置性能骤降约50-64个百分点,甚至低于嵌入模型基线。更值得关注的是,尽管某些模型在标准检索任务中表现优异,但在事实探测任务上得分接近随机水平,说明模型“知其然却不知其所以然”。 ### 为何重要? 该研究揭示了当前参数化工具检索的深层问题:模型可能仅学会匹配模式而非理解工具功能,这在实际部署中可能引发严重错误。ToolSense框架为此提供了诊断工具,帮助开发者识别模型的真实能力边界。 ### 开源与后续 研究团队已开源ToolSense框架及ToolBench诊断基准(链接见论文)。未来,这一框架有望成为评估LLM工具理解能力的标准工具,推动更可靠、更透明的智能体系统发展。 **论文信息**:arXiv:2606.12451,作者包括Ashutosh Hathidara等。

Anthropic2个月前原文

传统决策支持研究关注人类如何借助机器学习模型做出更优决策。然而,随着自主AI代理的兴起,角色分工正在发生根本性逆转——AI代理代表用户行动,而人类和工具则退居辅助地位。这一转变将可靠性问题推至聚光灯下:代理错误可能造成严重后果,且其行为必须始终与人类目标及约束保持一致。 来自宾夕法尼亚大学的研究团队在最新论文《Strategic Decision Support for AI Agents》中,系统探讨了这一新型决策支持范式。他们摒弃了经典视角,重新审视了决策支持的两大基本原则——支持的成本-价值权衡与不确定性量化的作用——在AI代理作为核心行动者的场景下,提出了一个**战略决策支持框架**。 ### 核心问题:何时需要“拉一把”? 该框架的核心是一个优化问题:**在控制“反事实遗漏支持误差”的前提下,最小化支持调用次数**。所谓反事实遗漏支持误差,是指代理在那些本应寻求支持才能显著改善输出的实例上,却独自行动的概率。换句话说,系统需要判断:在哪些情况下,代理“单干”会带来可避免的失误? 研究证明,在总体层面上,最优策略是一个基于**支持价值**的阈值规则——只有当支持带来的价值超过某个阈值时,才触发支持请求。在此基础上,团队开发了一种在线算法,能够自适应地调整该阈值,并通过随机探索来控制遗漏支持误差,无需依赖任何数据分布假设。此外,他们还引入了一种**即时校准方法**,能够在线减少不必要的支持调用。 ### 应用场景:从信息收集到人机协作 论文将这一框架应用于多个典型场景,展示了其通用性: - **信息收集**:代理在不确定的环境中主动寻求额外信息,以降低决策风险。 - **人机协作**:代理在遇到自身能力边界时,适时向人类专家求助。 - **工具使用**:代理判断何时需要调用外部工具(如计算器、数据库查询)来辅助决策。 实验结果表明,该方法能够**可靠地控制目标误差**,同时**显著减少不必要的支持调用**,实现了效率与可靠性的平衡。 ### 行业启示:从“人类辅助AI”到“AI辅助人类”的再反转? 这篇论文的深层价值在于,它揭示了AI系统设计中的一个关键转变:当代理成为行动主体时,决策支持不再仅仅是“人类+模型”的简单叠加,而是需要重新定义角色与责任。传统的决策支持系统侧重于向人类提供建议,而新框架则侧重于**为代理配置一个“安全网”**,确保其在自主行动时不会偏离轨道。 这一思路对于当前大模型驱动的代理系统(如AutoGPT、Agent开发框架)具有直接指导意义。如何在不牺牲效率的前提下,防止代理产生“幻觉”或执行有害操作?该研究提供的数学框架和在线算法,为构建更可靠的自主系统提供了理论基础。 当然,研究也承认其局限性:当前框架假设支持的价值是可量化的,且反事实误差的定义依赖于对“改善”的明确界定。在实际部署中,这些量化的难度可能较高。不过,作为首个系统性地将决策支持理论应用于AI代理角色的工作,它无疑为该领域开辟了新的研究方向。

Anthropic2个月前原文

形式化证明是确保数学定理和软件正确性的关键工具,但长期以来面临数据稀缺和计算成本高昂的挑战。近日,来自爱丁堡大学等机构的研究团队发布了 **Pythagoras-Prover**,一个计算高效的Lean定理证明器开源家族,旨在以更低的计算预算实现顶尖性能。 ## 核心创新:从数据到架构的全链路优化 Pythagoras-Prover 包含两种生成范式的模型:**自回归模型**(4B和32B参数)以及**首个基于扩散的证明器**(4B参数),后者在推理时通过迭代精炼Lean证明。研究团队从三个层面解决效率问题: 1. **课程式监督微调(Curriculum SFT)**:构建了一个按难度分层(简单、中等、困难)的Lean验证语料库,让模型从短而简单的证明逐步学习到长而复杂的证明。在SFT过程中,动态的证明推理过滤机制保留了信息量丰富的证明轨迹,同时将每个实例控制在8k token的上下文预算内。 2. **增强型Lean形式化(ALF)**:针对已验证语料库稀缺的问题,ALF通过扰动已知问题生成形式化语句的变体,并利用自蒸馏产生额外训练信号,无需逐一验证每个变异实例。这降低了对特定语句表面形式的依赖,提升了模型的泛化能力。 3. **扩散模型试水**:4B参数的扩散证明器作为概念验证,展示了在推理时迭代精炼证明的潜力,为形式化证明开辟了新路径。 ## 惊人性能:小模型逆袭大模型 在标准基准测试 **MiniF2F-Test** 上,Pythagoras-Prover-4B 以 **86.1%** 的 pass@32 成绩超越了拥有 **671B** 参数的 DeepSeek-Prover-V2(82.4%),参数规模缩小约 **167倍**。而 32B 版本以 **93.0%** 的成绩创下了开源模型的新纪录。在更具挑战性的 **PutnamBench** 上,32B模型解决了 **93道** 题目,展示了强大的数学推理能力。 研究团队还发布了 **MiniF2F-ALF** 基准,该基准通过ALF变异增加了污染敏感性,所有模型在该基准上的准确率均有所下降,但Pythagoras-Prover-32B仍然最强,4B版本则追平了此前最先进的Goedel-Prover-V2-32B。 ## 行业意义:降低形式化证明的门槛 形式化证明领域长期被大模型垄断,但Pythagoras-Prover证明,通过高效的数据增强和训练策略,小模型也能达到甚至超越超大模型的性能。这为资源受限的研究团队和工业应用提供了可行方案,有望加速形式化方法在关键软件验证、数学定理证明等领域的普及。同时,扩散模型的引入也为未来探索更高效的推理范式打开了大门。

Anthropic2个月前原文

## 概述 自动驾驶仿真中,非自车交通智能体(traffic agents)的行为模式往往单一,要么基于规则,要么通过单一行为模式训练。最近,加州大学欧文分校的研究人员提出 **PersonaDrive**,一种基于检索增强的视觉-语言-动作(VLA)模型,能从人类风格驾驶数据中学习,生成具有不同驾驶风格的非自车智能体,用于闭环仿真。 ## 核心方法 PersonaDrive 包含三个阶段的流程: 1. **离线三元组挖掘**:从人类在 CARLA 仿真器上按激进、中性和保守指令驾驶的数据中,利用图像-文本相似度分数挖掘风格特定的三元组。 2. **轻量级检索头训练**:将冻结的视觉特征与小型控制编码器融合,为每种风格训练一个检索头,查询对应风格的数据库。 3. **VLA 主干微调**:在单一路径预测模型中,将检索到的上下文点作为行为示例,进行上下文学习。 推理时,只需切换检索头查询的数据库,即可改变智能体的驾驶风格,无需针对每种风格重新训练。 ## 性能表现 在 Bench2Drive 基准上,PersonaDrive(无风格条件)的驾驶分数比 SimLingo 高 **4.6%**,比 HiP-AD 高 **2.5%**。在风格条件模式下,每种风格下的驾驶分数均达到最高,且弱风格比最强基线 DMW 高 **5.4%**。从保守到激进指令,平均速度和加速度分别提升 **18%** 和 **25%**。 ## 意义与影响 PersonaDrive 解决了仿真中非自车智能体行为单一的问题,通过人类风格数据实现多样化的驾驶行为,有助于更真实地测试自动驾驶系统。其无需重新训练的切换机制降低了部署成本,为闭环仿真提供了更自然的交通流。

Anthropic2个月前原文

## 谎言检测器:大模型的新“测谎仪”面临可靠性挑战 随着大型语言模型(LLM)的能力日益增强,如何审计、监控和事后调查其行为成为关键问题。一个直观的想法是开发“谎言检测器”——一种能够判断模型输出是否与其真实信念相悖的工具。然而,来自arXiv的最新研究《Did you lie? Evaluating Lie Detectors across Model Scale and Belief-Verified Model Organisms》指出,现有谎言检测器的可靠性远未达到实用水平,尤其是在面对经过特殊训练的模型时表现不佳。 ## 研究背景:检测谎言需要“已知真相” 要评估谎言检测器,首先需要建立一个测试环境,其中模型的真实信念与输出内容相反。研究人员发现,此前使用的“训练模型体”(trained model organisms)往往无法满足这一要求,导致检测结果难以解释。为此,该团队构建了**13个推理模型体**,通过链式思维(Chain-of-Thought)验证其隐藏信念,并确保这些信念能泛化到未见过的任务。此外,他们还设计了**“多样化欺骗”**(Varied Deception)测试集,涵盖多种诱导模型说谎的动机场景。 ## 四种检测器:从简单到复杂 研究评估了四种谎言检测方法: - **链式思维法官**:让模型在推理过程中自我判断是否说谎。 - **对数概率分类器**:基于输出 token 的概率分布进行判断。 - **两种激活探针**:包括新提出的 **Did-You-Lie (DYL)** 方法,通过训练后续探针来检测谎言。 ## 关键发现:规模越大,检测越准?仅在简单场景下成立 在“多样化欺骗”测试中,研究使用了 **31个开放权重模型**,参数量从 **2B 到 1T** 不等。结果显示,所有四种检测器的性能都随模型能力的增强而提升——规模越大的模型,其谎言越容易被检测。这似乎是个好消息,表明检测器在应对常见的提示性谎言时具有一定效果。 然而,当面对经过特殊训练的模型体时,情况急转直下。**所有基于激活和对数概率的检测器性能急剧下降**,其中 DYL 保留的信号最多,但仍不理想。唯一保持较强表现的是链式思维法官,其平衡准确率达到 **0.82**。但研究人员指出,这在一定程度上是验证过程本身的产物——因为验证过程更倾向于选择那些链式思维可读的信念。 ## 结论与展望:谎言检测仍需突破 该研究的核心结论是:**当前的谎言检测器无法支持对模型信念的高置信度声明**。在真实世界场景中,模型可能经过特殊训练或微调,从而隐藏其真实意图,而现有检测手段对此几乎无能为力。论文建议未来研究方向包括:改进模型体的构建方法、开发更鲁棒的检测信号,以及探索多模态检测技术。 研究团队已开源其数据集、模型体和训练好的检测器,为后续研究提供了基础。谎言检测不仅是技术挑战,更关乎大模型的安全与可信。如果无法可靠地判断模型是否在说谎,那么对其行为的审计和监控就无从谈起。这项研究为领域敲响了警钟,也指明了前进的方向。

Anthropic2个月前原文

人类移动轨迹数据在交通规划、城市管理和流行病防控中至关重要,但大规模真实轨迹采集成本高昂且涉及隐私问题,因此合成轨迹生成成为研究热点。现有基于大语言模型(LLM)的方法主要分为两类:一是通过提示工程利用LLM的零样本推理能力,但缺乏细粒度时空约束;二是对模型进行轨迹级微调,虽提升了统计精度,却计算成本高且可能削弱通用推理能力。 为突破这一困境,研究人员提出了 **TrajGenAgent**——一种无需模型微调的语义感知分层LLM智能体框架。该框架采用“协调者-执行者”两级架构:首先,LLM通过上下文学习,基于历史证据生成个体且与星期几条件关联的活动链;随后,一个确定性工作流将每个活动落地为完整访问记录,具体包括个性化兴趣点(POI)检索、距离感知位置选择、运动学感知旅行时间传播以及LLM驱动的停留时长估计。 为了更全面地评估生成轨迹的真实性,研究团队引入了基于异常检测的评估框架,使用两种互补检测器分别评估行为合理性和语义连贯性。实验表明,在基准数据集和大规模模拟数据集上,TrajGenAgent在**时空保真度、语义连贯性以及个体行为真实感**方面均显著优于代表性的神经网络和LLM基线方法,且无需更新模型参数。 这一成果已被 **IEEE MDM 2026** 接收,标志着合成轨迹生成从“统计近似”迈向“语义真实”的重要一步。TrajGenAgent 为隐私保护下的高保真数据生成提供了新范式,有望推动交通、城市计算和公共卫生领域的应用发展。

Anthropic2个月前原文

紧凑型语言模型(LM)在成本、延迟和部署风险上具有优势,但在构建工具智能体时面临挑战:智能体不仅需要调用函数,还要从实时目录中发现工具、满足模式、维护中间依赖,并基于执行证据给出最终响应。小型规划器生成的流程图表往往在工具解析、参数验证和依赖跟踪阶段失败。 针对这一问题,来自IBM研究院和伦斯勒理工学院的研究团队提出了**Evoflux**,一种推理时进化搜索方法。其核心思想是将工具使用问题转化为可执行工作流的修复过程,通过结构化编辑、执行反馈、自适应强度、元引导重设计和多样性剪枝,迭代优化工作流图。 ### 实验表现 在包含**250个工具**的**MCP-Bench**任务上,Evoflux将小型规划器的执行可行性从约**3%**提升至**17-24%**。相比之下,基于相同搜索挖掘数据的监督微调(SFT)和SFT+DPO方法表现不佳,甚至低于零样本性能;ReAct虽然能达到更高峰值,但方差和token成本也更高。 ### 关键洞察 - **执行反馈是关键**:Evoflux在每个推理步骤都尝试执行当前工作流,并根据执行结果调整进化方向,避免了纯格式模仿的局限。 - **超越蒸馏局限**:传统方法依赖少量教师轨迹进行蒸馏,但难以覆盖工具目录变化时的修复行为。Evoflux通过进化搜索,在有限的教师轨迹预算下实现了更可靠的性能。 - **自适应机制**:算法根据搜索历史动态调整变异强度和多样性,防止早熟收敛,同时保持探索效率。 ### 行业启示 随着MCP(Model Context Protocol)等标准推动工具生态发展,紧凑型智能体在边缘设备、实时系统中的应用需求日益迫切。Evoflux证明了**推理时计算**可以有效弥补模型容量不足带来的规划缺陷,为低成本部署可靠智能体提供了新思路。未来,将进化搜索与轻量级规划器结合,或能成为构建鲁棒工具智能体的主流范式。

Anthropic2个月前原文

## 核心要点:树搜索 + 多智能体协作,重塑自动化优化范式 来自 arXiv 的最新论文《Arbor: Tree Search as a Cognition Layer for Autonomous Agents》提出了一种全新的多智能体框架 **Arbor**。该框架将结构化的**树搜索**作为自主智能体的“认知层”,使其能够在大型、有状态的动作空间中进行高效探索。与以往针对孤立目标、无状态评估的优化系统不同,Arbor 维护一棵显式的**假设搜索树**,作为所有智能体的共享工作记忆。这棵树随着每次测量而演化:失败被视为诊断信号,用于重塑后续探索方向;成功则改变瓶颈分布,引导树向新区域扩展。 ## 应用场景:全栈LLM推理优化 研究团队将 Arbor 应用于**全栈 LLM 推理优化**这一极具挑战性的领域。在传统模式下,实现推理峰值性能往往需要应用、框架、编译器、内核和硬件等多个工程团队的协同努力,耗时巨大且难以复制。Arbor 通过两类智能体分工协作: - **Orchestrator(编排智能体)**:驱动优化过程,将任务委派给覆盖推理栈各层的**领域专家**。 - **Critic(评论智能体)**:通过**根因分析、自我反思和测量验证**来保障系统稳定性,形成一种制衡架构——任一智能体都无法单方面主导系统。 智能体的能力被分解为**硬技能**(领域专长)和**软技能**(协调协议,决定贡献如何组合),从而实现完全自主的多日优化战役。 ## 关键成果:性能飞跃与可复现性 实验结果显示,Arbor 在推理吞吐-延迟帕累托曲线上实现了**最高193%的提升**,远超供应商优化的基线。相比之下,未使用该框架的单一智能体仅获得**+33%的吞吐量提升**,并在数小时内出现不可恢复的崩溃。Arbor 还能泛化到多代硬件平台,运行间方差控制在**2个百分点以内**,表明该方法与硬件无关且可复现。 ## 行业意义:从“人工调优”到“智能体协作” Arbor 的提出标志着 AI 基础设施优化进入新阶段。它不再依赖工程师手动调整参数,而是通过树搜索驱动的多智能体系统,自动探索庞大的配置空间。这种“认知层”设计为复杂系统的自动化调优提供了通用框架,尤其适用于那些状态空间巨大、评估代价高昂的领域。对于 LLM 推理服务商而言,这意味着更低的延迟、更高的吞吐量,以及更少的运维人力投入。 ## 小结 Arbor 将树搜索与多智能体协作巧妙结合,在 LLM 推理优化上取得了显著成果。其核心创新在于将失败转化为学习信号,并通过制衡架构保障稳定性。未来,这种“认知层”思想有望扩展到更多需要自主探索的 AI 系统。

Anthropic2个月前原文

一项来自 arXiv 的新研究提出了一种基于结构化大语言模型(LLM)流水线的自动化调解系统,旨在替代传统人工调解员在谈判准备阶段(pre-mediation)的工作,显著降低时间和成本门槛。 ## 背景与挑战 在整合式谈判(integrative negotiation)中,**预调解**是帮助各方明确利益、预测偏好、建立信任的关键步骤,能有效促成共赢协议。然而,聘请专业调解员成本高昂、耗时较长,且资源有限,导致许多谈判直接跳过这一环节。 ## 解决方案:结构化 LLM 流水线 来自 Bar-Ilan University 和 Carnegie Mellon University 的研究者 Jamie Bergen 与 Sarit Kraus 设计了一个**由四个专用模块组成的流水线**,每个模块负责一项子任务: - **对话模块**:模拟调解员引导讨论 - **偏好预测模块**:推断各方的核心利益 - **响应级评论模块**:对谈判策略提供反馈 - **结构化总结模块**:生成要点摘要 这种设计将推理、生成和评估分离,避免了传统单一大模型提示(monolithic single-prompt)容易产生的幻觉和偏差。值得注意的是,这些模块并非自主代理,而是按固定顺序传递输出,确保了流程的可控性。 ## 实验验证与关键发现 研究团队进行了两项受控人类实验,在**多议题谈判场景**中比较 AI 预调解与专业人类调解员的效果。 **第一项实验**显示: - 在**短期自我报告指标**上(如对调解员的信任、达成共赢协议的信心),自动化调解员与人类调解员表现相当。 - 在**偏好推断任务**上,AI 的误差比人类调解员**低 36%**(RMSE 指标),表明其能更准确地捕捉各方真实意图。 **第二项实验**针对 AI 常见的过度肯定(excessive affirmation)问题——即模型倾向于对所有陈述表示赞同。通过**定向提示优化**,系统将过度肯定率从 **36.6% 降至 16.8%**,与人类调解员基线持平。 ## 行业意义与未来展望 该研究的核心价值在于**可扩展性**。流水线的单方设计(single-party design)允许为谈判各方并行部署,同时保持与人类调解员相似的准备质量。这不仅降低了调解成本,还使得预调解能够大规模应用于在线纠纷解决、商业谈判、国际协商等场景。 不过,研究也指出当前评估仅限于短期自我报告指标,**长期谈判结果和复杂动态场景下的表现仍需进一步验证**。此外,AI 调解员目前仅支持整合式谈判,对于分配式谈判(distributive negotiation)或混合型谈判的适配性尚待探索。 总体而言,这项研究为 AI 在谈判辅助领域开辟了新路径,展示了结构化 LLM 流水线在替代高成本人类专业服务方面的潜力。随着模型能力的提升和提示工程的完善,自动化调解有望成为未来谈判的标准配置。

Anthropic2个月前原文

## 快讯:基础设施盲区是LLM多智能体系统的性能瓶颈 在共享GPU集群上运行多智能体LLM系统时,您是否遇到过这样的问题:某些模型排队严重,而同等能力的替代模型却闲置?现有编排方法从暴力集成到学习型路由器,都基于任务和模型特征选择模型与拓扑,却完全忽略了运行时基础设施状态。这种“基础设施盲区”导致资源系统性利用不足,尤其在并发负载下,延迟会沿多步流水线逐级放大。 ## 核心方案:让整个堆栈感知基础设施 最新研究提出 **INFRAMIND**,一个让多智能体编排全栈感知基础设施状态的框架。其核心包含三个组件: - **基础设施感知规划器**:根据实时系统负载和剩余预算,动态选择拓扑与角色。高负载时偏向简单图,低负载时采用更丰富的结构。 - **基础设施感知执行器**:在每个智能体步骤观察每模型队列深度、缓存利用率和响应延迟,决定调用哪个模型以及推理深度。 - **预算感知调度器**:重新排序每个模型的队列,优先处理紧急请求。 整个问题被建模为**分层约束MDP**,并通过**强化学习**端到端求解,自动平衡质量与延迟。 ## 效果:低延迟与高SLA保障兼得 在五个基准测试中,INFRAMIND 表现亮眼: - 低负载下,相比基线方法,**准确率提升高达7.6个百分点**,同时**延迟降低最多7倍**。 - 高负载下,**SLO(服务等级目标)达标率保持99.9%**,而所有基线方法均低于50%。 这意味着,INFRAMIND 不仅能提升资源利用率,还能在高峰期提供稳定的服务质量,这对于生产环境下的多智能体应用至关重要。 ## 行业背景:从模型选择到系统协同 当前多智能体LLM系统多关注模型能力,却忽视了底层基础设施的动态性。INFRAMIND 的提出标志着研究视角从“模型中心”转向“系统协同”,将排队论、调度优化与强化学习结合,为实际部署提供了可行方案。未来,类似技术可能成为多智能体框架的标准组件。

Anthropic2个月前原文

## 从解释到预测:一种新的AI可信度评估思路 在AI系统日益复杂的今天,用户对系统的信任往往建立在对其工作原理的解释之上,并据此预测模型在新输入下的行为。然而,对于大型推理模型(LRMs)而言,这条传统路径正变得愈发困难:针对单 token 生成的解释方法难以自然推广到长推理轨迹,而将这些轨迹当作自然语言来阅读时,其忠实性也常存疑。 来自以色列巴伊兰大学和艾伦图灵研究所的研究团队在 arXiv 发表的一篇新论文中提出了一种替代方案——**将行为预测本身视为一项可学习的任务**,绕过解释环节,直接训练“行为预测器”(Behavior Forecaster)来预测LRM的未来行为。 ### 方法核心:行为预测器如何工作? 行为预测器的设计思路非常直接:它接收LRM在某个输入上生成的**单条推理轨迹**,然后输出与解释通常提供的**相同类型的预测**。例如,模型是否会重复其答案?如果移除输入中的部分内容,答案会如何变化? 训练数据的获取完全无需人工标注——只需反复查询LRM,记录其行为变化即可。而预测器的推理仅需一次前向传播,成本远低于传统方法。 ### 实验结果:超越GPT-5.4和Claude Opus-4.6 研究团队在两个任务上对方法进行了验证: 1. **答案重复预测**:判断LRM在重复运行中是否会给出相同答案。 2. **输入扰动影响预测**:预测移除输入部分内容后答案的变化。 在三个不同的推理数据集上,训练后的行为预测器**准确率超过了GPT-5.4和Claude Opus-4.6**——而这些顶级模型需要像“朴素读者”一样阅读相同的推理轨迹才能做出判断。更重要的是,预测器的推理成本仅为这些大模型的**一小部分**。 研究还发现,**端到端微调预测器的骨干网络**以及**从目标LRM初始化参数**,对于获得强性能至关重要。 ### 行业意义:重新思考AI可解释性 这项工作实际上指向了一个更深层的命题:**我们是否真的需要完全理解AI的内部机制才能信任它?** 传统可解释AI(XAI)致力于打开黑箱,但面对LRM这种长链推理系统,解释的生成和理解本身都成为瓶颈。 行为预测器的思路更接近于“通过行为验证信任”——就像我们不必完全了解一个人的大脑如何运作,但可以通过观察其行为模式来预测其反应。这种方法在工程上更为务实,且能直接服务于**模型监控、安全测试和用户信任建设**等实际场景。 当然,该方法的局限性也显而易见:预测器本身也是一个模型,其预测的准确性依赖于训练数据的覆盖范围和质量。对于分布外的输入或全新任务,预测器的可靠性仍需验证。但无论如何,这项研究为AI可信度评估开辟了一条值得关注的新路径。

Anthropic2个月前原文

## 核心观点:大语言模型缺的不是规模,而是“记忆” 一篇被 **ICML 2026** 接收的立场论文提出,当前大语言模型(LLM)虽展现出惊人能力,但其学习机制本质上与人类的**内隐记忆**(implicit memory)高度相似,这恰恰是它们无法真正迈向通用人工智能(AGI)的关键瓶颈。作者 Sangjun Park 认为,要突破这一局限,必须为 LLM 集成**海马体式的显式记忆系统**(hippocampal explicit memory)。 ## 为什么 LLM 像“内隐记忆”而非“显式记忆”? 人类记忆分为两类: - **内隐记忆**:无意识的、自动化的技能与习惯,如骑自行车、语法直觉。LLM 的统计学习模式正是此类——它们通过海量文本训练,习得模式与关联,但无法有意识地“回忆”某个具体事件或事实。 - **显式记忆**:有意识的、可陈述的记忆,包括对过去事件的**情景记忆**(episodic memory)和对事实知识的**语义记忆**(semantic memory)。这类记忆依赖大脑中的**海马体**(hippocampus),支持长期规划、元认知和符号推理等高级认知功能。 论文指出,LLM 的“纯内隐”本质使其无法完成需要显式记忆的任务,例如: - **长期战略规划**:需要跨越时间步维持目标与状态。 - **元认知**:对自己知识边界的觉察与反思。 - **符号推理**:基于规则和逻辑的精确操作,而非概率关联。 ## 计算视角:我们需要什么样的“人工显式记忆”? 作者结合神经科学发现,提出了人工显式记忆系统的几个关键计算要求: 1. **模式分离**(pattern separation):能将相似的经验编码为不同记忆,避免干扰。 2. **模式完成**(pattern completion):能从部分线索中检索完整记忆。 3. **快速绑定**(rapid binding):单次经历即可存储,无需大量重复训练。 4. **结构化存储与检索**:支持时间序列、因果关系等复杂查询。 现有的一些尝试,如检索增强生成(RAG)或外部记忆网络,已部分触及显式记忆概念,但论文认为它们仍缺乏海马体式的神经机制——例如对记忆的**索引与重放**(replay)功能,后者是巩固与整合记忆的关键。 ## 对 AGI 路径的启示 这篇论文的价值不仅在于指出 LLM 的“先天缺陷”,更在于提供了一个清晰的**神经科学映射**:AGI 不应只追求模型规模的扩大或训练数据的堆砌,而应借鉴大脑的显式记忆架构。未来的突破或许来自: - 设计具有快速写入与结构化检索能力的记忆模块。 - 让 LLM 能主动“回忆”过去经验,而非仅依赖上下文窗口。 - 结合内隐学习的模式识别与显式记忆的逻辑推理,形成双系统协同。 正如作者在论文中强调:“高阶认知功能无法仅从内隐统计学习中涌现。” 这一观点为当前 AI 研究的“大模型中心论”提供了重要反思——或许,通往 AGI 的钥匙藏在人脑的海马体里。

Anthropic2个月前原文

研究人员推出 SciConBench 大规模实时基准测试,评估 AI 在开放域科学结论综合中的能力。测试包含 9,110 个问题及专家撰写的系统综述结论,采用自动评估流水线将结论分解为原子事实,通过事实精确率和召回率衡量正确性与全面性。为防范数据泄露,团队还开发了 SciConHarness 洁净室评估框架,限制代理仅通过受控网络交互获取信息。对 8 个前沿模型及深度研究代理的评估显示,在洁净室设置下最佳代理的事实 F1 仅 0.337,且洁净室环境下的性能普遍低于无约束评估,表明数据泄露可能虚高了模型真实能力。此外,对 Google AI Overview、OpenEvidence 等面向消费者的代理审计发现,它们常常生成不完整甚至矛盾的结论。研究指出,可靠的科学结论综合仍是开放挑战,洁净室评估对衡量开放域 AI 代理至关重要。

Anthropic2个月前原文

## 研究背景:分层推理中的“盲点”问题 在复杂的层级化推理任务中,AI 代理常常在中间决策点犯下关键错误——它们会毫不犹豫地选错分支,却意识不到自己缺乏足够信息。传统方法将“提问”视为外部不确定性触发器,但这种方式往往滞后,且无法在代理的决策流程中与“行动”直接竞争。 ## 核心创新:ACTION-RATING 框架 来自多位研究者(Aijing Gao 等)的最新论文提出 **ACTION-RATING**,一种将澄清行为直接嵌入代理动作空间的新方法。该框架使用**共享序数尺度**,让“提问”与“导航”在每个决策点直接竞争,从而使代理的求助行为在中间状态变得可观测。 这种设计催生了两种结构上截然不同的信息寻求模式: - **强制性澄清**:当所有候选分支都不可行时触发 - **机会性澄清**:当存在领先候选但仍有剩余不确定性时触发 ## 实验验证与关键发现 研究团队在 **Harmonized Tariff Schedule 分类**任务(包含 30,000 节点分类树)上进行了测试,覆盖三个基准数据集和来自 4 个家族的 9 个大型语言模型。 关键结果包括: - 从强制性澄清到机会性澄清的**模式转变**:信息寻求有效性(ISE)从 50% 提升至 74%。ISE 是局部诊断指标,定义为成功求助后下一步导航正确的比例,而非最终任务指标。 - 三种诊断性对比未能复现该结构,表明框架的独特性。 - **分离性测试**显示:即使答案质量下降 18.8%,信息寻求模式(模式分裂、ISE 排名)仍然保持,这实证地分离了“代理在何处求助”与“它获得的帮助质量”。 - 在受控答案通道下,10 位精度准确率提升达 **+16.2%**,研究者将此解读为“更好定位能解锁的上限”,而非部署估计。 ## 行业意义与展望 这项工作为分层语言代理的**主动求助能力**提供了新范式。传统上,代理要么盲目执行,要么仅在确定性低时才提问,而 ACTION-RATING 让“提问”与“行动”在同一决策层面竞争,使代理能更智能地判断何时该停下来寻求帮助。这种“自门控”机制对于需要深度推理的复杂系统(如法律、医疗、关税分类等)具有重要价值,可能显著减少因信息不足导致的级联错误。 未来,如何将这种框架扩展到更开放、动态的任务环境,以及如何优化“提问成本”与“收益”的平衡,将是值得关注的方向。

Anthropic2个月前原文

自动研究智能体(autoresearch agents)如今能够自主提出、评估并选择科学候选方案,通常依据一个聚合指标进行排序。然而,一项最新研究指出,当科学有效性存在于异质化的子区域或群体结构中时,聚合指标可能将错误的候选者排在首位——表面数字提升,但底层结构却发生反转。这一发现对依赖单一指标进行自动化科研决策的方法提出了严峻挑战。 该研究以 arXiv:2606.11522 预印本形式发布,作者为 Adithya Srinivasan 和 Devesh Paragiri。他们通过生态系统人口模型(Ecosystem Demography model)中的火灾模拟任务展示了这一现象:全局得分最高的候选者与次优者仅相差噪声水平,但前者会导致受保护的北方森林区域崩溃,而后者则能保护这些区域。关键区别在于每个子区域的行为,而非全局数字。 作者指出,这种失败并非领域特例,只要候选者的有效性是多维的,而验证器是单一聚合指标,就会出现类似问题。更关键的是,优化该指标的智能体本身最不可能发现指标错误——因为在智能体停止后,提示(prompt)已无剩余回合可供纠正。 为此,研究提出了一种“搜索纪律”(search-discipline)协议:将决策权移交给一个外部控制循环,该循环在智能体做出选择后审计每个候选者在子区域的行为,可以降级智能体原本接受的候选者,甚至重新打开智能体已宣布完成的运行。这一协议的核心是依赖可审查的候选效果证据,而非单一分数。 这项研究对于AI驱动的科学研究具有深远意义。随着自动研究智能体在材料科学、药物发现、气候建模等领域日益普及,如何确保其决策的鲁棒性和可解释性成为关键问题。聚合指标虽然简化了评估,但可能掩盖重要的局部失效模式。作者建议,在长期、多目标的研究任务中,必须引入外部审计机制,防止“优化骗局”导致科学错误。 该工作提醒我们:在AI加速科学发现的浪潮中,不能盲目相信数字,而应建立多层次的验证体系。

Anthropic2个月前原文

## 可审计行为推断:SemantiClean 框架如何平衡透明度与预测性能 在电商领域,理解用户行为意图(如购买意向、客户分群、产品亲和力)是提升转化率和用户体验的关键。传统方法多采用端到端的预测模型,以准确性为唯一优化目标,但往往缺乏可解释性和审计能力。近日,一篇发表于 arXiv 的论文提出了 **SemantiClean** 框架,试图在预测性能与透明度之间寻找新的平衡点。 ### 核心架构:四层元素库与可插拔推理 SemantiClean 的核心是一个预定义的**行为元素库**,该库基于 **Online Shoppers Purchasing Intention (OSPI)** 数据集构建,包含 **24 个行为元素**,并按照四个层级组织: - **功能层(Functional)**:与页面直接交互相关的元素 - **交互层(Interaction)**:用户与系统的动态交互信号 - **系统层(Systemic)**:会话层面的系统级特征 - **上下文层(Contextual)**:外部环境与用户背景信息 这些元素作为结构化语义信号,可被多个推理目标共享。框架支持**可插拔的推理目标**,包括但不限于购买意图预测、客户分群、产品亲和力分析等,从而避免了为每个任务重复构建特征工程。 ### 三大抗通胀机制:确保信号质量 与传统模型直接输出预测不同,SemantiClean 特别强调**信号质量治理**。论文提出了三种抗通胀机制来防止元素冗余或偏差: 1. **冗余组贡献上限(RedundancyGroup contribution caps)**:限制高度相关元素组成的组对最终预测的总贡献,避免重复信号过度影响结果。 2. **层级惩罚计算器(TieredPenaltyCalculator bias penalties)**:针对不同层级或类型的元素,施加差异化惩罚,减少系统性偏差。 3. **自适应约束模式(AdaptiveConstraintMode)**:针对冷启动场景,动态调整约束条件,保证新用户或新会话也能获得合理推断。 这些机制使得 SemantiClean 在牺牲少量预测增益的前提下,实现了**元素级别的透明度和可辩护的决策轨迹**。论文指出,这种设计明确地“用边际预测收益换取可审计性”。 ### LLM 集成推理引擎:两阶段架构 论文报告了 **LLM 集成语义推理引擎(LLM-Integrated Semantic Inference Engine)** 的完整实现。该引擎采用**两阶段架构**,在推理阶段充分利用完整的元素元数据: - **第一阶段**:基于确定性规则对元素进行初步筛选和聚合,输出可完全复现的结果(σ=0)。 - **第二阶段**:引入 LLM 处理两个特定元素(E8 和 E10),其输出在固定 provider/model/temperature 设置下具有可控的变异性。 值得注意的是,论文明确排除了**性别推断目标**,当前实现中该功能未启用,且未纳入任何定量结果。 ### 行业意义与局限 SemantiClean 的提出反映了 AI 领域一个日益重要的趋势:**从单纯追求精度转向兼顾透明度、可审计性和公平性**。在电商、金融、医疗等受监管场景中,模型的可解释性往往与性能同等重要。该框架通过预定义元素库和模块化设计,为构建“白盒”行为推断系统提供了一条可行路径。 然而,论文目前仅基于单一数据集(OSPI)进行验证,其泛化能力有待进一步检验。此外,LLM 的引入虽然增强了语义理解能力,但也带来了输出变异性,如何在透明度与灵活性之间取得更优平衡,仍是值得探索的方向。 对于 AI 从业者而言,SemantiClean 提供了一种**可审计、可复现、结构化**的行为推断范式,尤其适合对模型决策过程有严格合规要求的业务场景。

Anthropic2个月前原文