SheepNav

AI 资讯

每日聚合最新人工智能动态

来源:Anthropic清除筛选 ×

扩散模型在图像生成领域表现出色,但有时也会产生不当或有害内容。如何精准“擦除”特定概念(如暴力、色情等)而不损害模型的整体生成能力,一直是研究难点。来自中国科学技术大学等机构的研究团队提出了一种名为**正交概念擦除(Orthogonal Concept Erasure, OCE)**的新方法,相关论文已被 ICML 2026 接收为 Oral 论文。 ## 现有方法的困境 当前概念擦除方法主要分为两类:**训练型方法**和**编辑型方法**。训练型方法效果较好,但计算成本高、扩展性差;编辑型方法效率高、易于部署,却在精准擦除和保持生成质量之间难以平衡。研究者发现,这一局限的根源在于编辑型方法依赖**加法参数更新**。他们的实证分析表明,概念语义主要取决于神经元的**方向**而非幅度,而整体生成能力依赖于神经元的**角度几何结构**。加法更新会不可避免地纠缠方向、幅度和角度几何,导致概念擦除与生成性能之间相互干扰。 ## OCE 的核心创新 OCE 从几何角度出发,将编辑型擦除重新定义为**乘法参数更新**。具体来说,OCE 通过闭式解推导出层级的正交变换,并将其应用于模型参数,从而在**精确擦除目标概念**的同时,**保持神经元的幅度和角度几何结构不变**。这意味着,模型可以忘记“狗”这个类别,但生成猫、汽车等其他物体的能力几乎不受影响。 此外,针对多概念擦除中可能出现的约束冲突问题,OCE 引入了**子空间级别目标**和结构化子空间操作,使得擦除多个概念时依然高效且可扩展。 ## 实验结果 在单概念和多概念擦除任务上,OCE 均展现出优异性能。实验表明,OCE 在**概念擦除效果**和**非目标保持能力**上均优于现有方法。令人印象深刻的是,OCE 能够在 **4.3 秒内擦除多达 100 个概念**,效率远超训练型方法。 ## 行业意义 OCE 不仅为扩散模型的安全部署提供了实用工具,也为理解神经网络内部表征提供了新视角。未来,该方法有望被集成到主流图像生成工具中,帮助开发者和平台更灵活地管理内容安全,同时避免因过度擦除而牺牲模型的艺术表现力或多样性。 ## 小结 正交概念擦除(OCE)通过乘法正交变换,巧妙地解耦了概念擦除与生成能力维护之间的矛盾,实现了高效、精准且可扩展的概念移除。这一工作为 AI 安全领域带来了重要启发,也展示了基础数学原理在解决实际工程问题中的强大威力。

Anthropic4个月前原文

有限元分析(FEA)是现代工程设计的基石,但传统工作流高度依赖专家经验,流程繁琐。北京大学与中国农业大学联合团队最新提出的 **VFEAgent** 框架,正尝试用多智能体系统彻底改写这一局面。 ## 核心思路:从“看图说话”到自动仿真 VFEAgent 是一个端到端的多模态智能体系统,其最大特点是 **直接接受输入图像和问题描述**,自动完成 FEA 建模与仿真。研究团队设计了两大核心组件: 1. **多模态视觉-语言多智能体流水线**:利用 ReAct 驱动推理,从异构输入(图片+文字)中提取结构化的 FEA 规范。 2. **验证优先的代码合成框架**:内建自调试与回退机制,确保生成代码的可执行性与物理有效性。 ## 技术亮点:不止是“大模型+代码” 当前已有不少将大语言模型(LLM)应用于 FEA 的尝试,但在处理多模态输入和执行复杂任务时存在明显短板。VFEAgent 的突破在于: - **多智能体协作**:不同智能体分别负责视觉理解、物理规则检查、代码生成与验证,分工明确。 - **物理有效性优先**:传统 LLM 生成的代码可能语法正确但物理荒谬,VFEAgent 通过验证优先设计,大幅提升了仿真结果的可信度。 ## 评测表现:全面超越基线方法 团队在多种工程力学场景下进行了系统评测,结果表明: - VFEAgent 在生成完整且物理有效的仿真任务上取得了 **高成功率**; - 相比纯 LLM 基线方法,在 **可靠性与正确性** 上均有显著提升。 ## 行业意义:工程师的“解放”还是“进化”? FEA 自动化的价值不仅在于节省时间。传统 FEA 流程中,模型简化、边界条件设定、网格划分等环节需要大量经验判断,VFEAgent 的端到端能力有望将工程师从重复性劳动中解放出来,转而聚焦于更高层的设计创新与决策。 不过,该框架目前仍处于预印本阶段,实际工程落地还需解决复杂几何体识别、大规模计算效率等挑战。但无论如何,这一方向已为 AI 辅助工程设计开辟了新的可能性。 ## 小结 VFEAgent 通过多模态多智能体协作,首次实现了从图像/文本输入到完整 FEA 仿真的端到端自动化。它不仅展示了 LLM 在工程科学中更深层的应用潜力,也为未来“AI+工程”的融合范式提供了值得关注的范例。

Anthropic4个月前原文

热带森林正因经济和政治利益驱动而承受巨大的毁林压力,科学证据表明这种毁林加剧了气候变化。近日,一篇发表在 arXiv 上的论文提出了一种全新的伐木方法——**超低影响包裹式伐木(URIEL)**,该方法结合了直升机伐木(heli-logging)技术,并密集使用机器人和人工智能,由无人机执行采后抚育处理。 ## 方法核心 URIEL 的核心思路是:利用直升机将包裹在保护套中的原木吊运出林,避免传统地面机械造成的土壤压实、植被破坏和道路建设。伐木前,AI 驱动的无人机系统对森林进行高精度扫描,识别目标树木并规划最优路径;伐木过程中,机器人设备完成精准切割和包裹;伐后,无人机执行抚育任务,如播种、施肥或监测再生情况。 ## 可行性验证 研究团队开发了该方法的全套设备概念,完成了尺寸设计、数字概念验证,并针对多种直升机-木材-距离组合进行了仿真和经济可行性分析。结果表明,URIEL 方法具有**高经济可行性**,同时能**几乎完全消除对森林的附带损害**,维持生态系统服务。 ## 挑战与展望 尽管科学和技术结果令人满意,论文指出 URIEL 的可行性取决于多方利益相关者的整合:高科技产业、政府、认证伐木公司以及原住民社区。这一技术能否落地,不仅取决于技术成熟度,更依赖于社会、政策和产业协同。 论文作者团队来自多所巴西研究机构,共 14 人,论文长达 196 页,包含 40 张图表。研究认为,URIEL 有望成为保护热带森林的革命性技术,但“它终究会转动”(E pur si muove)——正如伽利略的坚持,技术突破需要时间与实践的检验。

Anthropic4个月前原文

将自由文本中的表型描述与本体术语(ontology terms)准确关联,即表型注释(phenotype annotation),是跨研究整合比较形态学数据的关键环节。然而,这一过程高度依赖训练有素的人类专家,耗时费力,难以规模化,成为该领域的核心瓶颈。近日,一篇发表在arXiv上的研究《Frontier LLM-based agents can overcome the ontology curation bottleneck for natural phenotypes》重新审视了这一经典问题,并给出了令人振奋的答案:前沿的大型语言模型(LLM)智能体在表型注释任务上已能达到与人类专家相媲美的水平。 ## 研究背景与基准 2018年,Dahdul等人建立了一个包含来自七项系统发育研究的实体-质量(Entity-Quality, EQ)注释的金标准(Gold Standard)数据集。他们利用该数据集评估了三位人类注释员和基于本体的语义相似度工具Semantic CharaParser,结果发现机器与人类的一致性显著低于人类注释员之间的一致性。这一差距凸显了自动注释的挑战,也奠定了该领域的评估基准。 ## 新方法:LLM智能体作为注释员 在本研究中,来自James P. Balhoff和Hilmar Lapp的研究团队采用了五种前沿的托管LLM(来自Anthropic和OpenAI),并将它们构建为**自主智能体**。每个智能体在一个独立的工作空间中运行,配备有: - 源出版物PDF - 原始人类注释员使用的同一份注释指南 - 四个项目本体(UBERON、PATO、BSPO、GO) - 一个验证脚本 这种设计模拟了人类注释员的工作流程,智能体可以“阅读”文献、理解指南、查询本体,并生成符合格式的注释。 ## 核心结果:媲美人类,超越传统工具 与2018年的金标准对比评估后,结果令人印象深刻: - **每位LLM智能体的表现均落在原始研究中三位人类注释员之间的变异性范围内**。这意味着,在统计意义上,这些智能体的注释质量与人类专家没有显著差异。 - 表现最佳的智能体接近但未超越最佳的人类注释员,但整体上已非常接近。 - 在所有四项评估指标上,LLM智能体**大幅超越了**传统的Semantic CharaParser工具。 ## 意义与展望 这项研究具有双重意义。首先,它证明了**前沿LLM智能体能够有效克服表型本体注释的瓶颈**,为大规模、跨研究的形态学数据整合提供了可行的自动化方案。其次,该工作展示了“**智能体化**”LLM的潜力:通过提供合适的工具和环境(PDF、指南、本体、验证脚本),模型不仅能生成文本,还能像一个“领域专家”一样完成复杂的专业任务。 随着LLM能力的持续提升和智能体框架的成熟,我们可以期待在生物信息学、临床表型注释等更多领域看到类似的突破。对于比较形态学而言,这或许意味着一个数据整合新时代的开启。

Anthropic4个月前原文

## 快讯:Soro——塔吉克语大模型轻装上阵 在大型语言模型(LLM)竞赛中,绝大多数资源都集中在英语、中文等主流语言上。然而,一项新研究为资源匮乏的语言带来了突破。研究人员发布了 **Soro**,一系列专为塔吉克语优化的轻量级对话LLM,旨在应对塔吉克斯坦严苛的算力与网络限制。 ### 从Gemma 3起步,定向训练 Soro 基于开源的 **Gemma 3** 检查点,通过两个关键步骤实现专业化: - **持续预训练**:使用一个精心筛选的 **19亿词符** 塔吉克语语料库,涵盖网页文本、PDF文档及与课程对齐的教育材料。 - **监督指令微调**:在 **4万条** 塔吉克语教师风格的示例上进行训练,提升对话能力。 ### 填补评估空白 由于标准基准测试中塔吉克语覆盖有限,团队专门推出了配套的塔吉克语基准测试集,涵盖常识、语言能力和学校/大学入学考试领域,并已在 Hugging Face 开源。 ### 性能与部署优势 在塔吉克语基准上,Soro 显著优于同等规模的 Gemma 3 模型,同时保留了在英语标准数据集上的强大性能。更重要的是,通过 **FP8 和 INT4 量化**,Soro 在保持塔吉克语能力的同时,大幅降低了内存需求,使其能够部署在边缘设备上。目前,该模型已在教育领域试点,并计划推广至塔吉克斯坦的学校。 Soro 的发布标志着低资源语言AI发展的重要一步,展示了如何通过针对性的预训练和轻量化技术,让先进语言模型惠及更多语言社区。

Anthropic4个月前原文

传统分析系统本质上是**被动**的:用户必须事先知道要问什么,才能定义查询、获取结果。但在实时数据流环境中,数据持续演变,潜在洞察空间巨大,手动枚举查询变得不切实际。一篇被 ACM 智能体系统会议(CAIS 2026)收录的论文提出了一个**多智能体架构**,旨在实现数据流上的**自主洞察发现**,将分析范式从“查询驱动”转向“发现驱动”。 该系统的核心是一个**连续发现循环**:智能体首先**生成假设**(例如“某地区销售额突然下降是否与物流延迟相关?”),然后将假设编译为可执行的分析任务,接着**验证生成的结果**,最后输出可视化报告甚至可部署的应用。整个过程无需人工干预,系统自主决定“接下来该探索什么”。 技术栈方面,架构充分利用了成熟的开源组件:**Apache Kafka** 负责智能体间的事件驱动协调,**Apache Flink** 执行流处理任务,而**大语言模型(LLM)**则为每个智能体提供推理和生成能力。论文特别强调了**契约驱动设计**——通过定义类型化的中间工件(typed intermediate artifacts),确保模块化、可观测性、数据血缘追踪,以及动态生成代码的安全执行。 论文通过零售、金融和公共数据三个用例展示了该架构的效果。在零售场景中,系统能自动检测到促销活动与库存周转率的异常关联;在金融场景中,它能在市场波动时自主生成风险因子分析报告;在公共数据场景中,它从开放数据流中发现了此前未被注意到的季节性模式。 这项工作并非孤立的学术探索。它直接回应了当前 AI 行业的两大趋势:**智能体(Agent)系统的兴起**和**实时数据平台的普及**。将 LLM 驱动的推理能力与流处理引擎的低延迟计算相结合,有望催生新一代“主动式”分析产品——它们不再是仪表盘上的静态图表,而是持续运行的、能主动向用户推送异常与机会的“分析伙伴”。 当然,该架构也面临挑战:LLM 生成的分析假设可能包含偏差或错误,动态代码执行的安全性需要更严格的沙箱机制,以及在大规模流数据上的成本控制。但无论如何,这篇论文为“让数据主动说话”提供了一个清晰的技术路线图。

Anthropic4个月前原文

机器遗忘(Machine Unlearning)旨在删除已部署模型中特定训练数据的影响,而无需从头重新训练。然而,现有验证协议仅从输出层面进行检验——通过成员推断、保留集准确率和遗忘集准确率——但一篇新论文揭示了一个隐患:模型可能同时通过这三项测试,却仍在其中间表征中编码了被遗忘的记录。 来自拉夫堡大学的 Georgina Cosma 和 Axel Finke 在预印本 arXiv:2605.27569 中提出了 **RULER**,一套基于表征层面的验证指标。其中两个核心指标引人注目: - **M2(oracle对比指标)**:将被遗忘记录在遗忘模型中的表征位置与一个从头重新训练(不含这些记录)的模型中的位置进行比较,以此检测残留信息。 - **M4(无oracle指标)**:无需重新训练,仅通过遗忘模型内部的相似性结构即可检测残留痕迹,甚至可作为遗忘前的诊断工具。 实验覆盖表格、图像、临床文本和人脸识别等多种场景。结果显示,四种近似遗忘方法均能通过输出层评估,但在线性混合效应模型下,**M2 在 12 种条件中有 10 种检测到显著残留(p<0.05)**,且遗忘比例越大,效应量越强。第五种方法“Bad Teacher”虽采用不同遗忘机制,同样暴露出残留。而 **M4 在人脸识别模型中检测到身份级别的记忆**,表明现有方法均无法彻底擦除该信号。 这项研究对 AI 合规与隐私保护具有重要价值。当前 GDPR 等法规要求的“被遗忘权”可能因验证手段的疏漏而流于形式。RULER 提供了一种更严格的审计框架,有助于发现隐藏的记忆残留,推动遗忘技术从“输出达标”走向“表征清洁”。未来,该工作或为遗忘算法的设计提供新基准,并引发对验证标准本身的反思。

Anthropic4个月前原文

因果发现(Causal Discovery)是科学推理的基石,然而大型语言模型(LLM)能否可靠地完成这一任务,始终是悬而未决的问题。近日,一篇发表于arXiv的论文《Why LLMs Fail at Causal Discovery and How Interventional Agents Escape》从理论层面给出了答案:**LLM的失败并非源于模型或数据,而是学习范式本身的固有局限**。 ## 核心问题:LLM为何“学不会”因果关系? 论文指出,当前主流的训练方法——包括**监督微调(SFT)**、**直接偏好优化(DPO)**和**上下文学习(ICL)**——都会产生一种预测器,它无法区分能生成相似观测数据的因果图。更致命的是,任何试图做到这一点的尝试,都要求模型的内部表征无限增长,而这恰恰违反了这些方法有效工作的前提条件。研究者将这一发现形式化为**核障碍定理(Kernel Obstruction Theorem)**,证明该局限是学习范式内在的,与具体模型或数据集无关。 这一结论解释了为何在因果发现基准测试中,即使经过微调的LLM在面对简单因果图时也会遇到性能瓶颈,并且随着图复杂度增加而退化。 ## 突破路径:将LLM“降级”为干预预言机 既然直接训练LLM进行因果发现在理论上不可行,研究团队另辟蹊径,提出了**Agentic Causal Bayesian Optimization(A-CBO)**框架。其核心思路是:不再试图让LLM直接输出因果图,而是将其“冻结”起来,仅作为**干预预言机(Interventional Oracle)**——回答关于干预效应的特定查询。外部一个**贝叶斯循环(Bayesian loop)**则负责在候选因果图之间集中信念,仅需对数级别次数的交互即可收敛。 因为决策过程发生在核障碍定理的适用范围之外,A-CBO可以在底层模型不变的情况下**证明收敛**。这意味着,即使LLM本身不具备因果推理能力,通过巧妙的外部分工,也能实现可靠的因果发现。 ## 实验结果:无需训练,性能超越微调基线 在**Corr2Cause**基准上,A-CBO无需任何训练即可匹配微调基线的表现。而在新提出的**Extended Corr2Cause**基准(规模扩展至24个变量、包含18,000个测试样本)上,A-CBO显著优于微调和偏好优化方法,且优势随问题复杂度增加而扩大。 ## 行业启示:LLM的“推理天花板”与代理式AI的崛起 这项研究为AI领域提供了双重启示:一方面,它揭示了LLM在因果推理上的**根本性天花板**,提醒从业者不要盲目相信大规模模型能自动习得科学推理能力;另一方面,它展示了**代理式AI(Agentic AI)**的潜力——通过将LLM作为模块化的“工具”,结合外部算法,可以突破模型自身的理论限制。 未来,因果发现或许不再依赖于让LLM“变得更聪明”,而是构建更精巧的**人机协作系统**,让模型在擅长的模式识别与语言理解上发挥作用,而将逻辑推理与因果推断交由专门的算法模块处理。

Anthropic4个月前原文

动态柔性作业车间调度问题(DFJSP)是制造业与物流领域的核心难题,近年来神经网络组合优化方法取得进展,但面临方法论困境:静态基准易导致过拟合,而缺乏校准的生成器则引入随机噪声,难以客观评估算法能力。针对这一矛盾,来自清华大学等机构的研究团队提出了 **DynaSchedBench**——一个全新的诊断框架,通过对实例生成过程进行严格校准,为DFJSP研究提供公平、可控的评测环境。 ## 核心创新:事件空间校准器与压力指数 DynaSchedBench的核心组件是 **顺序事件空间校准器(SESC)**。传统方法依赖随机参数采样生成调度实例,而SESC通过计算一种新的 **调度压力指数(SSI)**,将实例按难度分层。实验表明,SESC在计算效率上显著优于进化算法基线,且能稳定收敛至目标指标,从而确保不同难度级别的实例具有可比性和可重复性。 框架还集成了模块化组件,包括实例生成、快照仿真、智能体接口、评估与可视化模块,支持对反应式(reactive)和前瞻式(lookahead)策略进行严格测试。 ## LLM调度智能体的“可观测性悖论” 利用DynaSchedBench的校准环境,研究团队揭示了基于大语言模型(LLM)的调度智能体存在一个关键局限——**可观测性悖论**:在动态调度的逐步在线决策中,如果向智能体提供完整结构信息的“上帝视角”(oracle access),反而会降低策略性能,不如提供简洁信息的效果。这一反直觉发现表明,过多的信息可能引入噪声或导致智能体过度拟合,从而影响决策质量。 此外,尽管工具增强(tool-augmented)和细化策略(refinement strategies)消耗了大量token,但并未可靠地提升性能。大多数LLM智能体在基准测试中未能持续超越传统的强调度规则(如先到先服务、最短处理时间等),其行为更像鲁棒的启发式近似器,而非真正的优化器。 ## 行业启示与未来方向 这项研究对AI在工业调度中的应用提出了重要警示:LLM并非万能解药。当前模型在复杂约束下的在线决策能力仍有明显天花板,且信息呈现方式对性能影响巨大。DynaSchedBench作为校准基准,有望推动该领域从“刷榜”转向更严谨的能力诊断。未来,如何设计更高效的状态表示、如何平衡信息量与决策质量,将是LLM调度智能体落地的关键课题。

Anthropic4个月前原文

## 当AI内容成为“新物种”,我们如何追溯其家谱? 在生物学中,物种起源是难解之谜;而在信息科学中,合成信息的起源同样充满神秘。随着生成式AI的爆发,文本、图像、视频等合成内容正以指数级增长,但一个关键问题日益凸显:我们能否像追踪生物进化一样,追溯一段AI生成内容的源头? 一篇发表于arXiv的论文《On the Origin of Synthetic Information by Means of Steganographic Inheritance》提出了一个大胆的类比——将**隐写术**与**遗传学**结合,为合成信息赋予可追溯的“血统”。 ### 从达尔文到AI:为何需要“合成信息谱系”? 达尔文在《物种起源》中探讨了自然选择的奥秘。而论文作者指出,合成信息的起源已成为信息科学中的“谜中之谜”。AI模型的强大能力使得生成内容与原始数据之间的关联越来越模糊:一个足够先进的模型可能产生“后代”,这些后代在结构或信号层面与父本几乎毫无相似之处。 这就像遗传学中的**表型与基因型**之分——两个个体可能外表相同(表型一致),但基因构成(基因型)却截然不同。在AI领域,这意味着我们无法仅凭内容外观判断其来源。 ### 隐写遗传:为合成内容打上“隐形标签” 论文的核心创新在于提出了一种**隐写遗传机制**: - **投影器**:从父本(原始数据)中提取一个“特征”(trait),类似于遗传物质。 - **隐写编码器**:在生成子本(合成内容)的瞬间,将该特征以人眼不可见的方式嵌入其中。 - **生命周期**:这个隐藏特征会伴随子本在数字生态系统中流转,即使经过修改或变换也能保持稳定。 - **亲子鉴定**:当需要查询父本时,**隐写解码器**从子本中提取特征,并与候选父本的特征库进行比对,从而确定最可能的来源。 ### 理论分析与实证验证 研究团队从理论上分析了**系统发育准确性**与投影器、隐写系统属性之间的关系。实验评估覆盖了多种投影器和隐写系统,证明该方法在**广泛处理操作**(如压缩、裁剪)和**语义修改**(如翻译、重写)下仍具可行性。这意味着,即使合成内容被反复编辑,其隐藏的“血缘标记”依然能够被识别。 ### 未来愿景:构建可追溯的AI生态系统 论文展望了一个类似生物界的数字生态系统:合成信息如同生命体,从简单的起点开始,不断分支演化出无穷形式,而隐写特征则像DNA一样,记录着每一段内容的进化历程。 这项研究为AI安全、内容溯源和版权保护提供了全新思路。在深度伪造泛滥、假新闻肆虐的当下,为合成内容建立可靠的“家谱”或许正是重建数字信任的关键一步。

Anthropic4个月前原文

## 背景:并行推理的“孤岛”困境 大语言模型(LLM)在测试时扩展技术中,常使用 **best-of-N** 等并行采样方法:针对同一输入提示生成 N 个独立序列,从中选择最佳结果。这种方法能提升准确率,且可充分利用批处理的计算效率。然而,传统方法中每个序列的生成过程彼此隔离,无法复用其他序列的中间结果、计算或观察信息——相当于 N 个“孤岛”各自为战,浪费了潜在的协同机会。 ## LaneRoPE 的核心创新 针对上述问题,来自多所机构的研究者提出了 **LaneRoPE**,一种让 N 个并行序列在生成过程中实现协同与协作的新方法。其核心包含两个关键技术: 1. **序列间注意力掩码**:通过引入跨序列的注意力机制,使各序列的采样过程相互依赖。当一个序列生成某个 token 时,可以“看到”其他序列的当前状态,从而调整自身的生成策略。 2. **扩展的 RoPE 位置编码**:在旋转位置编码(RoPE)基础上注入额外位置信息,既能表示同一序列内部的 token 相对位置,也能表示不同序列 token 之间的相对位置。这使得模型能理解跨序列的上下文关系。 ## 效果与优势 在数学推理任务上的实验显示,LaneRoPE 表现出色: - **准确率提升**:在有限生成长度下,协同机制带来了额外的准确率增益,优于独立采样的 best-of-N 方法。 - **架构改动极小**:LaneRoPE 仅需修改注意力掩码和位置编码模块,对底层 LLM 架构的侵入性很低。 - **推理开销可忽略**:额外计算量极小,易于集成到现有推理管线中。 ## 行业意义与展望 LaneRoPE 的出现为 LLM 测试时扩展提供了新思路。传统上,并行推理的收益主要来自多次采样后取最优,本质是“暴力枚举”;而 LaneRoPE 让序列间能交换信息,更接近人类“团队协作”的推理方式。 这种方法特别适合需要深度推理但计算资源受限的场景(如数学证明、代码生成)。未来,研究者可进一步探索 LaneRoPE 在更多任务(如多步规划、对话系统)上的应用,甚至将其与强化学习中的探索策略结合。 ## 小结 LaneRoPE 通过创新的位置编码和注意力机制,打破了并行序列间的信息隔离,实现了高效的协同推理。它以极小的代价带来了显著的准确率提升,是 LLM 推理效率优化领域一项值得关注的工作。

Anthropic4个月前原文

随着智能系统自主性日益增强,研究者正致力于将伦理与道德考量融入决策机制,而非单纯追求效用最大化。实现这一目标的关键在于评估决策与人类价值观的契合度。基于大语言模型(LLM)的方法成为识别文本中显性或隐性人类价值观的热门方向。最新发表于 ICAART 2026 的论文提出了一种可定制的 LLM 架构,能够检测文本中的人类价值观并量化其强度,摆脱了以往方法对特定价值理论或复杂提示工程的依赖。 该架构由三个协调模块组成: - **规范生成模块**:从任意理论框架的基础文本中自动生成结构化的价值规范。 - **文本标注模块**:利用生成的规范对文本进行标注。 - **强度评估模块**:基于修辞和语义证据,为价值观分配支持或抵抗程度。 这种模块化设计将“概念化”与“检测”分离,使得流程可扩展、可复现,且能适配多种价值理论。研究团队使用多个 LLM 实例化该架构,并在 ValueEval 数据集上进行了评估。实验结果显示,该架构取得了良好的检测性能,验证了管线的通用性。 ## 背景与意义 传统 AI 系统以效用最大化为目标,但自主决策(如自动驾驶、医疗诊断)常常面临伦理困境。例如,自动驾驶汽车在无法避免碰撞时,应如何权衡不同乘客与行人的安全?要回答这类问题,系统必须理解并量化“公平”“生命”“责任”等人类价值观。然而,价值观本身具有抽象性、文化依赖性和理论多元性,为计算建模带来挑战。 ## 架构亮点 该工作的核心创新在于“可定制性”。以往方法通常绑定特定的价值理论(如 Schwartz 价值观理论),或需要人工设计复杂的提示模板。而新架构通过模块化设计,允许用户直接输入任意理论的基础文本(如哲学著作、道德准则),系统自动提取价值定义与关系,生成规范。这意味着同一套流程可以轻松适配不同文化背景或应用场景的价值体系。 在检测阶段,模型不仅判断文本是否提及某种价值观,还根据语言线索(如情感强度、修辞手法)评估其“支持”或“抵抗”程度。例如,“我们必须保护弱势群体”会被识别为对“关心他人”价值观的强烈支持,而“效率优先于公平”则可能被判定为对“公平”的抵抗。 ## 实验与评估 研究者在 ValueEval 数据集上测试了多个 LLM(包括 GPT、LLaMA 等)。结果表明,架构在价值观分类和强度预测任务上均优于基线方法,且不同 LLM 的表现具有一致性,说明管线设计具有鲁棒性。论文还指出,规范生成模块输出的结构化描述可被人类审查,增强了可解释性。 ## 未来方向 该工作为价值观对齐研究提供了新工具。未来可探索: - 将架构集成到强化学习框架中,用于训练价值观对齐的智能体; - 扩展至多语言、多文化场景; - 结合因果推理,理解价值观如何影响决策。 总之,这项研究标志着从“单一理论、手工提示”向“可定制、模块化”的价值观识别范式的转变,为构建更负责任的 AI 系统奠定了基础。

Anthropic4个月前原文

## 背景:AI代理的“老化”问题被忽视了 随着AI代理从实验性项目走向长期部署,一个关键问题浮出水面:**一个代理在部署后能保持多久的可靠性?** 传统的评估方法只关注“第一天”的基准性能,忽略了代理在持续运行中因状态变化而产生的退化。即使模型权重保持不变,代理的有效状态也在不断改变——它会压缩交互历史、从不断增长的内存中检索、在更新后修正事实,并经历常规维护。因此,可靠性成为整个代理系统的生命周期属性,而不仅仅是基础模型的快照属性。 ## AgingBench:衡量代理老化的四个机制 来自多所高校的研究团队引入了 **AgingBench**,这是一个纵向可靠性基准,专门用于代理生命周期工程。它不仅要回答代理是否会退化,还要回答退化以何种形式出现以及修复应针对哪个环节。AgingBench 将代理老化归纳为四种机制: - **压缩老化**:历史压缩导致信息丢失或失真。 - **干扰老化**:新记忆干扰旧记忆的准确检索。 - **修订老化**:事实更新后产生不一致或错误。 - **维护老化**:例行维护操作(如重启、清理)引发的状态偏差。 为了诊断这些故障,AgingBench 使用**时间依赖图**和**配对反事实探针**,生成针对内存管道中写入、检索和利用阶段的诊断画像。 ## 关键发现:老化并非单一维度 研究团队在7个场景、14个模型、多种内存策略以及运行者控制与自主代理中,进行了约400次运行(涵盖8至200个会话)。结果揭示: - **行为测试可能保持正常,但事实精度却在衰减**。代理表面行为看似可靠,内部知识却已悄悄“变质”。 - **派生状态跟踪可能在单个模型内急剧崩溃**,即代理对自身状态的认知突然失效。 - **同一个错误答案可能源于不同老化机制**,需要根据诊断画像采取不同的修复策略。 这意味着,依赖“第一天”的强模型远远不够。可靠的代理部署需要**生命周期评估、机制级诊断和分阶段针对性修复**。 ## 行业启示:从“模型评估”到“系统评估” 这项研究对AI工程实践有直接指导意义。当前业界热衷于发布更强大的基础模型,但部署后的可靠性问题同样重要——甚至更重要。AgingBench 提供了一个框架,帮助开发者识别代理“衰老”的症结,并采取预防性维护措施。 例如,在客户服务、金融交易、医疗咨询等长期运行的代理系统中,定期的“体检”和“保养”将成为标配。未来,代理的生命周期管理可能像软件工程中的持续集成/持续部署(CI/CD)一样不可或缺。 ## 总结 AI代理的老化是一个真实且多维的问题。AgingBench 不仅揭示了这一现象,还提供了诊断工具。对于任何部署长期运行AI代理的团队而言,从“一次性评估”转向“持续可靠性监控”将是必然趋势。

Anthropic4个月前原文

arXiv:2605.26256v1 Announce Type: new Abstract: Multimodal large language model (MLLM)-based embodied agents have shown strong potential for solving complex tasks in physical environments. However, personalized assistance requires more than following generic instruction or recognizing object categories. In real-world scenarios, the intended target is often specified only implicitly through prior interactions, requiring agents to leverage personalized context accumulated over time. In this work,

Anthropic4个月前原文

大型语言模型(LLM)是否真的能像人类一样内省——检测并报告自己的内部状态?近期 arXiv 上的一篇论文《Can LLMs Introspect? A Reality Check》对此提出了质疑。研究团队借鉴人类元认知研究的经验,认为现有的行为证据可能只是表面模式匹配的结果,而非真正的内省。 ## 研究背景 此前有多项研究声称 LLM 具备内省能力,例如模型能够检测自身内部状态是否被篡改,或根据隐藏状态预测标签。但这些结论主要基于行为实验,缺乏对内在机制的严格区分。 ## 重新检验两个实验范式 论文重点分析了两个代表性范式: ### 1. 内部状态篡改检测 在原始实验中,模型需要判断其内部状态是否被干预。但新研究发现,**模型无法可靠地区分内部状态干预与输入层面的操作**。例如,当输入被巧妙修改时,模型同样会报告“异常”。这表明模型成功识别的是更广义的异常信号,而非专门针对内部状态的感知。 ### 2. 隐藏状态标签预测 第二个范式中,模型需要根据自身隐藏状态预测标签。但论文指出,**仅基于输入的分类器就能达到与模型内省预测相当的性能**。这意味着模型可能只是利用了输入中的表面线索,而非真正访问了内部表征。 研究还设计了一个**重标号控制实验**:打乱任务语义,迫使模型依赖内部表征。结果模型表现接近随机水平,进一步削弱了内省假说。 ## 关键结论 作者强调,**行为证据本身不足以证明强内省主张**。要确认 LLM 具备元认知监控能力,需要更严格的实验设计,例如区分内省与模式匹配、排除输入层面的混淆变量。 ## 行业启示 这一研究对 AI 安全与可解释性有重要影响。如果 LLM 无法可靠内省,那么依赖模型自我报告错误或不确定性(如“我不知道”机制)可能不可靠。未来需要开发更严谨的评估方法,而非仅凭行为表现下结论。 > 一句话总结:**LLM 可能并非真正“知道自己在想什么”,而是擅长根据训练数据中的模式做出看似内省的反应。**

Anthropic4个月前原文

AI智能体正逐步在复杂的、长周期的企业运营任务中展现价值,但为这些任务构建训练与评估环境始终面临一个“不可能三角”:真实性、可验证性与规模化难以兼得。来自学术界的最新研究指出了这一困境的核心症结——**工件漂移(Artifact Drift)**,并提出了一套名为 **Anchor** 的解决方案。 ### 什么是“工件漂移”? 在传统的基准生成流程中,任务指令、运行环境、评分标准(Oracle)和验证器往往由松散耦合的不同流程分别创建。这导致一个常见但隐蔽的失败模式:这些“工件”之间对任务要求理解不一致。例如,指令要求“采购A零件”,但环境配置中可能缺少该零件库存,或者评分标准只检查了采购订单数量而非零件型号,最终产生**无法完成、可被奖励黑客利用或前后矛盾**的测试环境。这种不一致性就是“工件漂移”。 ### Anchor:从源头对齐的生成管线 为了消除漂移,研究者提出了 **Anchor** 这一任务生成管线。其核心思路是将**领域专家对业务工作流的规范描述**形式化为**约束优化程序**。从单一的参数化规范出发,管线能够联合生成以下所有要素: - **自然语言指令**(智能体需要理解的任务描述) - **环境配置**(智能体运行所需的初始状态) - **经求解器认证的正确答案**(确保存在且唯一的最优解) - **基于状态的验证器**(只根据最终业务状态判断对错,而非过程) 通过修改生成参数,可以轻松创建难度可控、最优解已知的新任务。由于验证器只关注“最终业务状态是否正确”,生成的基准环境天然具有**奖励抗操纵性**,且与具体框架无关。 ### ERP-Bench:300个长周期任务的实战检验 研究团队将 Anchor 应用于一个**生产级ERP系统**,生成了名为 **ERP-Bench** 的基准测试集,包含300个覆盖采购与制造流程的长周期任务。实验发现: - 生成参数能够可靠地预测任务的实际难度。 - 前沿模型(Frontier Models)在 **26.1%** 的试验中满足了显式任务约束,但仅有 **17.4%** 的试验达到了完全最优解。 这一结果表明,当前最强AI在处理需要精确状态匹配的企业级任务时,仍有显著差距。而Anchor提供的可审计、可复现的生成流程,为衡量和提升这种能力提供了坚实基础。 ### 意义与展望 Anchor 和 ERP-Bench 的价值不仅在于一个具体的基准,更在于提出了一种**构建可审计评估环境的具体方法论**。对于希望将AI智能体部署到财务、供应链、制造等严肃商业场景的企业而言,拥有一个能确保“环境不撒谎”的测试平台至关重要。该工作已被 **RLEval 2026 研讨会**(ACM AI与智能体系统会议)接收,代码与数据集也已开源。 未来,随着智能体承担的经济价值越来越高,像 Anchor 这样从生成源头保证一致性的技术,将成为AI安全和可信评估中不可或缺的一环。

Anthropic4个月前原文

长期运行的AI智能体需要持久记忆,以支持跨会话学习、减少重复上下文注入并实现过往决策审计。然而,现有智能体记忆系统和数据库范式将记忆简单等同于存储,将正确性局限于记录、嵌入或边的层面,导致**四大失效模式**:无节制增长、语义修订缺失、容量驱动遗忘和只读检索。 来自康考迪亚大学的研究者在论文《智能体记忆是数据库吗?》中提出,长期AI智能体记忆本质上是一种**新型数据管理工作负载**,其正确性应取决于状态轨迹而非单个记录。他们形式化了**受控演化记忆(GEM)**模型,用四个状态级操作替代传统记录级操作:**摄取、修订、遗忘和检索**,并定义了六条正确性条件来约束状态演化。理论分析表明,无论采用何种存储模型,记录级系统都无法满足这些条件。 论文还展示了基于属性图后端的原型系统**MemState**,验证了GEM的可行性,同时揭示了与原生引擎之间的差距。研究者指出,现有数据库系统(如向量数据库、图数据库)在支持长期记忆方面存在根本性不足,亟需面向记忆的数据管理新范式。 该工作为AI记忆系统设计提供了全新视角:记忆不应是静态存储,而应是动态、可治理的演化过程。未来研究方向包括记忆专用存储引擎、语义修订机制以及遗忘策略的优化。

Anthropic4个月前原文

## 让 AI 学会“搭积木”:BrickAnything 突破物理可建造性瓶颈 在计算机图形学与人工智能交叉领域,如何将任意3D形状自动转化为由标准砖块(如乐高积木)构成的、物理上可稳定搭建的结构,一直是一个极具挑战性的问题。这不仅要求几何形状的还原,更需满足**离散零件约束**与**结构稳定性**——例如,砖块必须互锁、不能悬空、整体重心不能偏移。 近日,来自清华大学等机构的研究团队在 arXiv 上发表了论文 **《BrickAnything: Geometry-Conditioned Buildable Brick Generation with Structure-Aware Tokenization》**,提出了一种全新的自回归生成框架,旨在解决现有方法的根本性缺陷。 ### 现有方法的两难困境 论文指出,当前主流的砖块生成方法主要分为两类: - **启发式优化法**:通过局部搜索或迭代调整来匹配目标形状。但当目标形状本身不满足预定义的约束(如某些曲面、薄壁结构)时,优化过程可能完全失败,导致无解或生成大量不合理的砖块。 - **序列生成法**:直接预测砖块放置的顺序。然而,这类方法往往**缺乏对底层3D几何与装配关系的显式建模**,导致生成序列中频繁出现无效中间状态(如砖块悬空、碰撞),需要大量后处理修复。 ### BrickAnything 的核心创新:结构感知树分词 BrickAnything 的关键突破在于提出了一种**结构感知的树状分词(Structure-Aware Tree Tokenization)**。传统方法将砖块序列视为线性 token 序列,忽略了砖块之间的局部依附关系。而 BrickAnything 将砖块结构表示为**一棵树**,其中每个节点代表一块砖,父子关系表示“上层砖块依附于下层砖块”。 这种表示方式有两大优势: 1. **物理一致性**:生成过程模拟了真实搭建中“从下往上、逐层支撑”的逻辑,天然避免了悬空等无效状态。 2. **减少无效回滚**:实验表明,相比线性排序,树分词显著降低了生成过程中的回滚与重生成次数。 ### 技术细节与性能提升 除分词外,BrickAnything 还引入了三项关键技术: - **偏好对齐后训练(Preference-based Alignment Post-training)**:通过强化学习思想,让模型优先生成稳定性高、几何保真度好的结构。 - **有效性约束解码(Validity-constrained Decoding)**:在推理阶段实时检查每一步的物理可行性,及时修正。 - **自适应回滚(Adaptive Rollback)**:当检测到无法继续时,自动回退到合理状态重新生成。 输入方面,模型以**点云**作为统一几何接口,可接受来自网格、CAD模型或深度扫描的任意3D形状。输出则是一组可直接用于搭建的砖块序列。 ### 行业意义与应用前景 BrickAnything 的发布对多个领域具有潜在价值: - **玩具与教育**:可自动将孩子绘制的3D模型转化为乐高搭建指南。 - **建筑与制造**:辅助设计低成本、易装配的预制件结构。 - **机器人自主搭建**:为机器人提供符合物理规则的搭建规划。 论文在多个基准测试中验证了其优越性:生成的砖块结构在**几何误差、稳定性评分和物理可建造率**上均显著优于现有方法。不过,研究团队也坦诚,当前框架在处理超大场景时的推理效率仍有优化空间。 ## 小结 BrickAnything 不仅是一个技术突破,更代表了一种思路转变:**让 AI 先理解“如何搭建”,再学习“搭建什么”**。通过结构感知分词将物理常识融入生成过程,它有望成为连接数字3D世界与物理积木世界的桥梁。

Anthropic4个月前原文

近日,一篇预印本论文(arXiv:2605.26305)详细介绍了两套用于科学工作流的自主智能体AI框架。这两套系统均采用“本地身体、远程大脑”的混合架构,通过Google Colab运行Python本地协调器,调用大型语言模型(LLM)云端后端。 ## 两大智能体:DeepTS与DeepScribe 第一个智能体名为**DeepTS/DeepCollector**,专门用于自动化大规模时间序列数据集的**整理、提取与去重**。它通过精细的属性提取(即“细胞级RAG”)、远程数据检查以及分布式并发控制等系统工程手段,克服了当前最先进系统在上下文与推理能力上的局限。 第二个智能体**DeepScribe**则是一个自主演示分析器,能够将视觉密集、数学复杂的物理讲座视频转化为结构化的科学报告。这为教育、科研记录与知识传播提供了新的自动化路径。 ## 架构与创新 论文强调,这些智能体并非简单的LLM调用,而是通过**混合架构**实现自主决策:本地协调器负责任务调度与数据预处理,云端LLM负责高级推理与生成。关键创新包括: - **细胞级RAG**:在细粒度层面提取属性,提升信息检索的精准度。 - **远程数据检查**:允许智能体在不下载全部数据的情况下进行验证。 - **分布式并发控制**:确保大规模处理时的数据一致性与效率。 ## 未来方向:深度知识图谱与高能物理 论文最后展望了将DeepTS推广至**深度知识图谱**的设想,并讨论了该概念在**高能物理**(特别是DeepQCD)中的应用。这意味着智能体AI不仅能处理结构化数据,还能探索粒子物理中的复杂理论关系。 ## 行业意义 这项工作展示了智能体AI在科学领域的落地潜力——从数据清洗到知识提取,再到跨模态内容生成。它突破了传统LLM仅作为对话助手的限制,真正让AI成为可自主执行多步骤任务的“科研协作者”。随着类似框架的成熟,未来科学家可能将更多重复性工作交给智能体,而专注于创造性假设与实验设计。

Anthropic4个月前原文

约束获取(Constraint Acquisition, CA)及相关研究——即从领域知识工件中验证和增强数学规划(MP)模型——当前受限于不充分的基准测试。这一缺陷阻碍了可重复性和跨研究可比性,进而拖慢了CA方法的成熟进程。现有基准测试集原本是为求解器评估而设计,并非用于衡量CA算法。它们组织松散,对同一问题处理不一致,并且缺失CA方法所需的领域知识工件。 为了填补这一空白,来自波兰的研究团队推出了 **MPMMine**——一套专为评估从多样领域知识工件中发现、验证和增强MP模型的算法而设计的基准测试套件。MPMMine的设计遵循六大原则:**一致性、标准化、完整性、可扩展性、开放性和版本控制**。它采用统一的结构,并依赖开放格式:MiniZinc、CommonMark和JSON。 该基准测试集为每个问题提供多个模型,每个模型包含数十个实例,以及数千个整数域和连续域上的解与非解,同时附带自然语言描述以支持文本到模型(text-to-model)方法。研究团队强调,现有基准测试集如MIPLIB、MINLPLib等虽在求解器社区中广泛使用,但它们并未考虑CA方法的特定需求,例如需要明确的领域知识(如部分解、约束模板等)。MPMMine的推出有望为CA社区提供一个标准化、可复现的评估平台,推动该领域的健康发展。 相关论文以《Constraint acquisition needs better benchmarks》为题发表在arXiv上,并附有完整的数据集链接。

Anthropic4个月前原文