SheepNav

AI 资讯

每日聚合最新人工智能动态

Needle:Slack与Teams中的主动式GTM智能体

Needle 是一款嵌入 Slack 和 Teams 的主动式 GTM(Go-to-Market)智能体,它能自动监测团队沟通中的商机信号,主动提醒销售跟进、协调内部资源,从而缩短销售周期、提升转化率。 ## 核心能力 - **主动监测**:Needle 持续扫描 Slack 和 Teams 中的对话,识别潜在客户需求、项目变更、竞品提及等关键信号。 - **智能提醒**:当发现高价值线索时,Needle 会直接@相关成员,并附上上下文摘要与建议行动。 - **资源协调**:自动拉取内部数据(如客户历史、合同条款),帮助团队快速决策。 ## 适用场景 对于依赖即时沟通的销售团队,Needle 解决了信息碎片化的问题。例如,当客户在群聊中提出紧急需求,Needle 可以立即通知产品经理和销售代表,并触发标准流程。 ## 行业背景 2024年,GTM 工具正从被动记录转向主动干预。Needle 的定位与 Gong、Chorus 等对话智能平台互补——前者侧重实时行动,后者侧重事后分析。其核心差异化在于“嵌入协作工具”而非独立应用,降低了使用门槛。 ## 小结 Needle 代表了 GTM 工具的新方向:让 AI 成为团队协作的“第六感”,在信息流动中即时捕获商机。对于追求效率的 B2B 团队,这是一个值得关注的工具。

Product Hunt24521天前原文
html.contact:可免费测试后再付费的全功能表单后端服务

在构建网站时,联系表单几乎是标配功能,但处理表单提交的后端服务却常常让开发者头疼——要么需要自行搭建服务器,要么付费前无法确认服务是否满足需求。**html.contact** 正是为解决这一痛点而生:它提供完整的表单后端服务,并允许用户在付费前无障碍测试,确保一切符合预期。 ## 核心亮点:先试后买 传统表单后端服务往往要求用户先订阅付费计划,才能获得完整功能体验。而 html.contact 打破了这一惯例。用户可以直接在免费测试阶段使用全部功能,包括数据存储、邮件通知、反垃圾保护等。只有当确认服务稳定可靠后,才需要根据使用量选择付费方案。这种 **“零风险测试”** 模式,尤其适合个人开发者、初创团队以及需要快速验证产品需求的场景。 ## 功能与使用场景 html.contact 支持将 HTML 表单直接指向其 API 端点,无需编写后端代码。它提供: - **即时邮件通知**:每当用户提交表单,网站管理员会收到邮件提醒。 - **数据面板**:在后台查看所有提交记录,支持导出。 - **垃圾过滤**:内置验证码和规则引擎,减少无效提交。 - **Webhook 集成**:可将数据转发至其他服务(如 Slack、CRM)。 对于 **着陆页、产品内测注册、活动报名** 等轻量级表单需求,html.contact 几乎可以即插即用。而传统方式下,开发者可能需要配置服务器、数据库和邮件服务,耗时数小时甚至数天。 ## 行业背景:无后端趋势下的新选择 随着低代码和无代码工具的兴起,越来越多的非技术人员开始自主搭建网站。表单后端服务作为“无后端”基础设施的一部分,竞争日趋激烈。类似产品如 **Formspree、Web3Forms** 等已占据一定市场份额,但 html.contact 通过 **“免费测试完整功能”** 的差异化策略切入市场,降低了用户的决策成本。对于开发者而言,这意味着可以在不投入任何资金的情况下,评估服务的可靠性、响应速度和数据安全性。 ## 小结 html.contact 以“先试后买”的直白理念切入表单后端市场,为开发者和站长提供了一个低风险的选项。如果你正在寻找一个开箱即用、无需维护的表单处理方案,不妨在付费前先免费测试它的全部功能。

Product Hunt10521天前原文

印度连续创业者 Bhavin Turakhia 正以个人资金押注 **3000万美元**,打造一款名为 **Neo** 的企业级AI工作平台,目标直指微软Office和Google Apps。现年46岁的Turakhia认为,AI时代的工作软件必须从零重构,而非简单叠加聊天机器人。 ## 从零开始的AI原生设计 Turakhia将Neo比作“iPhone”,而传统办公软件则是“诺基亚”。他表示:“如果你想造iPhone,不可能用诺基亚的零件拼凑出来。”Neo自今年4月内部上线以来,集成了项目管理、文档、文件存储和AI功能,旨在让AI成为工作的主动参与者,而非被动工具。 ## 模型无关性与市场策略 Neo采用**模型无关**架构,企业可自由切换AI模型,避免被单一供应商锁定。Turakhia坦言,企业软件从未“赢家通吃”,即使只占全球企业AI支出的**2%到5%**,也足以成就一家大公司。目前Neo已在Turakhia旗下的Zeta等公司内部使用,并计划于近期向外部客户开放。 ## 竞争激烈的企业AI赛道 Turakhia的赌注正值企业AI领域竞争白热化:微软、谷歌、Salesforce正将AI嵌入全线产品;Anthropic、OpenAI等实验室,以及Notion、Superhuman等效率工具公司也在重塑工作流。但Turakhia认为,传统厂商受限于旧架构,难以真正拥抱AI。 值得注意的是,投资者Chamath Palihapitiya也采取了类似策略——先用个人资金启动企业AI编程公司8090,随后在本周完成1.35亿美元融资。这或许表明,在AI浪潮中,个人重注正成为一种新趋势。

TechCrunch21天前原文

## 当AI遭遇道德困境:有限理性框架下的道德计算新范式 传统上,道德认知被建模为对固定伦理理论(如义务论、后果论、美德伦理学)的遵循,表现为静态规则或价值函数。然而,这种视角忽视了智能体(无论是人类还是AI)在计算资源上的根本限制。近日,一篇发表于AAAI-26机器学习伦理研讨会的论文《Bounded Morality: Defining the Space of Moral Computation》提出了**有限道德(Bounded Morality)** 框架,将赫伯特·西蒙的有限理性概念扩展至道德领域,为理解AI系统的道德对齐提供了全新视角。 ### 两个维度定义道德空间 论文作者Max Kanwal、Caryn Tran和Patrick Mineault指出,道德问题可以沿着两个正交维度进行形式化: - **道德广度(Moral Breadth)**:被视为道德相关实体的范围,例如是否仅考虑人类,还是扩展到动物、生态系统甚至AI本身。 - **道德深度(Moral Depth)**:评估这些实体交互所需的推理整合程度,例如是简单规则判断还是需要复杂的因果推理。 由于有限的计算资源,这两个维度之间存在不可避免的**权衡**,从而定义了一个可行的道德计算空间。在这个空间内,不同的伦理理论并非关于道德真理的竞争性主张,而是针对不同需求场景的局部高效策略。 ### 从固定规则到资源约束下的策略 这一框架颠覆了传统观点:道德不是一套放之四海而皆准的规则集合,而是资源约束下的优化结果。例如,在紧急情况下,人类可能依赖快速直觉(低深度、低广度),而在深思熟虑时则能考虑更广泛的利益相关者(高广度、高深度)。AI系统的道德对齐因此不再取决于对人类判断的直接模仿,而依赖于**道德推理能力的扩展与分配**。 论文还引入了**道德遗憾(Moral Regret)** 和**约束下的道德进步(Moral Progress under Constraint)** 的形式化概念。道德遗憾指智能体在有限资源下做出的决策与理想决策之间的差距;道德进步则体现为通过优化资源分配来缩小这一差距。 ### 对AI对齐的意义 对于AI安全领域,这一框架具有重要启示。当前主流方法试图让AI模仿人类道德判断,但人类的道德决策本身也受限于有限资源。直接模仿可能将人类的偏见和局限性一并复制。相反,研究者应关注如何为AI系统设计可扩展的道德推理能力,使其能在不同情境下动态调整广度与深度,从而做出更优决策。 论文本身是理论性的,但为后续实证研究奠定了基础。例如,可以设计实验测量不同AI模型在道德广度与深度上的表现,或开发新的训练方法以优化资源分配。 ### 小结 有限道德框架将道德问题重新定义为一种计算资源分配问题,为理解人类道德认知和设计道德AI提供了统一的理论基础。它提醒我们:**完美的道德是不存在的,但在资源约束下追求更优的道德计算是可能的**。这一思路或许能帮助AI社区跳出“对齐人类价值观”的模糊目标,转向更可量化的道德计算能力评估与优化。

Anthropic21天前原文

## 从自由代码到结构化配置:一种更可靠的数据采集方案 大型语言模型和智能体虽然能根据自然语言需求生成网络爬虫,但直接生成代码的方式因依赖错误、选择器失效、模式不匹配以及页面结构异构等问题而不可靠。最新研究提出了一种**约束化、可验证的智能体框架**,将LLM输出从自由形式的代码转变为**类型化的JSON采集器配置**,从而显著提升可靠性与可复用性。 ### 核心创新:六类采集器分类法 该框架的核心是一套**六类型采集器分类法**,配合模板和效用函数约束、静态Airflow DAG执行、基于规则的质量检查以及结构化反馈修正。这种设计将智能体的任务从“写代码”简化为“填配置”,大大降低了出错的概率。 ### 实验验证:零执行阶段Token消耗 在138个任务的实验中,该分类法能很好地支持基于描述的需求分类,但同时证实:稳定的实例化需要完成源、字段和执行约束,而不仅仅是初始描述。在80个独立源验证的任务上,该框架实现了**零执行阶段LLM Token消耗**,且平均挂钟时间最低。它用适度的一次性生成质量,换取了**可复用、确定性、可验证的执行路径**,特别适合重复调度的采集任务。 ### 行业意义:降低AI应用门槛 这项研究对于AI行业的数据收集环节具有实际价值。传统上,构建可靠的网络爬虫需要大量人工调试,而LLM直接生成又不够稳定。该框架通过将不可控的代码生成转化为可控的配置生成,让数据采集变得更**低成本、可验证**,为需要持续获取开放网络数据的企业和研究者提供了一种新选择。 > 论文地址:arXiv:2607.00035

Anthropic21天前原文

主流AI对齐方法将人类偏好视为固定目标,但新研究指出偏好是动态演变的,AI系统本身也在参与塑造偏好。研究者提出“建设性对齐”范式,将对齐问题重新定义为对偏好演化轨迹的控制,而非静态满足。 ## 从“静态满足”到“动态治理” 传统的AI对齐研究假设人类偏好是稳定、可测量的,AI系统只需推断并优化这些偏好即可。然而,大量来自行为经济学和心理学的证据表明,偏好具有**层次性、动态性**,并在与自适应技术的交互中不断被**构建**。特别是当AI系统变得更具持续性、个性化和社交嵌入性时,它们会潜移默化地影响人们注意什么、重视什么以及认可什么。 来自最新arXiv论文《Constructive Alignment: Governing Preference Dynamics in Human-AI Interaction》的研究者Max Kanwal和Caryn Tran指出,这种“偏好固定假设”与现实严重脱节。他们引入**建设性对齐(Constructive Alignment)** 这一新范式,将对齐重新定义为对**演化中的人类偏好轨迹的控制问题**,而非静态偏好满足。 ## 控制论框架下的偏好演化 研究团队借鉴行为经济学、心理学和建构主义社会理论,将偏好建模为**分层状态变量**,这些变量在与AI系统的交互中不断演化。他们提出了一个控制论框架,其中系统动作和交互设计共同影响**世界状态**和**人类评价状态**。这意味着,AI系统不仅是工具,更是偏好形成的参与者。 研究者认为,对齐的核心不在于控制AI行为本身,而在于**调节AI系统如何影响人类偏好的演化**。具体而言,需要确保价值轨迹满足以下条件: - **连贯性**:偏好变化不矛盾,保持内在一致性。 - **反思性认可**:用户能在事后认同自己的偏好演变。 - **认知基础**:偏好基于充分的信息和理性思考。 - **抗操纵性**:防止系统利用漏洞诱导用户形成非自愿偏好。 - **赋能性**:在不确定性中帮助用户做出更好的选择。 ## 对齐的新目标:治理长期价值形成 这一框架将对齐问题从“让AI做对人类有益的事”转变为**“确保人类在与AI互动中形成好的偏好”**。论文强调,随着AI系统越来越深入地嵌入日常生活,它们实际上在参与**长期价值形成**过程。例如,推荐算法可能改变用户的审美偏好,社交机器人可能影响用户的情感倾向。 建设性对齐要求开发者不仅要关注AI的即时输出,还要设计交互机制,使用户的偏好演化路径保持在健康、自主的轨道上。这包括提供可解释的反馈、保留用户拒绝选项、以及定期评估偏好变化的方向。 ## 结语 这项研究为AI对齐领域提供了全新的理论视角,指出当前方法的根本局限。未来,AI系统可能需要内置“偏好监督”模块,实时监测并引导用户偏好的健康发展。对于行业而言,这意味着从追求“用户满意度”转向追求“用户偏好质量”。该论文将在AAAI-26机器学习伦理研讨会上发表。

Anthropic21天前原文

arXiv:2607.00155v1 Announce Type: new Abstract: We study runtime human oversight of an AI agent when private information runs in both directions: the human privately knows her reward function, while the AI privately knows the quality of the action it proposes. This is the kind of asymmetry that arises naturally when an autonomous robot or software agent has inspected a situation its human supervisor cannot directly assess. Building on Cooperative Inverse Reinforcement Learning (CIRL) and the Ove

Anthropic21天前原文

机械可解释性(Mechanistic Interpretability)领域已积累了丰富的组件级分析成果,能够刻画神经网络各组件编码的内容及其交互方式。然而,这些分析的输出——选择性表、电路图、特征列表——往往锁在各自研究的笔记本中,难以复用:既不能组合,也无法用自然语言查询,更无法直接用于下游审计或干预。近日,一篇由 Hussein Chouman 等人提交至 arXiv 的论文(编号 2607.00089)指出,**这些分析与下游应用之间的表征层本身就是一个可独立评估的瓶颈**,并为此提出了 **Manifestation Unit(显现单元)协议**——一种类型化的元组协议,扩展了注意力头原语,用于将组件级统计信息组织成结构化字段,并通过混合检索实现自然语言查询。 ### 协议核心:类型化元组与自动填充 Manifestation Unit 协议定义了一个五元组 (E, S, R, D, G),其中 E 代表实体(entity),S 代表选择性(selectivity),R 代表表示(representation),D 代表动态(dynamics),G 代表通用属性(general)。针对 Transformer 架构,协议额外引入了注意力头原语 T。这些字段由算法**自动填充**,无需人工标注,从而大幅降低了结构化分析的准入门槛。 研究者在三类模型上实例化了该协议:生成式视觉模型(beta-VAE)、判别式视觉模型(CNN)以及语言模型(GPT-2)。实验结果表明,**类型化的结构化表示在检索任务上显著优于非结构化基线**。更关键的是,通过该协议检索到的 CNN 滤波器在匹配预算控制下满足**因果充分性和必要性**条件——这意味着协议提取的组件不仅是统计相关,还具备真正的因果解释力。 ### 关键发现与核心字段 论文还揭示了一个有趣的现象:在注意力头检索实验中,协议能够**无修改地吸收注意力头原语**,并在检索预算匹配的控制下成功恢复已知的 **IOI(Indirect Object Identification)电路成员**。通过对字段进行消融实验,研究者发现存在一个**不可约的二元核心 (S+R)**——即选择性与表示字段——其余字段要么冗余,要么相互干扰。这一发现提示,未来的可解释性基础设施或许可以聚焦于这两个核心维度。 ### 意义与局限 作者强调,这项工作并非前沿规模的验证,而是提出一种**基础设施级的模式协议**,旨在让机械可解释性的输出变得可组合、可查询、可行动。当前协议已在多个模型族上验证了其有效性和扩展性,但距离完全自动化、大规模应用仍有距离。论文附带了交互式演示链接,供社区进一步探索。 对于 AI 安全与对齐领域而言,**标准化表征层**是走向可审计、可干预系统的关键一步。Manifestation Unit 协议提供了一种将碎片化分析成果“焊接”为统一查询接口的可行路径,有望推动机械可解释性从“手工作坊”走向“工程化”阶段。

HuggingFace21天前原文

生成模型作为物理模拟的替代方案正受到广泛关注,但其输出往往不满足物理定律(如守恒律、边界条件和非线性不变量)这一致命缺陷,严重限制了它们在科学工程领域的落地。来自 MIT 等机构的研究团队在最新论文中提出 **SNAP-FM**(稀疏非线性加速投影流匹配),通过将约束采样问题转化为可高效求解的稀疏非线性优化问题,在不重新训练模型的前提下,显著加速了物理约束的强制执行。 ### 痛点:生成模型“无视”物理定律 传统生成模型(如扩散模型、流匹配模型)可以快速生成逼真的流体、结构力学等物理场,但它们的输出常常违反能量守恒、质量守恒等基本物理规律。虽然“约束采样”技术可以在推理时通过投影、校正等步骤强制满足约束,但当约束为非线性时,每一步的计算成本极高。更糟糕的是,现代机器学习框架(如 PyTorch、JAX)的密集张量运算和有限的稀疏求解器组合能力,使得物理约束中自然存在的稀疏结构难以被利用,导致批处理非线性优化在实践中的效率极低。 ### SNAP-FM 的创新:让稀疏结构“现形” SNAP-FM 的核心洞察是:在约束采样的投影子问题中,由于样本批处理和局部 PDE 耦合,雅可比矩阵和 KKT 系统天然呈现 **块稀疏** 结构。研究团队利用 Julia 生态中的 `Symbolics.jl` 和 `ModelingToolkit.jl` 显式地暴露这一结构,然后通过 `NonlinearSolve.jl` 和 GPU 稀疏分解来求解得到的稀疏非线性规划。 与传统的密集优化方法相比,这种“先暴露结构,再高效求解”的策略避免了大量无效计算。在 **物理约束流匹配(PCFM)** 框架下,针对线性、非线性、一维和二维 PDE 基准测试,SNAP-FM 在保持约束满足精度的同时,**非线性约束投影的速度提升了数倍**。 ### 实验效果:速度与精度的双赢 论文在多个经典物理场景中验证了 SNAP-FM 的效果: - **线性约束**(如一维热方程边界条件)下,加速比达到 **3-5 倍**; - **非线性约束**(如二维 Burgers 方程、Navier-Stokes 方程的不变量)下,加速比依然维持在 **2-4 倍**,且约束违反量完全归零。 关键的是,所有这些加速都是在 GPU 上实现的,意味着 SNAP-FM 可以无缝融入现有的深度学习推理管线。 ### 行业意义:科学机器学习的“可信任”一步 SNAP-FM 的提出,标志着生成模型在科学计算领域迈出了从“看起来像”到“真的是”的关键一步。过去,物理信息神经网络(PINNs)和神经算子虽然能直接编码物理约束,但训练成本高昂;而纯生成模型虽然快,却不可靠。SNAP-FM 提供了一种“即插即用”的约束后处理方法,让任何预训练的生成模型都能在推理时强制遵守物理定律,且不牺牲生成速度。 对于气候模拟、药物设计、工业数字孪生等对物理一致性要求极高的领域,这项技术无疑打开了一扇新的大门。未来,随着稀疏 GPU 优化库的进一步成熟,类似 SNAP-FM 的方法有望成为科学生成模型的标准配置。

HuggingFace21天前原文

## 一、背景与挑战 在安全分类任务中,标注数据往往稀缺,半监督学习(SSL)通过从少量标注样本传播标签到大量无标注数据来缓解这一问题。然而,实际安全应用常将SSL当作黑盒使用:采用默认参数、固定分类器,且不处理伪标签导致的类别不平衡。这导致SSL的潜力未能充分发挥。 ## 二、研究目标与核心问题 近期研究显示,通过联合搜索、AutoML或逐组件调优来优化SSL流水线可带来可观的性能提升。但这些增益的来源并不明确:它们可能源于SSL与分类器之间的有益交互,也可能仅仅是因为调优了下游分类器。为此,本文旨在解耦这两种效应,针对**二元表格安全数据**,使用经典SSL和基于树的分类器进行系统分析。 ## 三、方法:SemiScope分析框架 研究者构建了**SemiScope**——一个分析工具而非部署推荐。它利用**贝叶斯优化**联合调优SSL设置、置信度过滤、过采样和分类器。关键控制组**Tuned-Clf**固定SSL为默认值,但获得与SemiScope相同的100次分类器调优预算和验证集阈值调优。在10%标注率下,使用配对TOST检验比较两者,最小效应量为±1.0 G-Mean。 ## 四、实验结果 - **SemiScope**在所有五个数据集上击败了所有默认SSL基线,相比最强基线提升**0.7-12.7个点**。 - 在等预算控制下,**Tuned-Clf**在4/5数据集上与完整流水线统计等价;Phishing数据集结果不明确。 - 仅分类器超参数优化(HPO)就恢复了SemiScope相对于默认自训练(ST)+随机森林(RF)增益的中位数**86%**。 ## 五、结论与实用建议 本文的可复用贡献是**分解协议**。一个更简单的方案足以奏效:使用自训练,用贝叶斯优化调优分类器,并在验证数据上调优决策阈值。该方案在四个数据集上以20-30%标注率即可达到监督RF的1个G-Mean以内,在Drebin数据集上需40%标注率,且在所有数据集上标注率均低于或等于默认ST+RF。 ## 小结 SemiScope的研究表明,在半监督安全分类中,分类器调优比复杂的联合优化更为关键。实践者应优先关注分类器的超参数优化和阈值调整,而非过度设计SSL流水线。

HuggingFace21天前原文

在临床研究中,生存分析模型常因数据稀缺而受限:事件需多年随访才能累积,队列规模小,且隐私法规禁止机构间数据共享。表格生成模型虽能通过合成数据实现扩增和隐私保护,但其本身同样依赖大量数据——在小样本生存分析场景下,单一生成器几乎无法充分刻画人群分布,导致下游模型性能远不及真实数据训练。 为了解决这一矛盾,米兰理工大学的研究团队提出了 **FoGS(Filtered Mixture-of-Generators for Survival analysis)**,一种将合成数据构建从“生成”转向“样本筛选”的新框架。FoGS 的核心思路是:先由多个架构不同的生成器共同产生一个候选样本池,再通过一套基于真实数据训练的评估系统,筛选出最“可信”的样本用于下游训练。 ### 如何运作? FoGS 的流程分为两层: 1. **候选池生成**:使用四种架构各异的表格生成器(如 VAE、GAN、扩散模型等)分别生成大量合成样本,形成混合候选池。 2. **两级优化管道**: - **外循环**:优化一个“选择策略”,包括各生成器的配额、评估器权重、随机补充比例以及事件时间和删失状态的分层平衡。该策略以在下游模型上的真实数据测试性能为优化目标。 - **内循环**:在筛选出的合成数据集上训练下游模型(此处选用 XGBoost-Cox),并评估其性能。 关键创新在于 **样本可信度评分**:每个候选样本由七个在真实数据上预训练的生存模型(涵盖 Cox 比例风险、随机生存森林、深度生存模型等)进行评分,评分规则采用生存分析领域的标准指标(如负对数似然、Brier 分数),作为样本“似真性”的代理。 ### 实验结果 研究者在 16 个公开数据集上进行了“在合成数据上训练,在真实数据上测试”的评估,使用 C-index 和 IBS(综合 Brier 分数)作为指标。结果显示: - **FoGS 在 C-index 上平均提升 +2.17,在 IBS 上平均提升 +0.67**(指标范围 0–100)。 - 在 9/16 的数据集上两项指标均优于单一生成器,在 13/16 的数据集上至少一项指标提升(单侧 Wilcoxon 检验 p=0.039 和 p=0.035)。 - 在大多数队列中,FoGS 合成数据训练的性能可匹配甚至超越真实数据训练,且 **不会显著增加最近邻隐私泄露风险**(相比未筛选的合成样本)。 ### 意义与展望 FoGS 的贡献在于将合成数据问题重新定义为 **样本选择问题**:与其试图训练一个“完美”的生成器,不如利用多个生成器的多样性,并通过真实数据驱动的筛选机制来保证质量。这种方法尤其适用于隐私受限的临床环境——机构可以仅共享合成数据,而保留真实数据不外泄。 当然,该方法也存在局限:它依赖于一个初始的真实数据小样本用于训练评估器,且优化管道计算成本较高。但考虑到临床数据获取的昂贵代价,这种“一次训练、多次复用”的范式仍具有实际价值。 未来,研究团队计划探索更高效的优化算法,并将 FoGS 扩展到其他类型的生存数据(如竞争风险、时变协变量)以及多中心联邦学习场景。

HuggingFace21天前原文

一篇新论文揭示,当前大语言模型推理训练中三种主流方法——GRPO、Dr. GRPO 和 DAPO——本质上并非各自独立的技巧,而是对同一个关键数值的不同操作:**回答不一致程度**,即模型对同一问题多次采样所得答案的**标准差**。 该论文题为《GRPO, Dr. GRPO, and DAPO Are Three Operations on One Number: The Group-Standard-Deviation Identity》,由 Yong Yi Bay 和 Kathleen A. Yearick 撰写,目前已提交至 arXiv。研究者通过数学推导和实验验证,提出了一个简洁的“组标准差恒等式”,将三种看似不同的策略统一在同一个理论框架下。 ## 核心发现:所有方法都在调节同一个“拨盘” 在训练推理模型时,通常会让模型对每个问题生成多个回答,并由自动检查器标记正确或错误。这些标记的**标准差**衡量了答案的**不一致程度**:当回答对半开时标准差最大,全部一致时为零。 - **GRPO**:用标准差进行除法归一化。 - **Dr. GRPO**:直接去掉除法步骤。 - **DAPO**:丢弃标准差为零的组(即所有回答一致的情况)。 论文证明,这三种方法实际上只是同一个“拨盘”上的三个不同设定值。这个拨盘并非无关紧要:对于二元奖励(对/错),**训练更新的幅度恰好等于组内标准差**——这就是所谓的“组标准差恒等式”。 ## 意义:不一致的组才是学习的关键 这一发现带来了深刻的训练启示: - **分裂的组(高标准差)**:模型内部存在分歧,这类问题提供了最大的学习信号,应获得最高的训练权重。 - **一致的组(标准差为零)**:模型已经“同意”答案,学习信号为零,在 DAPO 中直接被丢弃,而在 GRPO 和 Dr. GRPO 中则贡献甚微。 换句话说,**模型从它尚未掌握、存在分歧的问题中学到最多**,而从已经一致的问题上学不到任何东西。这解释了为什么 DAPO 的“丢弃一致组”策略有效——它本质上是在自动识别并聚焦于有争议的样本。 ## 实验验证与行业影响 研究团队在大型真实难度数据集 **Big-Math** 上验证了这一理论,并通过受控训练实验进一步确认。结果表明,所谓的“无害归一化步骤”实际上决定了学习发生在哪里以及学习强度有多大。 这一统一视角对 AI 训练实践有直接指导意义: - 帮助研究者更理性地选择或组合这些方法; - 揭示训练过程中的“学习热点”,从而更高效地分配计算资源; - 为未来设计新的训练算法提供了理论基石。 论文作者表示,代码和数据已公开,供社区复现和进一步探索。 ## 小结 这篇论文为当前大模型推理训练中流行的三种方法提供了统一的数学解释,揭示了它们本质上都是对“组内标准差”这一单一指标的不同操作。它不仅澄清了方法间的真实关系,也为更高效、更具解释性的训练策略指明了方向。

HuggingFace21天前原文

## 从固定域到可学习域:PEFT 的下一个前沿 参数高效微调(PEFT)是当前大模型适配的核心技术之一。无论是经典的 LoRA 在空间域操作,还是近期涌现的谱方法在固定傅里叶域工作,它们都默认了一个前提:**适配域(adaptation domain)是固定的**。但一项新研究 FRAME 提出了一个根本性问题——域本身是否也应该被学习? ### 单一域并非万能 不同任务、不同层甚至不同 token,其最优的表示域可能截然不同。空间域擅长捕捉局部模式,而傅里叶域更适合全局频率特征。固定域意味着在面对多样化下游任务时,模型被迫使用同一个“镜头”去观察所有问题,这显然不是最优解。 ### FRAME:让专家“选择”自己的域 FRAME(Fractional-Fourier Mixture of Experts)的核心创新在于引入了一个**可学习的分数傅里叶阶数(fractional-Fourier order)**。每个专家都拥有一个标量阶数,该阶数连续插值于空间域(阶数=0,退化为 LoRA)与傅里叶域(阶数=1,退化为谱适配器)之间。通过路由机制,不同 token 被分配到处于空间-频谱连续体上不同位置的专家,从而让每个低秩更新都在其最紧凑的域中进行。 更巧妙的是,不同阶数的分数傅里叶算子天然互不相干(mutually incoherent),这使得专家之间自然去相关,减少了干扰,提升了多任务组合的性能。 ### 计算成本几乎不变 分数傅里叶变换通过 Chirp-FFT 代理实现,复杂度仅为 O(d log d),且每个专家仅需额外学习一个标量参数。因此,FRAME 相比标准 MoE-LoRA 几乎没有增加额外开销。 ### 实验表现:全面超越 在 LLaMA-3.1-8B 和 Qwen2.5-7B 上,FRAME 在常识推理、数学、代码和知识基准测试中,均超越了强基线 MoE-LoRA、FlyLoRA、FourierMoE 和 HMoRA,同时保持了较小的激活参数预算。分析还显示,学习到的阶数在任务和层间呈现出可解释的特化模式——例如,底层更偏好空间域,而高层更倾向频谱域。 ### 意义与展望 FRAME 提出了一种全新的视角:**适配域本身是一个可设计的自由度**,而混合专家架构为自动选择域提供了优雅的框架。这不仅提升了性能,还揭示了模型在不同层次和任务上对表示域的内在偏好。未来,这一方向可能推动 PEFT 从“固定域”走向“自适应域”,甚至结合更复杂的变换家族(如小波、自适应基)进一步扩展。

HuggingFace21天前原文

强化学习(RL)在可验证奖励的加持下,理论上能训练出校准良好的概率预测模型——因为像Brier分数这样的适当评分规则仅由真实结果计算而来,其期望值在真实概率处达到最小。然而,实际应用中,这一方法反而导致校准退化。现有补救措施主要针对认知不确定性,即模型对可验证正确或错误的答案给出置信度。 在这篇来自arXiv的论文(编号2607.00164)中,研究者将目光投向了**偶然不确定性**下的预测问题:预测本身即为输出,标签则是单一随机结果。他们以**NFL比赛实时胜率**为测试平台,以博彩市场赔率为校准基准。直接奖励模型基于每回合实际结果的做法以失败告终,因为单个结果是一个噪声极大的目标,策略梯度会污染推理链。 为此,论文提出了一个**无标签的可验证奖励**——基于历史结果估计的**状态条件经验胜率**。这一指标消除了标签噪声,同时通过直接预测或梯度掩码使梯度远离推理过程,避免其被污染。仅凭这一奖励,无需人工标签或监督微调,一个**7B参数模型**通过直接预测即可达到博彩市场的校准水平,其校准效果甚至优于零样本前沿模型。 有趣的是,该前沿模型和一种表格估计器取得了与7B模型相同的Brier分数,这揭示出市场剩余的微小优势来源于模型共享输入之外的**实时比赛信息**。而采用梯度掩码而非丢弃推理链的做法,保留了预测所依赖的推理能力——这是普通思维链训练所破坏的。 这项工作为概率预测的校准提供了一条新路径,尤其在体育博彩、天气预报、金融风控等依赖实时概率估计的领域具有潜在应用价值。它表明,精心设计的可验证奖励可以替代昂贵的人工标注,让中小规模模型也能达到专业水平。

HuggingFace21天前原文

近日,一项发表于 arXiv 的研究提出了 **RareDxR1**,一个面向罕见病诊断的端到端推理大语言模型。该模型直接从非结构化临床笔记出发,通过知识内化与自主进化学习,绕过了传统方法依赖结构化表型和检索增强生成(RAG)的局限,实现了开放式罕见病诊断的显著突破。 ### 罕见病诊断的AI困境 罕见病诊断因其症状复杂、患者数据分散且缺乏标准化的表型编码,一直是临床难题。传统AI方法通常分为两步:先利用自然语言处理提取结构化表型,再通过RAG在知识库中检索匹配。然而,这种管线式方法存在固有缺陷: - **信息丢失**:预定义本体(如HPO)无法覆盖所有罕见病症状,导致关键表型被遗漏。 - **检索瓶颈**:RAG依赖外部知识库的质量和覆盖度,且检索结果常缺乏诊断逻辑。 - **封闭决策**:模型只能在已知疾病列表中判断,无法处理未收录或新发现的罕见病。 ### RareDxR1:从“检索”到“推理”的范式转变 RareDxR1的核心创新在于**将罕见病知识直接内化到模型参数中**,而非依赖外部知识库。研究团队设计了一套渐进式端到端训练框架,包含两个关键阶段: 1. **知识内化**:通过大规模罕见病文献、病例报告和临床指南的预训练,让模型学习罕见的疾病-症状关联模式,从而摆脱对结构化表型的依赖。 2. **自主进化学习**:提出 **Reflection-Enhanced Reasoning Sampling(RERS)** 策略,让模型通过“从失败中学习”来合成专家级的诊断推理轨迹。RERS不依赖人工标注,而是让模型在模拟诊断中自我纠错,逐步优化推理路径。 此外,研究引入了**双层次课程强化学习**,先让模型掌握常见罕见病的诊断逻辑,再逐步过渡到更复杂的疑难病例,实现渐进式掌握。 ### 性能表现与行业意义 实验结果显示,RareDxR1在多个罕见病诊断基准上取得了**最先进的准确率**,尤其在开放式诊断场景中,其性能显著优于基于RAG或表型提取的基线模型。这一成果意味着AI在罕见病领域已不再局限于“检索已知”,而是真正具备了**自主推理和泛化诊断**的能力。 ### 影响与展望 RareDxR1的突破对临床辅助诊断具有深远意义。它降低了罕见病诊断对专业知识和结构化数据的依赖,有望在基层医疗和资源匮乏地区发挥价值。同时,其“无需人工标注”的训练范式也减少了数据构建成本。 未来,研究者计划进一步扩展模型的知识覆盖范围,并探索与电子病历系统的实时集成。该模型的代码和数据集将公开,为AI医疗社区提供重要基础。 > 一句话总结:RareDxR1通过内化知识与自主推理,让AI罕见病诊断从“检索匹配”迈入“自主推理”新阶段。

Anthropic21天前原文

时间序列预测是金融、能源、气象等领域的核心任务,但不同场景的数据模式和预测需求差异巨大。传统方法通常采用固定结构的Transformer模型,面对多变的任务时往往难以达到最佳性能。针对这一痛点,来自克利夫兰州立大学的研究团队提出了一种名为 **EVOTS**(Evolutionary Transformer Search)的进化神经架构搜索框架,能够自动发现适应特定预测任务的Transformer变体,相关论文已发表于arXiv并即将在2025年GECCO会议上展示。 ### 进化算法驱动的架构探索 EVOTS的核心思想是将神经架构搜索(NAS)与进化算法相结合。研究者设计了一种**模块化基因组表示**,将Transformer分解为注意力、前馈、投影等可组合的模块,每个模块的参数(如层数、头数、隐藏维度)由基因编码。进化过程中,通过交叉和变异操作生成新架构,并利用一个**修复机制**确保生成的架构结构合法(例如保证残差连接的正确性)。这种方式无需人工设计搜索空间,能够灵活探索多样化的网络结构。 ### 全面评估:多变量、多设置下的表现 研究团队在经典的**ETT数据集**(包括ETTh1、ETTh2、ETTm1、ETTm2)上进行了严格测试,覆盖了三种预测模式:单变量到单变量、多变量到单变量、多变量到多变量,以及四种预测长度(96、192、336、720)。在多变量到多变量的设定下,EVOTS搜索出的架构在均方误差(MSE)上**显著优于固定结构的Transformer基线**,部分场景提升超过10%。例如,在ETTh1数据集预测长度为720时,EVOTS的MSE为0.412,而基线为0.457。 ### 计算成本与实用价值 虽然进化搜索需要额外的计算开销,但论文报告了**训练时间**作为参考:在单个NVIDIA A100 GPU上,一次完整搜索(约50代)耗时约12小时,而搜索出的模型在后续预测任务中只需标准训练成本。这意味着对于需要长期部署的预测系统,EVOTS的搜索成本可以被摊销。 ### 行业意义与未来方向 EVOTS的提出解决了两个关键问题:一是**自动化架构设计**,减少人工调参工作;二是**任务自适应**,使模型能根据数据特性动态调整结构。这对于金融高频交易、电网负荷预测等对精度敏感的领域尤为重要。未来,研究团队计划将框架扩展到更多数据类型(如时空序列),并探索更高效的进化策略以降低搜索成本。 总结来说,EVOTS证明了进化神经架构搜索在时间序列预测中的有效性,为AI自动化机器学习(AutoML)提供了新的思路。对于追求预测精度的开发者,这一方法值得关注。

HuggingFace21天前原文

## 打破文档束缚:MMM数据模型如何重塑知识共享与AI时代的协作 长期以来,我们的信息系统大多围绕“文档”构建——这种为印刷生产和线性阅读优化的自包含单元,虽然在规模化传播上表现出色,却也带来了结构僵化、难以更新、共享和复用的根本性限制。随着大语言模型(LLM)等AI系统快速渗透内容生产,一个关键问题浮出水面:**在AI生成内容日益普及的今天,我们是否需要一种超越传统文档、同时又能兼容人类表达自由与机器互操作性的知识表示方式?** 近日,一篇题为《MMM数据模型——去中心化知识公地中知识互操作性的规范标准》的论文(arXiv:2607.00032)给出了一个值得关注的答案。该论文由Mathilde Noual撰写,提出了一种名为 **MMM(可能源自“Méta-Modèle Minimal”或类似缩写)的数据模型**,它源自跨学科协作研究的实际需求,旨在为知识文档化提供轻量级规范,同时保留文本标签的表达自由。 ### 文档模式 vs. 形式化模式:知识系统的设计困境 论文首先指出两个极端:一端是传统文档,灵活易用但缺乏结构和互操作性;另一端是严格形式化本体,虽然解决了结构化问题,却因学习成本高、维护复杂而难以大规模推广。AI系统(如LLM)虽然能高效生成文本,但并未提供统一的、可移植的知识表示方案,反而可能加剧信息碎片化。 MMM的定位正是填补这一空白:**在“完全自由”与“过度形式化”之间找到平衡点**。 ### MMM的核心设计哲学:规范约束 + 语义自由 MMM的核心创新在于将**少量规范性约束**与**自由文本标签的灵活性**相结合。具体来说,该模型要求知识条目遵循一组最小化的结构规则(例如实体关系的基本框架),但允许用户使用自然语言标签自由定义内容。这种设计有两大好处: - **跨学科互操作性**:不同领域的研究者无需事先统一术语体系,即可基于MMM结构共享和复用知识。 - **去中心化可扩展**:由于不依赖中心化的本体库或语义对齐,MMM天然适合构建去中心化的知识公地(Decentralisable Knowledge Commons),任何人都可以贡献和接入。 论文还提供了参考实现和试点部署数据,初步验证了模型的可行性和早期可用性。 ### 对AI行业的意义:知识基础设施的潜在变革 在AI技术快速迭代的当下,MMM的出现具有多重启示: 1. **为AI训练数据提供更规范的结构**:相比非结构化文档,MMM模型可让知识片段更易被机器解析和索引,有助于提升LLM在特定领域的检索增强生成(RAG)效果。 2. **推动协作式知识库建设**:跨学科团队(如生物医药+AI)可以基于MMM构建共享知识库,降低沟通成本。 3. **避免“语义锁定”**:与需要预先对齐本体的方案不同,MMM允许知识以渐进方式演化,更适合快速变化的领域。 当然,MMM仍处于早期阶段。论文并未给出大规模用户验证数据,其实际推广效果有待观察。但作为一种设计思路,它提醒我们:**在追求机器可读性的同时,不应牺牲人类的表达自由**。对于正在构建知识图谱、企业知识库或AI数据管线的团队而言,MMM或许提供了一个值得参考的折中方案。 ### 小结 MMM数据模型不是要取代文档或本体,而是试图在两者之间架起一座桥梁。它通过最小化规范来降低参与门槛,通过保留语义自由来适应多样性。在AI与人类协作日益频繁的未来,这种“轻量级互操作性”理念可能成为知识管理领域的重要基石。

Anthropic21天前原文

空中交通管理领域已有大量路径规划算法,但战术管制阶段的采纳率始终不高。近日,一篇由Yiyuan Zou、Wenying Lyu和Clark Borst联合发表的预印本论文(arXiv:2607.00064)指出,核心问题在于算法设计优先级与管制员实际需求之间的错位。为此,研究团队提出了一套专为**航路空中交通管制(ATC)**设计的无冲突路径规划算法,重点解决可解释性、计算效率与人类决策兼容性三大挑战。 ### 算法设计的两大基石 研究将算法构建在两条指导原则之上: 1. **解空间显示(Solution-Space Displays)的可解释性与灵活性**:解空间显示是一种可视化工具,能向管制员展示所有可行的安全操作选项。算法需与此兼容,不仅暴露全部可行解,还要能灵活适应动态变化的优化目标。 2. **管制员的自然决策逻辑**:算法需模仿管制员在实际工作中执行运行约束(如间隔标准、机动性限制、航路点最小化、路径实用性)时的决策过程,而非追求纯数学最优。 ### 三大冲突检测方法与两种搜索变体 算法在解空间框架内集成了三种基于意图的冲突检测方法: - **基于距离的检测**:依据预测位置间的几何距离判断冲突。 - **基于时间间隔的检测**:通过计算航空器通过同一区域的时间窗口重叠情况识别风险。 - **基于区域(Zone-Based)的检测**:将空域划分为网格区域,检测同一网格内是否存在多架航空器。 在此基础上,研究提出了两种搜索节点方案:**基于顶点(SSPPV)**和**基于边(SSPPE)**,分别对应两种变体。在荷兰马斯特里赫特高空区域管制中心(MUAC)Delta扇区的运行相关场景中,以5海里网格分辨率进行测试,结果显示:**SSPPV搭配基于区域的冲突检测表现最佳**,平均路径计算时间仅为**3.69毫秒**,完全满足实时管制需求。 ### 行业意义与未来方向 该研究的核心贡献在于将**可解释AI**理念引入空管决策支持。传统算法常被视为“黑箱”,管制员难以信任其输出,而本算法通过解空间显示提供直观的可行操作集合,使管制员能快速理解并采纳建议。此外,算法的高计算效率(毫秒级)为其嵌入现有雷达显示系统提供了可能。 论文也指出,当前研究基于特定扇区与网格参数,未来需在更复杂空域、多扇区协同以及实际人因实验中进行验证。随着空中交通流量持续增长,兼顾效率与人类认知的AI辅助工具或将成为下一代空管系统的关键组件。

Anthropic21天前原文

一项发表于arXiv的最新研究提出了“认知型AI素养”(Epistemic AI Literacy, EAIL)框架,将AI素养重新定义为一种过程导向的认知现象。研究基于AIR框架(认知目标、理想和可靠认知过程),分析了学生与生成式AI协作编程中的大规模对话数据,识别出认知目标(如掌握导向目标)和认知过程(如外包、解释寻求、验证寻求、提示监控和认知证明)的可观测维度。结果令人警醒:**78.8%的学生-AI交互缺乏掌握导向目标,依赖外包和验证寻求等不可靠策略**;仅有11.1%的交互展现出高认知参与,即掌握导向目标与认知证明等高级策略相结合。 这一发现揭示了当前AI教育中的深层问题:多数学生将AI视为“答案生成器”,而非协作学习伙伴。研究呼吁教育者重新设计AI素养课程,强调过程性认知能力培养,而非仅关注工具使用技巧。 ## 研究核心:从“工具使用”到“认知协作” 传统AI素养教育多聚焦于技术操作和伦理规范,但本研究指出,在编程等复杂场景中,学生需要具备**认知监控能力**——即明确学习目标、评估AI输出的可靠性、并动态调整提问策略。例如,当学生直接复制AI生成的代码(外包策略)时,虽然任务完成,但学习效果有限;而主动追问“为什么这段代码能解决问题?”(认知证明策略)则能深化理解。 ## 数据与方法:对话中的认知痕迹 研究者分析了包含数千条学生-AI对话的公开数据集,通过编码交互中的提问类型、反馈模式等,将认知过程分为五类: - **外包**:直接要求AI完成任务 - **解释寻求**:请求AI解释代码逻辑 - **验证寻求**:确认输出是否正确 - **提示监控**:调整提示词以优化结果 - **认知证明**:要求AI提供证据或推理 结果显示,**外包和验证寻求占比超过60%**,而认知证明仅占约7%。这表明学生在AI辅助下倾向于“省力模式”,缺乏深度认知投入。 ## 教育启示:培养“AI协作思考者” 研究者建议,未来的AI素养课程应: 1. **明确认知目标**:引导学生从“完成作业”转向“掌握概念” 2. **训练认知策略**:设计任务强制学生使用解释寻求和认知证明 3. **引入元认知反思**:让学生记录并分析自己的AI交互模式 这项研究为衡量和提升人机协作中的学习质量提供了可操作框架。正如研究者所言:“AI素养不应只是会使用AI,而是能在与AI的协作中保持认知自主性。”

Anthropic21天前原文

经过一个月的深度体验,Oura Ring 5 在佩戴舒适度和电池续航上带来了显著提升,但核心功能依然延续前代。对于已有 Oura Ring 4 的用户,是否值得升级取决于你对更轻薄设计和额外一天续航的需求。

ZDNet AI21天前原文