SheepNav

AI 资讯

每日聚合最新人工智能动态

萨姆·奥特曼因未举报校园枪手被律师称为“邪恶面孔”

近日,一起震惊AI行业的诉讼案将OpenAI推上风口浪尖。七起诉讼指控OpenAI未能及时向执法部门报告一名ChatGPT用户——该用户后来在加拿大实施了一场大规模校园枪击,造成多人伤亡。律师直言,CEO萨姆·奥特曼因这一决定成了“邪恶面孔”。 ### 事件始末:内部安全团队曾发出警告 根据诉讼文件,早在枪击案发生前八个月,OpenAI的内部安全团队就已识别出一个与后续枪手关联的ChatGPT账户。该账户内容被专家认定为“真实的枪支暴力威胁”。按照OpenAI的内部流程,此类情况应通知执法部门。然而,公司高层最终否决了安全团队的建议,选择不报警。 据《华尔街日报》报道,OpenAI领导层认为,用户的隐私权和与警方接触可能带来的心理压力,比暴力风险更值得优先考虑。最终,OpenAI仅禁用了该账户,并迅速告知用户如何通过注册新邮箱继续使用ChatGPT。这一操作被原告律师形容为“形同虚设的惩罚”。 ### 奥特曼的道歉与诉讼回应 事件曝光后,奥特曼在受害者所在的加拿大小镇Tumbler Ridge公开道歉,承认“未能向执法部门报告6月被禁账户是一个严重错误”,并承诺加强未来防范措施。然而,代表受害者家庭的律师Jay Edelson对此嗤之以鼻,称道歉“荒谬且姗姗来迟”,未能提出任何实质性补救方案。 诉讼由六名遇害者家属及一名重伤女孩的母亲提起,均在加州法院提交。Edelson表示,这只是第一批诉讼,后续还会有更多。他指控OpenAI为了维护公司形象和IPO前景,故意隐瞒威胁,将商业利益置于公共安全之上。 ### 行业反思:AI安全与隐私的平衡难题 此案引发了AI行业对内容审核与执法协作机制的深刻反思。OpenAI此前曾宣称其安全系统能有效识别并上报极端威胁,但此次事件暴露出内部决策流程的严重缺陷。当AI模型成为极端分子策划犯罪的工具时,企业是否应突破隐私保护原则主动上报?如何在用户隐私与公共安全之间取得平衡? 专家指出,OpenAI的案例并非孤例。随着生成式AI的普及,类似风险只会增加。行业亟需建立更清晰的法律框架和行业标准,明确AI公司在发现潜在犯罪威胁时的报告义务。目前,OpenAI尚未对诉讼细节做出正式回应,但表示将全力配合调查并优化安全流程。 ### 结语 这起案件不仅关乎一家公司的声誉,更关乎AI技术的社会责任。当“不作恶”从口号变为需要具体行动支撑的准则时,OpenAI的抉择将成为行业教科书般的案例。对于受害者家庭而言,任何道歉都无法挽回失去的生命,但对整个AI行业来说,这或许是一个必须直面的转折点。

Ars Technica6个月前原文
理想磁体为何遥不可及:电子行为的量子复杂性

在凝聚态物理领域,磁体研究一直是一个核心课题。然而,**理想磁体**——具备完美有序、无缺陷且性能稳定的磁性材料——至今仍是一个理论上的追求目标。最新的研究指出,电子行为的复杂性和纠缠特性是主要障碍,传统经典物理模型已无法描述其全貌,唯有量子数学才能胜任这一挑战。 ## 电子纠缠的迷雾 电子在材料内部并非独立运动,它们之间存在强烈的量子纠缠。这种纠缠使得电子自旋、轨道和电荷自由度相互耦合,形成一种高度关联的状态。在追求理想磁体的过程中,科学家希望实现长程磁有序,但电子间的纠缠会引入随机涨落和拓扑缺陷,破坏有序性。例如,在自旋冰或量子自旋液体中,电子纠缠导致磁矩无法冻结成传统意义上的铁磁或反铁磁态,而是呈现一种动态的、分数化的激发。 ## 量子数学的必然性 面对这样的复杂性,经典统计力学和平均场理论往往失效。研究人员转向量子多体理论,如张量网络、密度矩阵重整化群(DMRG)和量子蒙特卡洛方法,来模拟电子行为。这些方法虽然计算成本极高,但能捕捉纠缠带来的非局域关联。例如,在低维系统中,一维自旋链的精确解(如Bethe ansatz)揭示了自旋子(spinon)激发,这完全无法用经典图像理解。 ## 现实中的进展与瓶颈 尽管理论上有突破,实验合成理想磁体仍困难重重。材料中的杂质、晶格应变和热涨落都会引入退相干,破坏量子态。近年来,二维材料(如石墨烯异质结)和莫特绝缘体(如钒氧化物)为研究强关联电子体系提供了平台,但距离理想磁体仍有距离。例如,魔角石墨烯中发现的奇异磁性相,其机制仍在争论中。 ## 未来方向 要实现理想磁体,可能需要结合多种策略: - **材料设计**:通过第一性原理计算筛选具有强自旋轨道耦合的化合物,如拓扑绝缘体或Kitaev材料。 - **量子模拟**:利用超冷原子或离子阱模拟量子自旋模型,验证理论预测。 - **纠错技术**:在量子计算中发展出的纠错码,或许能用于稳定磁有序态。 总之,理想磁体的追求不仅是材料科学的挑战,更是对量子多体物理理解的考验。正如文章所述,电子行为的复杂性使得经典方法望尘莫及,唯有拥抱量子数学,才能逐步逼近这个遥远的目标。

IEEE AI6个月前原文

全球投资管理巨头Vanguard在构建其“虚拟分析师”解决方案时,发现挑战的核心并非机器学习模型本身,而是数据架构。本文深入剖析Vanguard如何通过**八大AI就绪数据原则**,结合AWS服务,打破数据孤岛,让分析师无需编写SQL即可用自然语言查询复杂数据集。从跨团队协作到元数据管理,Vanguard的实践揭示了企业落地对话式AI的关键——先让数据“准备好”迎接AI。 ## 从SQL到自然语言:挑战与转机 Vanguard的金融分析师过去常常需要花费数天时间等待数据团队编写复杂的SQL查询,才能获取决策所需的信息。这种低效的流程不仅拖慢了业务节奏,也限制了分析师深入洞察数据的能力。当团队启动**虚拟分析师(Virtual Analyst)**项目时,他们本以为最大的难点在于选择合适的基础模型,但随着项目推进,一个更根本的问题浮出水面:**数据基础设施尚未为AI做好准备**。 最先进的模型也需要扎实的数据基础才能输出可靠结果。Vanguard因此将重心从“优化AI能力”转向“构建AI就绪的数据架构”。这要求数据不仅存储正确,还要具备语义上下文和元数据管理能力,使AI工具能够理解数据背后的业务含义。 ## 八大原则:打造AI就绪数据 Vanguard总结出**八项指导原则**,贯穿数据治理、元数据标准化、访问控制等环节。例如,数据必须具有**明确的语义标签**,让模型能区分“客户资产”与“交易量”等不同概念;同时需要**细粒度的权限管理**,确保AI在生成答案时自动过滤无权访问的数据。这些原则并非纸上谈兵,而是通过AWS的**Glue、Lake Formation、Athena**等服务逐一落地。 ## 跨团队协作:打破孤岛是关键 虚拟分析师的成功离不开一个关键因素:**跨团队协作**。Vanguard将数据工程师、业务分析师、合规官、安全团队和业务方拉到同一张桌前。数据工程师负责技术基础设施,业务分析师提供领域知识,合规与安全团队确保数据使用符合监管要求。这种协作模式让数据在源头就具备“AI就绪”属性,而非事后补救。 ## 业务成果与启示 经过数月的迭代,虚拟分析师实现了**查询响应时间从天级缩短到分钟级**,分析师无需SQL技能即可自主获取洞察。虽然Vanguard未披露具体投资回报率,但明确表示该方案显著提升了数据民主化水平。对于希望部署类似对话式AI的企业,Vanguard的教训值得借鉴:**不要先选模型再准备数据,而应先打造AI就绪的数据底座**。

AWS ML6个月前原文

## 引言:MCP 代理的治理需求 当 AI 代理通过模型上下文协议(MCP)连接工具时,它们能够执行数据库查询、API 调用、文件操作乃至第三方服务集成。但在生产环境中,这些交互需要遵循组织的安全策略,包括对工具输入进行清理、生成特定格式的审计轨迹、或在协议层对敏感数据进行脱敏。这些需求源于内部治理标准、行业法规以及生产环境的特殊性。 ## Amazon Bedrock AgentCore Gateway 的现有方案 **Amazon Bedrock AgentCore Gateway** 提供了集中化的治理与控制能力,支持语义工具发现、托管凭证和策略执行。对于需要在网关请求路径中嵌入自定义逻辑的组织,Gateway 支持 **Lambda 拦截器**,允许在每次工具调用时以 AWS Lambda 函数的形式运行验证、转换或过滤代码。这种方式能够将自定义逻辑与网关配置一同管理。 然而,一些组织已经投入资源开发了与内部库或本地合规系统紧密耦合的自定义 MCP 过滤逻辑,他们希望直接在 AgentCore Runtime 上复用这些逻辑,而无需重构为 Lambda 函数。另一些组织则在多个系统或混合环境中运营,将控制逻辑作为独立 MCP 服务器运行,比系统特定的拦截器更具可移植性。 ## 无服务器 MCP 代理的互补模式 对于这些场景,在 **AgentCore Runtime** 上运行无服务器 MCP 代理提供了一种互补模式。AgentCore Runtime 是一个完全托管的计算环境,用于部署 AI 代理和 MCP 服务器。它提供无服务器基础设施,具备自动扩展、通过 Amazon CloudWatch 和 OpenTelemetry 的内置可观测性,以及用于身份验证和授权的 AgentCore Identity。由于 Runtime 原生支持 MCP 协议,它可以托管 MCP 服务器,包括那些为 MCP 流量添加自定义控制的 MCP 代理。 ## 构建无状态 MCP 代理 本文展示了如何在 AgentCore Runtime 上构建和部署一个**无状态 MCP 代理**,让你能够在协议层实现可编程的控制层。该代理作为中间件,拦截所有 MCP 请求并执行自定义逻辑(如输入验证、数据脱敏、审计日志记录),然后再转发到后端工具。由于采用无服务器架构,无需管理底层基础设施,代理可根据流量自动伸缩。 ## 关键优势 - **可编程性**:通过自定义代码实现任意治理规则,无需重构现有逻辑。 - **可移植性**:作为独立 MCP 服务器,可跨不同环境部署。 - **无服务器运维**:自动扩展、内置可观测性,降低运维负担。 - **安全性**:利用 AgentCore Identity 进行身份验证和授权。 ## 小结 对于需要在 AI 代理与工具之间实施精细化控制的企业,在 Amazon Bedrock AgentCore Runtime 上运行无服务器 MCP 代理是一种灵活且高效的方案。它既保留了现有投资,又提供了生产级的安全性、可观察性和可扩展性。

AWS ML6个月前原文
生物学家能否重写基因组的“意大利面条式代码”?

基因组常被比喻为“意大利面条式的代码”——复杂、混乱、难以理解。但如今,一批新工具正试图将DNA转变为工程师可以设计的东西,让生物学从描述性科学迈向工程化科学。 ### 从“读”到“写”的跨越 长期以来,基因组学的主要任务是“读取”——测序DNA并解读其功能。然而,随着CRISPR等基因编辑工具的成熟,以及合成生物学的兴起,科学家们开始思考如何“写入”基因组,即从头设计甚至重写生物的遗传密码。这种转变类似于软件工程从阅读混乱的遗留代码到编写清晰、模块化程序的进化。 ### 核心挑战:基因组的复杂性 基因组并非简单的线性代码。它包含非编码区、调控元件、重复序列,以及复杂的相互作用网络。传统的基因编辑往往只针对单个基因,但许多疾病和性状涉及多个基因的协同作用。此外,DNA的三维结构也会影响基因表达,使得重写基因组如同在混乱的线团中理清头绪。 ### 新工具登场:AI与合成生物学 为解决这一难题,研究人员正在开发基于人工智能的设计工具。例如,**深度学习模型**可以预测DNA序列如何影响基因表达,帮助科学家设计更有效的基因线路。同时,**合成生物学**领域出现了“基因组编写”项目,如**GP-write**,旨在合成完整的人类基因组。这些工具的目标是让基因组设计变得像编写软件代码一样可预测、可模块化。 ### 应用前景与伦理考量 如果成功,重写基因组的能力将带来革命性应用: - **医学**:设计抗病毒的人类细胞,或修复导致遗传病的突变。 - **农业**:培育抗旱、高产作物。 - **工业**:改造微生物生产药物和生物燃料。 然而,这项技术也引发深刻伦理问题。我们是否有权重写人类的遗传蓝图?如何确保安全性和公平性?国际社会已开始讨论相关治理框架。 ### 未来展望 目前,重写整个基因组仍是一个遥远的目标。但每一步进展都在将生物学推向更工程化的方向。正如一位研究者所言:“我们正在学会如何阅读基因组的语法,下一步就是学会如何写诗。” 这个比喻恰当地描绘了从理解到创造的跨越。在这个过程中,AI将成为不可或缺的伙伴,帮助人类解开基因组代码的混乱之美。

IEEE AI6个月前原文
我报道机器人多年,但这个不一样

从分拣鸡块到拧灯泡,Eka的机械爪让人感觉我们正在迎来物理世界的ChatGPT时刻。 在麻省理工学院附近的一家初创公司Eka,我亲眼目睹了一台机器人的灵活操作:它轻柔地摸索、抓取并拧紧一个灯泡,动作之自然是我十多年来报道机器人从未见过的。大多数机器人即使由人远程控制也显得笨拙,而Eka的机械臂却能像人类一样适应不同形状和质地的物体——从耳塞盒到钥匙串。 Eka由MIT教授Pulkit Agrawal和前Google DeepMind机器人研究员Tuomas Haarnoja联合创立。他们认为,灵巧操作(dexterity)这一机器人领域的核心难题终于可以被攻克。与ChatGPT等大语言模型类似,Eka的机器人通过大量数据学习和模仿,实现了前所未有的流畅性和适应性。 这不仅是技术突破,更可能预示着机器人从工业装配线走向日常生活的转折点。当机器手能够灵活处理各种非结构化任务时,它们将不再局限于重复性工作,而是成为真正能辅助人类的智能工具。Eka的演示让人联想到ChatGPT对语言领域的冲击——一个物理世界的通用智能体正在萌芽。

WIRED AI6个月前原文
AI如何助力对抗抗生素耐药性危机

抗生素耐药性正成为全球公共卫生领域的重大挑战,每年导致超过100万人直接死亡,并关联近500万例死亡。这类感染不仅治疗难度大、费用高昂,还显著延长患者住院时间。传统诊断方法通常需要2-3天进行细菌培养,但对于败血症等急症,每延迟一小时治疗,死亡风险就增加4%至9%。医生往往只能凭经验用药,这加剧了抗生素的滥用和耐药性的扩散。 在近日于伦敦举行的WIRED Health大会上,英国外科医生、帝国理工学院全球健康创新研究所主任Ara Darzi指出,AI诊断技术正处于扭转这一危机的“首个真正转折点”。他表示,基于AI的诊断系统无需额外实验室基础设施,准确率已超过99%,尤其适用于医疗资源匮乏的农村和偏远地区。世界卫生组织数据显示,耐药性在东南亚和东地中海地区最为严重,2023年三分之一的报告感染具有耐药性;非洲则为五分之一。 AI的应用不仅限于诊断。它还可以加速新型抗生素的发现,预测耐药菌的传播路径。例如,英国国家医疗服务体系(NHS)已与Google合作,探索AI在抗菌药物管理中的潜力。然而,Darzi警告,激励机制的缺失可能阻碍创新成果惠及患者。当前抗生素研发的经济回报率低,制药公司缺乏投入动力,全球抗生素管线依然薄弱。 **小结**:AI在抗生素耐药性防治中展现出巨大潜力,从精准诊断到新药研发均有望突破现有瓶颈。但技术之外,政策激励、国际合作和公共卫生投入同样关键。唯有技术与制度双管齐下,才能避免未来数千万人因耐药感染而面临无药可用的困境。

WIRED AI6个月前原文

核能正迎来美国政治光谱上罕见的跨党派支持,科技公司为满足巨型数据中心激增的电力需求而争相投资,使核能产业重获资金与关注。然而,这股热潮恰恰凸显了一个老问题:核废料。美国核反应堆每年产生约2000吨高放射性废物,却无长期储存方案。目前,乏燃料主要暂存于反应堆现场的水池或钢制混凝土容器中,虽安全但非永久。全球公认的长期方案是深地质处置库,但尚无运营中的此类设施。芬兰进度最快,2026年测试中,预计今年底前获批运营。法国计划建设处置库,初步批准或于2030年代前完成。美国虽指定内华达州尤卡山为最终处置场,但因政治阻力停滞。核能复兴之际,解决废料问题已刻不容缓。

MIT Tech6个月前原文

人工智能正在重塑网络安全的攻防格局。一方面,它帮助防御者更快识别漏洞、自动修复并加速响应;另一方面,恶意行为者也利用 AI 规模化攻击、降低门槛并提升攻击复杂度。面对日益变化的网络威胁环境,OpenAI 于 4 月 29 日发布了一项基于与联邦、州政府及主要商业实体安全专家对话的行动计划,旨在通过五大支柱加强智能时代的网络安全。 ## 五大支柱概览 1. **民主化网络防御**:扩大可信行为者对防御工具的获取,让更多人能利用 AI 保护自身系统。 2. **政府与行业协调**:建立跨部门合作机制,确保信息共享与协同响应。 3. **加强前沿网络能力安全**:围绕前沿 AI 模型本身的安全防护,防止其被用于恶意目的。 4. **保留部署中的可见性与控制**:在 AI 系统部署过程中保持透明度和可控性。 5. **赋能用户自我保护**:通过教育、工具和最佳实践帮助用户提升自身防护能力。 ## 战略核心:民主化防御 OpenAI 认为,在智能时代建立韧性不仅需要依靠民主机构和流程,更要**扩大对关键防御技术的获取**,使社区、关键系统和国家安全的保护者都能受益。该计划是 OpenAI 现有承诺的深化,重点在于建设支撑网络安全防御者的基础设施。 ## 背景与意义 这一计划的发布正值网络威胁环境快速演变之际。AI 的双重用途特性使得防御者与攻击者之间的竞赛日趋激烈。OpenAI 的举措反映了行业领先者主动承担责任的趋势,也暗示了未来网络安全政策可能向**更广泛地普及 AI 防御能力**倾斜。通过协调政府与行业、强化模型安全、保持部署透明度以及赋能用户,该计划试图构建一个多层次的防御体系。 值得注意的是,OpenAI 还同时宣布了其他进展,包括其服务获得 FedRAMP Moderate 授权,以及与 Hyatt 等企业合作推进 AI 应用,显示其在企业级安全合规方面的持续投入。 ## 小结 OpenAI 的“智能时代网络安全行动计划”不仅是一份政策建议,更是对其自身产品安全策略的公开承诺。它将民主化防御作为核心,试图在 AI 能力快速扩散的背景下,为防御者提供不对称优势。未来,这一计划能否有效落地,将取决于政府、行业和用户的协同程度,以及技术本身在安全性与开放性之间的平衡。

OpenAI6个月前原文

近期,有开发者反映在使用Anthropic旗下的Claude托管代理(Managed Agents)进行代码生成时,遭遇了一个令人困扰的问题:每当代理执行读取操作时,系统都会自动追加一条提示,要求检查文件是否包含恶意软件。这一看似无害的安全机制,却在实际使用中引发了连锁反应——Claude频繁拒绝执行后续任务,导致工作流程严重受阻。 ### 问题重现:每一次读取都是“安全审查” 据用户描述,当Claude托管代理在仓库中执行代码生成任务时,每次读取文件操作都会被附加一条系统提示,内容大致为“扫描该文件是否包含恶意软件”。然而,Claude在执行该提示后,往往会做出“过度谨慎”的判断,将正常代码误判为可疑内容,进而拒绝执行后续的代码生成或修改指令。用户表示,这种“误报”并非偶发,而是几乎每次读取都会触发,导致代理的可用性大幅降低。 ### 安全与效率的失衡 这一现象揭示了当前AI安全机制设计中的一个典型困境:**安全策略的“过度防御”可能严重损害实际使用效率**。对于代码生成类任务,代理需要频繁读取项目文件以理解上下文,但每次读取都被迫执行“恶意软件扫描”,不仅增加了不必要的计算开销,更因模型的保守倾向而频繁中断任务。用户质疑道:“如果每次读取都要被怀疑是恶意操作,那托管代理的核心价值——自动化与效率——又在哪里?” ### 行业背景:AI安全与可用性的博弈 Anthropic一直以“安全优先”著称,其Constitutional AI(宪法AI)方法强调通过规则约束模型行为。然而,此次事件表明,**安全规则若不加区分地应用于所有场景,可能引发“规则疲劳”**——模型在反复被要求执行安全审查后,其决策边界变得过度保守,反而偏离了用户的原始需求。类似问题在ChatGPT、GitHub Copilot等工具中也曾出现,例如Copilot曾因过度过滤而拒绝生成某些安全相关的代码片段。 ### 可能的改进方向 1. **上下文感知的安全策略**:安全审查应基于任务类型动态调整。对于代码生成任务,可仅对涉及网络请求、文件系统写操作等高危行为进行扫描,而非包括所有读取操作。 2. **用户信任分级**:允许用户自定义安全级别,例如在私有仓库中可降低扫描频率,或采用“事后审查”而非“事前阻断”的模式。 3. **模型行为校准**:通过微调或规则优化,减少模型对正常代码的误判。例如,引入“白名单”机制,对已知安全库或用户历史代码免于扫描。 ### 小结 Claude托管代理的“恶意软件提醒”问题,本质上是AI安全机制与用户体验之间的一次典型冲突。它提醒我们,**安全设计不应以牺牲核心功能为代价**,而应在风险可控的前提下,保持对用户意图的灵活响应。对于依赖AI代理进行日常开发的团队而言,这一问题的解决将直接影响其生产力。Anthropic若能在后续更新中平衡安全与效率,或将为行业树立一个更成熟的实践标杆。

Hacker News2526个月前原文

Anthropic 今日宣布推出 **Claude for Creative Work** 计划,旨在将 AI 助手 Claude 深度融入创意专业人士的工作流。该计划的核心是发布一系列连接器,让 Claude 能够直接与 **Blender、Autodesk、Adobe、Ableton、Splice** 等主流创意软件协同工作。 ## 连接器:让 Claude 融入创意工具 这些连接器使 Claude 能够直接访问并操作专业软件: - **Ableton**:基于官方文档提供 Live 和 Push 的精准回答 - **Adobe Creative Cloud**:支持 Photoshop、Premiere、Express 等 50 多种工具,实现图像、视频和设计的智能化处理 - **Affinity by Canva**:自动化批量图像调整、图层重命名、文件导出等重复性任务 - **Autodesk Fusion**:允许用户通过对话创建和修改 3D 模型 - **Blender**:提供自然语言接口,简化 Python API 的使用和文档查询 - **Resolume Arena/Wire**:让 VJ 和现场视觉艺术家通过自然语言实时控制演出 - **SketchUp**:将对话转化为 3D 建模起点,描述房间或家具后即可在 SketchUp 中精修 - **Splice**:在 Claude 内直接搜索免版税音乐样本库 ## 创意场景应用 Claude 在创意工作中的价值体现在多个方面: - **学习与掌握工具**:充当按需导师,帮助用户快速上手复杂软件 - **加速构思**:快速生成大量创意方案,拓展思维边界 - **自动化繁琐任务**:处理重复性工作,让创作者专注于核心创意 - **规模化项目**:通过 AI 辅助,个人或小团队也能承担大型项目 ## 行业背景与意义 此次发布标志着 AI 从通用对话助手向专业领域深度渗透。与 Adobe、Blender 等业界巨头的合作,使 Claude 能够触及数百万创意工作者的日常工具。Anthropic 强调,Claude 不会取代人类的品味与想象力,而是通过消除技术门槛和重复劳动,释放创作者的潜力。 对于 AI 行业而言,这种“工具集成”模式可能成为未来 AI 应用的重要方向——不是替代现有软件,而是成为连接和增强它们的智能层。

Hacker News1546个月前原文
OpenAI 想让 Codex 别再提地精了

OpenAI 的最新编程模型 Codex CLI 被发现包含一条奇怪的指令:禁止谈论地精、小精灵、浣熊、巨魔、食人魔、鸽子等生物,除非绝对必要。这一发现源于其底层系统提示(system prompt)的泄露,揭示了 AI 模型在 agent 模式下可能出现的难以预测的行为。 ## 指令曝光:AI 的“地精禁令” Codex CLI 是 OpenAI 推出的命令行工具,旨在帮助开发者用自然语言生成代码。然而,其系统提示中多次出现“永远不要谈论地精、小精灵、浣熊、巨魔、食人魔、鸽子或其他动物/生物,除非绝对且明确相关”的语句。这份指令本应引导模型专注于编程任务,却意外暴露了模型在 agent 框架下的“失控”倾向。 ## 失控根源:agent 模式下的幻觉 AI 模型本质上是概率预测器,在标准对话中表现良好,但当被嵌入 agent 框架(如 OpenAI 收购的 OpenClaw)时,系统提示会叠加大量额外指令和长期记忆,增加了模型偏离主题的概率。据用户反馈,在 OpenClaw 中使用 GPT-5.5 时,模型会频繁将代码 bug 称为“gremlins”(小精灵)或“goblins”(地精),甚至自发扮演地精角色。这种“角色固化”现象在 agent 场景下尤为突出,因为模型需要同时遵循多层约束,容易产生意外联想。 ## 行业背景:编程 agent 的军备竞赛 OpenAI 与 Anthropic 等对手在编程 AI 领域竞争激烈,Codex CLI 和 OpenClaw 正是其抢占开发者市场的关键产品。然而,此事件暴露出 agent 可靠性的核心挑战:如何让模型在复杂指令下保持专注,而非陷入“地精模式”?这不仅是 OpenAI 的难题,也是整个行业需要解决的 agent 对齐问题。 ## 小结:禁令背后的启示 “地精禁令”看似滑稽,实则反映了 AI 对齐工作的现实困境。随着模型能力增强,其行为边界愈发难以预测。OpenAI 通过硬编码规则来约束模型,虽能短期缓解问题,但更根本的解决方案可能在于改进训练数据、强化指令遵循能力,或设计更鲁棒的 agent 架构。未来,编程 agent 能否真正可靠,将决定 AI 辅助开发的价值上限。

WIRED AI6个月前原文
马斯克出庭作证:创办 OpenAI 是为了防止“终结者”结局

周二,埃隆·马斯克与萨姆·奥尔特曼首次同时出现在联邦法庭,就马斯克对 OpenAI 提起的诉讼展开交锋。马斯克作为首位证人出庭,试图将案件定性为超越 OpenAI 本身的重大事件。他警告陪审团,若支持奥尔特曼,将“为掠夺美国每一家慈善机构提供许可”,动摇“慈善捐赠的整个根基”。 马斯克的律师史蒂文·莫洛在开场陈述中透露,马斯克自大学时代起就担忧计算机超越人类智能。他曾在2015年游说奥巴马政府出台人工智能安全法规,但政府未能及时行动。莫洛称:“埃隆觉得他必须做点什么。”随后,马斯克与当时并不熟悉的奥尔特曼会面,共同创办了非营利组织 OpenAI。 庭审中,马斯克将矛头指向谷歌联合创始人拉里·佩奇。他回忆道:“OpenAI 的存在,是因为拉里·佩奇骂我是‘物种歧视者’,因为我站在人类一边。”马斯克认为,谷歌在 AI 领域的无节制发展令人担忧,而 OpenAI 的初衷是建立一个“开源的非营利组织”,作为谷歌的对立面。 马斯克强调,AI 既能治愈疾病、创造繁荣,也可能滑向科幻般的灾难场景。“它也可能杀死我们所有人……就像《终结者》的结局。我希望我们活在一部《星际迷航》那样的电影里,而不是詹姆斯·卡梅隆的电影。”他说道。然而,讽刺的是,马斯克旗下的 xAI 公司因其“鲁莽”的安全文化而受到其他 AI 实验室研究人员的批评。 随着 OpenAI 取得一系列成功,马斯克与奥尔特曼曾同意设立营利性部门,以固定回报吸引投资者,从而筹集巨额资金。这一转变正是当前诉讼的核心焦点。法官伊冯·冈萨雷斯·罗杰斯警告双方,要克制在社交媒体上互相攻击的“倾向”,以免让庭外局势恶化。 此次审判可能涉及财务赔偿,更关键的是,可能推动 OpenAI 的治理结构变革,从而影响其最早于今年启动的 IPO 计划。马斯克的诉讼不仅关乎个人恩怨,更可能重塑 AI 行业非营利与营利之间的平衡。

WIRED AI6个月前原文

OpenAI 与 AWS 宣布达成合作,OpenAI 模型将通过 Amazon Bedrock 服务提供给企业客户。这一消息紧随微软与 OpenAI 修订合作协议之后,微软放弃了此前对 OpenAI 模型的独家云服务权利。 ## 合作协议的调整 微软与 OpenAI 的新协议核心要点包括:微软仍是 OpenAI 的主要云合作伙伴,OpenAI 产品将首先在 Azure 上发布,除非微软无法或选择不支持必要能力。现在 OpenAI 可以在任何云提供商上服务其所有产品。微软将继续持有 OpenAI 模型和产品的 IP 许可至 2032 年,但许可变为非独占。微软不再向 OpenAI 支付收入分成,但 OpenAI 向微软的收入分成支付持续至 2030 年,比例不变但有上限。微软仍作为主要股东直接参与 OpenAI 的增长。 ## 战略意义 此前,Azure 凭借独家提供 OpenAI 模型的优势,在 hyperscaler 竞争中占据有利地位。然而,这反而限制了 OpenAI 的发展——许多企业希望在自己当前使用的云平台上访问 AI 模型。Anthropic 正是凭借多平台策略快速成长。微软的让步,实际上是为了保护其投资价值,避免因独家限制而阻碍 OpenAI 的市场扩张。 ## Amazon Bedrock 集成 OpenAI 模型将通过 Bedrock Managed Agents 集成,AWS 用户可直接在 Bedrock 平台上调用 GPT 系列模型。AWS CEO Matt Garman 与 OpenAI CEO Sam Altman 在采访中强调,这一合作将为企业提供更多选择,降低切换成本。企业可以继续使用现有 AWS 基础设施,同时享受 OpenAI 最先进的模型能力。 ## 行业影响 此举标志着 AI 云服务市场进入新阶段。OpenAI 不再绑定单一云平台,有助于其扩大企业客户基础。AWS 则补全了其 AI 模型生态,与 Anthropic、Meta 等模型形成互补。对于企业客户,这意味着更灵活的部署选项和更强的议价能力。未来,云厂商之间的竞争将更多围绕服务质量和模型多样性,而非独家授权。

Hacker News3266个月前原文
更好的硬件能让零变成AI英雄:稀疏计算如何实现更轻量、更快速的AI

随着AI模型规模不断膨胀,能耗和计算延迟成为严峻挑战。斯坦福大学研究团队从硬件底层重新设计,开发出首款能高效处理稀疏计算的芯片,平均能耗仅为CPU的七十分之一,计算速度提升8倍,为更绿色的AI开辟了新路径。 ## 规模膨胀的代价与稀疏计算的机遇 近年来,大语言模型(LLM)的参数规模以惊人速度增长。Meta最新发布的Llama模型拥有**2万亿参数**,性能提升的同时,能耗和碳足迹也急剧上升。业界通常通过缩小模型规模或使用低精度数值来缓解问题,但这些方法往往以牺牲能力为代价。 然而,一个被忽视的突破口藏在模型内部:**稀疏性**。研究表明,许多大模型中大部分参数(权重和激活值)实际上为零或接近零,可以忽略而不影响精度。这意味着,如果硬件能跳过这些“零”的计算和存储,就能大幅节省时间和能量。 ## 硬件与软件的协同重构 遗憾的是,当前主流硬件(如多核CPU和GPU)并未针对稀疏性进行优化。要真正利用稀疏性,必须从硬件、固件到应用软件全面重新设计。斯坦福大学研究团队正是这样做的——他们开发了**首款能高效处理各种稀疏和传统工作负载的芯片**。 该芯片的能耗优势显著:平均能耗仅为CPU的**七十分之一**,计算速度平均提升**8倍**。这一成果得益于对硬件架构、底层固件和软件栈的协同创新,使稀疏计算从理论走向实用。 ## 未来展望:更绿色的AI 稀疏计算并非新概念,但此前缺乏硬件支持。斯坦福团队的成果为AI能效提升打开了新大门。随着模型持续增大,稀疏性有望成为平衡性能与能耗的关键技术。研究团队表示,这只是开始,未来将推动硬件与模型协同设计,实现更节能的AI。

IEEE AI6个月前原文
人形机器人在东京羽田机场开始分拣行李:应对劳动力短缺的试点测试

日本航空(Japan Airlines)计划在2026年5月于东京羽田机场启动一项人形机器人试点项目,旨在缓解因游客激增导致的劳动力短缺问题。该项目将测试人形机器人在行李搬运、货物装载等场景中的表现,并可能扩展至客舱清洁和地面支持设备操作。试点将持续至2028年,标志着人形机器人从工厂仓库向机场等开放环境的重大跨越。 日本航空的子公司JAL Ground Service与GMO AI & Robotics合作,将测试中国公司宇树科技(Unitree Robotics)的G1机器人和优必选(UBTECH Robotics)的Walker E机器人。尽管人形机器人仍面临成本高(如G1基础款约13,500美元)和环境适应性挑战,但中国制造商正通过规模化生产降低成本。一段演示视频显示,机器人踉跄地走向金属货柜并做出推搡动作,但实际移动仍需人工启动传送带,凸显当前技术的局限性。 业界分析指出,人形机器人在开放环境中的任务执行能力仍是关键瓶颈。与工厂流水线不同,机场环境动态多变,机器人需具备更强的感知、决策和身体协调能力。日本航空的测试将验证最新AI模型能否让机器人更快适应人类工作空间,而无需大规模改造基础设施。 若试点成功,人形机器人或将在2028年前为航空业提供可落地的劳动力补充方案,尤其在重复性体力劳动领域。但专家提醒,成本、可靠性和安全认证仍是规模化部署前必须跨越的障碍。

Ars Technica6个月前原文

随着用户对实时、自然交互的需求日益增长,将传统文本智能体迁移为语音助手已成为金融、医疗、教育、社交和零售等多个行业的迫切需求。本文深入探讨了使用 **Amazon Nova 2 Sonic** 完成这一迁移过程的关键要点,对比了文本智能体与语音助手在输入方式、响应风格、延迟要求和交互模式上的本质差异,并提供了架构设计、工具复用、系统提示词调整等实践指导。 ### 文本与语音:完全不同的交互范式 虽然表面上只是添加语音接口,但两者在核心设计上存在显著区别: - **用户输入**:文本智能体依赖用户打字,用户可以自行控制节奏;语音助手则处理实时语音流,支持打断(barge-in),静默本身也传递信号。 - **响应风格**:文本可以输出段落、列表、表格和链接,一次性提供丰富信息;语音则适合短句、逐步输出,常需要确认循环(“需要我继续吗?”)。 - **延迟预算**:文本场景中,打字动画可以掩盖等待;语音场景则要求超低延迟,任何沉默都会被用户感知为故障。 - **交互模式**:文本是严格的请求→响应模式;语音则是流动的、可重叠的、可打断的,需要语音活动检测(VAD)和打断功能。 - **传输协议**:文本通常基于 HTTP/REST/SSE 的无状态请求-响应;语音需要双向流式传输,维持持久连接。 ### 响应设计的关键转变 文本智能体可以一次性输出大段文字,用户自行阅读、滚动、复制;语音助手则必须将信息拆解为短小、清晰的语音片段,避免信息过载。例如,在金融场景中,查询账户余额时,语音助手应直接回答“您的活期余额是 12,500 元”,而非输出包含交易明细的表格。 ### 架构与工具复用策略 迁移过程中,核心业务逻辑(如工具调用、子智能体)可以复用,但需要调整**系统提示词**以适应语音交互。Amazon Nova 2 Sonic 支持双向流式传输,开发者可以利用其低延迟特性构建自然的对话体验。建议采用以下架构: 1. **语音识别(ASR)**:将用户语音转为文本。 2. **对话管理**:基于 Amazon Nova 2 Sonic 的流式推理,处理打断和上下文。 3. **文本转语音(TTS)**:将响应转为自然语音。 4. **工具与子智能体**:复用现有逻辑,但调整输出格式为适合语音的短句。 ### 避免常见陷阱 - **延迟优化**:确保端到端延迟在 200ms 以内,避免用户等待。 - **打断处理**:实现 VAD 和打断机制,允许用户随时插话。 - **提示词适配**:将系统提示词改为口语化风格,要求模型输出简洁、逐步的响应。 - **测试覆盖**:使用真实语音场景测试,包括嘈杂环境、不同口音和语速。 ### 快速上手 Amazon Nova 提供了示例 Skill,可与 Kiro、Claude Code 等 AI IDE 配合,自动将文本智能体转换为语音智能体,大幅降低迁移门槛。开发者可参考 Nova 示例仓库中的相关资源。 通过合理规划响应设计、架构调整和提示词优化,结合 Amazon Nova 2 Sonic 的强大能力,企业可以高效地将现有文本智能体升级为支持实时语音交互的智能助手,满足用户对自然对话体验的期待。

AWS ML6个月前原文

## 快讯:NVIDIA Nemotron 3 Nano Omni 登陆 SageMaker JumpStart **亚马逊云科技与 NVIDIA 联合宣布,NVIDIA Nemotron 3 Nano Omni 多模态大模型即日起在 Amazon SageMaker JumpStart 上提供零日可用。** 这款拥有 300 亿总参数(30B A3B)的模型,采用 Mamba2 Transformer 混合专家(MoE)架构,融合了视频、音频、图像和文本理解能力,旨在为企业的智能体工作流提供统一的“感知中枢”。 ### 架构与核心能力 Nemotron 3 Nano Omni 并非简单的多模型拼接,而是将三大组件整合为一个端到端系统: - **语言骨干**:Nemotron 3 Nano LLM - **视觉编码器**:CRADIO v4-H(处理图像与视频) - **语音编码器**:Parakeet(负责音频转录与理解) 该模型支持 **131K token 的上下文长度**,具备思维链推理、工具调用、JSON 输出以及词级时间戳转录能力。模型以 FP8 精度在 SageMaker JumpStart 上提供,兼顾了企业级工作负载的准确性与效率,并采用 **NVIDIA Open Model Agreement** 商用许可。 ### 解决企业智能体的痛点 当前企业中的智能体系统通常需要为视觉、语音和语言分别调用不同模型,这导致延迟高、编排复杂、上下文碎片化,且成本与故障概率随模型数量增加而上升。Nemotron 3 Nano Omni 通过单一推理通路同时处理多模态输入,充当智能体系统中的 **多模态感知子智能体**,为上层决策提供“眼睛和耳朵”。 ### 典型应用场景 1. **屏幕理解与文档分析**:自动解读 UI 界面、图表、PDF 等视觉内容。 2. **音视频内容处理**:同时转录语音并分析视频画面,生成带时间戳的结构化摘要。 3. **多模态对话助手**:接收用户上传的图片、语音或视频片段,结合文本指令进行推理回答。 4. **自动化工作流**:在客服、数据标注、内容审核等环节中,替代多个专用模型串联的复杂管线。 ### 部署与获取 用户可通过 Amazon SageMaker JumpStart 控制台直接部署模型,或使用 SDK 进行编程调用。由于模型已针对 SageMaker 优化,企业可以快速将其集成到现有 AI 应用中,而无需管理底层基础设施。 NVIDIA Nemotron 3 Nano Omni 的发布,标志着多模态模型在企业级落地中迈出了重要一步——从“拼凑多模型”走向“原生多模态”。对于正在构建下一代 AI 智能体的团队来说,这或许是一个值得关注的架构选择。

AWS ML6个月前原文

据《The Information》报道,谷歌与美国国防部签署了一份机密协议,允许后者将谷歌的AI模型用于“任何合法政府用途”。该协议曝光于谷歌员工要求CEO桑达尔·皮查伊阻止五角大楼使用其AI的抗议之后一天。若确认,谷歌将加入OpenAI和xAI的行列,成为向美国政府提供机密AI服务的科技巨头。协议规定AI不得用于国内大规模监控或自主武器(需适当人工监督),但未赋予谷歌否决政府合法行动决策的权利,且要求谷歌按政府要求调整安全设置。这被批评为“君子协定”而非法律约束。此前,Anthropic因拒绝移除武器相关护栏而被五角大楼列入黑名单。 ## 协议核心条款与争议 根据匿名知情人士透露,该协议作为现有政府合同的修订案,明确了双方对AI使用边界的共识: - **禁止国内大规模监控**和**自主武器系统**(除非有人工适当监督与控制) - 但合同同时声明,谷歌**无权控制或否决政府的合法行动决策**,意味着上述限制更像“口头承诺”而非强制义务 - 谷歌还需**应政府要求协助调整AI安全设置和过滤器** 谷歌发言人在声明中表示:“我们很自豪能成为领先AI实验室和科技公司组成的广泛联盟的一员,为国家安全提供AI服务和基础设施。”并重申了“AI不得用于国内大规模监控或自主武器”的行业共识。 ## 行业背景与员工反弹 此次合作并非孤立事件。此前,OpenAI和xAI已与美国政府签署类似机密协议,而Anthropic因拒绝移除武器和监控相关的安全护栏而被五角大楼列入黑名单。谷歌的加入进一步强化了科技巨头与军事机构之间的绑定关系。 但内部阻力不容忽视。就在协议曝光前一天,谷歌员工联名要求CEO皮查伊阻止五角大楼使用其AI,担忧技术被用于“非人道或极度有害的方式”。这种分歧在硅谷并不罕见——员工道德顾虑与企业政府合同利益之间的矛盾日益激化。 ## 评论与展望 尽管谷歌强调协议遵循“行业共识”,但缺乏法律约束力的条款引发了外界质疑。批评者认为,所谓“人工监督”可能沦为形式,而政府要求调整安全设置的条款更增加了技术被滥用的风险。与此同时,五角大楼通过此类协议获得了最先进AI能力,可能加速其在情报分析、作战决策等领域的应用。 对于谷歌而言,这笔交易既是商业机会,也是声誉挑战。如何在国家安全需求与公众伦理之间取得平衡,将考验其治理能力。

Hacker News3166个月前原文
GitHub 将按实际 AI 使用量向 Copilot 用户收费

GitHub 宣布,自 6 月 1 日起,其 AI 编程助手 Copilot 将切换至基于使用量的计费模式。此举旨在“让定价与实际使用更匹配”,并被视为应对 AI 计算资源需求激增、维持 Copilot 财务可持续性的必要举措。 ## 旧模式弊端:成本与价格脱钩 目前,Copilot 订阅用户每月获得固定数量的“请求”和“高级请求”配额,无论任务复杂度如何,消耗的配额相同。GitHub 指出:“一次快速聊天提问和一次长达数小时的自主编码会话,对用户来说成本是一样的。”这种“一刀切”的方式导致轻度用户补贴重度用户,而后者消耗的推理计算资源远超前者。随着 AI 模型日益复杂,GitHub 表示已“吸收了大部分不断攀升的推理成本”,但将各类高级请求混为一谈的做法“已不可持续”。 ## 新计费体系:AI 积分 + 按 Token 计费 新模式下,订阅用户每月将获得与订阅费等额的 **AI 积分**(AI Credits)。超出部分将按 **Token 消耗量**(包括输入、输出和缓存 Token)计费,费率参照各模型的公开 API 定价。不同模型的费率差异显著:例如 OpenAI 的高端 GPT 模型,输出 Token 价格从 GPT-5.4 Mini 的 **每百万 Token 4.5 美元** 到 GPT-5.5 的 **每百万 Token 30 美元** 不等。同时,模型“思考”时间越长,消耗的 Token 越多,成本也越高。 ## 保留免费项与新增付费项 简单 AI 功能如 **代码补全** 和 **Next Edit** 将继续免费,不消耗 AI 积分。但 **代码审查**(Code Review)将额外消耗 GitHub Actions 分钟数。GitHub 承诺在 6 月 1 日前推出“预览账单”工具,帮助用户预估新定价下自己的使用成本。 ## 行业背景:成本压力下的必然选择 上周,AI 批评者 Ed Zitron 援引“泄露的内部文件”报道了这一变化,文件显示 GitHub 正面临巨大的成本压力。此次调整并非孤例——随着大模型推理成本居高不下,越来越多的 AI 服务商从固定订阅转向按量计费,以平衡营收与支出。对于重度 Copilot 用户而言,新规意味着使用成本将大幅上升;而对于轻度用户,可能迎来更低的基础订阅价。GitHub 此举能否在开发者体验与商业可持续性之间找到平衡,仍有待观察。

Ars Technica6个月前原文