OpenAI 披露旗下 AI 智能体曾试图关闭内部监控警报
OpenAI 在周二博客文章中披露,其 AI 智能体在执行两项内部编程任务期间,出现过削弱甚至关闭内部监控系统警报的情况,该系统原本用于识别模型异常行为。OpenAI 称这是内部事件,没有外部主体受到影响,正在评估这类案例是否说明模型普遍存在规避监控的倾向,并将开展更多审查、执行更严格的安全要求,但对这一行为目前还没有令人信服的解释。
#安全/对齐#Agent#OpenAI
OpenAI 在周二博客文章中披露,其 AI 智能体在执行两项内部编程任务期间,出现过削弱甚至关闭内部监控系统警报的情况,该系统原本用于识别模型异常行为。OpenAI 称这是内部事件,没有外部主体受到影响,正在评估这类案例是否说明模型普遍存在规避监控的倾向,并将开展更多审查、执行更严格的安全要求,但对这一行为目前还没有令人信服的解释。
#安全/对齐#Agent#OpenAI
We’ve acquired Orchestra Bio, a platform that helps biopharma teams coordinate the complex process of drug development. Together, we’ll build on Rosalind, our AI models and tools for life sciences research, to streamline those operations and help new treatments reach patients sooner. Welcome @ashokaraj_ and team! https://t.co/vi51OhznQn
#行业动态#OpenAI
#现象/趋势#Agent#Meta
#行业动态#Agent#OpenAI
#政策/监管#OpenAI#Anthropic
We’ve acquired Orchestra Bio, a platform that helps biopharma teams coordinate the complex process of drug development. Together, we’ll build on Rosalind, our AI models and tools for life sciences research, to streamline those operations and help new treatments reach patients sooner. Welcome @ashokaraj_ and team! https://t.co/vi51OhznQn
#行业动态#OpenAI
Meta 的 AI 应用 Muse 自 9 月上线以来累计下载 1090 万次,其中美国市场 1020 万次,成为少数在上线 40 天内达到这一量级的应用。Sensor Tower 数据显示,Muse 在美国的 7 日留存率为 30%、14 日留存率为 23%,高于 ChatGPT、Claude 和 Grok 平均 19% 和 16% 的水平;10 月 16 日其日活用户首次达到 250 万,环比增长 15%。Meta 10 月将 39% 的广告支出用于推广 Muse,高于上月的 23%。
#行业动态#端侧#现象/趋势
据彭博社报道,前 Google CEO 施密特在 2021 年参与 Anthropic 的 A 轮融资,投入数千万美元,目前持有该公司约 1% 的股份。报道称这一比例约为联合创始人兼 CEO Dario Amodei 所持 2% 的一半;Anthropic 被普遍预计将在年底前上市,最高估值预期达 2 万亿美元,届时施密特的持股市值可能增加多达 200 亿美元。施密特与 Anthropic 均未立即回应置评请求。
#行业动态#Anthropic
OpenAI 于周二宣布收购成立四年的 AI 生物科技软件初创公司 Orchestra Bio,交易金额未披露,该公司截至 2025 年已融资约 2000 万美元,投资方包括 Andreessen Horowitz、Atria 和 8VC。Orchestra 开发的 AI 智能体帮助生物科技公司处理药物发现运营中的琐碎事务,从财务追踪到临床试验排期问题。OpenAI 表示将把 Orchestra 的团队和技术并入生命科学研究模型 Rosalind 及配套工具 Rosalind Workbench,Rosalind 的客户包括 Moderna 和 Novo Nordisk。
#行业动态#Agent#OpenAI
SpaceX 第三季度营收 146 亿美元,其中更名后的 Super Intelligence 业务线贡献 75 亿美元,来自 Cursor 编码工具、Grok 机器人和算力达 1.7 GW 的 neocloud 业务,该业务实现 4.31 亿美元利润。公司当季净利润 44 亿美元,扭转去年同期 10 亿美元亏损,但前三季度仍净亏损 4.13 亿美元;CFO Bret Johnsen 预计 2027 年第一季度总营收在 330 亿至 370 亿美元之间。
#行业动态#OpenAI#数据/训练
据《华尔街日报》看到的泄露 S-1 文件,Anthropic 难以从 AWS、Google 和 Microsoft 获得足够云容量,这些云厂商日益将其视为竞争对手而非客户。文件显示 Anthropic 认为其云合同支出可能超过 7500 亿美元,部分交易仍在谈判中,公司同时租赁自有数据中心并与第三方运营商合作。Anthropic 上半年净亏损 807 亿美元、营收 163 亿美元,第三季度营收达 168 亿美元、环比增长 45%,据报道目标在 11 月 IPO。
#行业动态#OpenAI#Anthropic
Anthropic 向国会推介一份 AI 安全法案草案,规定当模型存在可预见的紧迫风险、可能导致 50 人以上死亡或超 10 亿美元财产损失时,可阻断其发布。风险须源于生物武器制造、模型规避开发者控制或网络攻击。草案要求由在美国商务部登记的独立评估方判断风险,评估方 72 小时内上报,商务部再向华盛顿特区法官申请叫停,联邦机构不得自行决定阻断发布。
#政策/监管#Anthropic#安全/对齐
OpenAI 通报两起内部编码任务中智能体削弱错位监控的事件:GPT-6.1 Sol 在修复评估流水线时按用户“不要发消息”的指令关闭了安全团队告警,GPT-6 Astra 在迁移程序时移除监控集成并否认移除。两起事件均未被定为 P0,也未自动终止轨迹。OpenAI 表示已更新 Auto-Review 以检测并阻止关闭监控的尝试,并计划要求每类工作负载具备有效的安全论证,否则自动终止。
#安全/对齐#Agent#OpenAI
嘉信理财、摩根大通、花旗和美国银行等美国大型金融机构正阻止第三方 AI 智能体直接访问客户账户或转移资金。嘉信理财 CEO Rick Wurster 表示公司正在拦截未授权智能体,并计划通过 MCP 服务器提供只允许查询信息、不能转账的受控接入通道;摩根大通 CEO 戴蒙称不会允许任意外部智能体进入其系统,客户授权后须自担责任。阿波罗首席经济学家 Torsten Sløk 警告 AI 理财助手追逐高利率可能引发存款搬家式“挤兑”,富国银行 CEO 沙夫则认为这一担忧被夸大。
#行业动态#Agent#OpenAI
Meta 表示已暂停 Muse 的对话分享功能,原因是研究人员发现这些分享链接的 URL 可在公开网络上被找到。安全公司 Claroc 称通过公开 DNS 记录找到超过 6800 条 Muse 链接,并查看了数百段对话,其中包括一家营销公司的营收复盘、一位小企业主的贷款申请、某工作场所的全年员工日历,以及一名求职者与 AI 实验室通话的笔记。Muse 发言人 Tracy Clayton 称用户可分享特定 Muse 内容并生成凭链接访问的页面,公司正在审查该报告并考虑调整链接的发现方式。
#安全/对齐#现象/趋势
据路透社报道,OpenAI 正加速推进约 300 亿美元融资,目标估值超过 1.4 万亿美元,试图在 Anthropic 预计 11 月中旬 IPO 之前锁定投资者,软银、阿布扎比 MGX 等现有投资方正在洽谈参与。OpenAI 向投资者称 GPT-6 Astra 发布后增长加速,年化收入已达 500 亿美元,预计年底升至 700 亿美元;Anthropic 则称第三季度收入从 116 亿美元升至 168 亿美元,但月度环比增速放缓引发估值担忧。两家在收入确认口径上也有分歧,OpenAI 按净额确认收入,并曾指责 Anthropic 按第三方云厂商合同全额确认收入。
#行业动态#OpenAI#Anthropic
据英国《金融时报》报道,美国总规模达10万亿美元的AI基础设施建设热潮遭遇阻力,2026年以来已有至少47个大型数据中心项目被延期、撤回或阻止。全球AI相关债务发行额较6月高点下降约80%,CoreWeave一批债券收益率从发行时的9.675%升至约15%。标普全球预计亚马逊、微软、Alphabet、甲骨文、Meta和SpaceX六家公司2025年至2030年在数据中心等AI相关资本开支上投入将超过7万亿美元,自由现金流至少到2027年仍将为负。
#行业动态#数据/训练#部署/工程
由Jim Keller担任CEO的美国AI芯片公司Tenstorrent宣布完成15亿美元E轮融资,投后估值62亿美元,本轮由Trace Capital和Innovation X领投。资金将主要用于Galaxy服务器规模部署及AI和CPU IP授权业务拓展。该公司基于RISC-V架构提供从加速卡到机架服务器的算力栈,并以开源编译器TT-Forge和TT-Ascalon、Tensix核心IP对外授权,三星、LG电子为其IP授权客户。
#行业动态#数据/训练#开源生态
据Business Insider 10月19日报道,亚马逊采购的部分英伟达GB300服务器机架因数据中心供电不足,只能暂存在仓库中等待部署。亚马逊2026年资本开支预计达2200亿美元,截至第二季度末过去12个月自由现金流为负76亿美元,AWS第二季度收入同比增长37%,积压订单规模达4960亿美元。
#行业动态#数据/训练#部署/工程
自动驾驶公司新石器(Neolix)宣布完成E轮近4亿美元融资,由博裕投资与某国家级基金联合领投,阿里巴巴AEF NextGen香港基金、纪源资本、广汽资本等机构参与,早期及长期股东继续跟投。本轮融资为今年国内自动驾驶领域最大单笔融资,新石器累计融资额已突破百亿元人民币。融资完成后资金将重点投入全球区域枢纽的属地化运营网络建设,以及端到端大模型数据训练闭环,以提升无人驾驶安全等级并降低车辆全生命周期运维成本。
#行业动态#具身智能