←搜索结果

按匹配度 · 共 1206 条结果 清除搜索

星期四

  1. Hugging Face

    VocabX 如何通过专精 SLM 词表将实际应用推理成本降低 77%

    VocabX 通过按成本而非频次选择 token、同时重建子词切分与多词合并,把领域专用小模型的词表压缩到更小规模,在实际应用中把推理成本降低 77%。以评分模型为例,生成一个 token 的成本是读取一个 token 的 7.4 倍,输出层词表从约 152,000 行减到约 65,000 行。该方法针对 Qwen3-4B 这类小模型在中等批量下的内存带宽瓶颈,而 FVT、MWT 和 in-place BPE 等方法只按频次选词、只处理单一层面。

    永远不会使用的词表进行评分。在我们的评分器中,这一改动将实测推理成本降低了 77%,而基础模型和训练配方均保持不变。 专精通常始于数据和权重。它也可以更早一步开始,即从词表开始。 完整方法、每项实验的表格以及被弃用的干预措施都将收录在 VocabX 论文中,我们很快就会发表。 来源 Dharma-AI。“VocabX:面向领域专用语言模型的成本加权词表适配。” 准备中(2026)。 Gee, Leonidas, et al. “用于语言模型压缩的快速词表迁移。” EMNLP Industry Track(2022)。 Gee, Leonidas, et al. “用于序列压缩的多词分词。” EMNLP Industry Track(2023)。 Smith, Jimmy T.H., et al. “预训练 LLM 的原位分词器扩展。” arXiv:2607.15232(2026)。 延伸阅读 为什么专精是不可避免的 在 Hugging Face 上探索 Dharma AI,试用我们的演示、下载我们的开放模型,并了解专用 AI 系统如何在真实企业应用中优于通用模型。 来自该作者的更多内容

    匹配字段正文

  2. Hugging Face

    剖析 TorchNeuron(第一部分):在 AWS Trainium 上进行系统级性能剖析

    AWS 发布 TorchNeuron 性能剖析指南第一部分,介绍如何用 NeuronConfig 与 NeuronProfiler 在 AWS Trainium 上做系统级剖析,并通过 Neuron Explorer 查看系统 trace、设备时间线和各引擎分解。以 RMSNorm 为例,朴素 PyTorch 实现的设备总耗时 2.355 ms,而 torch.rms_norm() 融合为单个 Neuron kernel 后降至 403.3 μs。

    你可以在更大的模型上使用相同的工作流程:在表中找到热点,在 trace 中验证它,然后确定融合操作或 torch.compile 能否降低其开销。 在第 2 部分中,我们将进入设备级剖析。你将打开 NEFF,检查 TensorEngine、VectorEngine 和直接内存访问(DMA)的分解情况,并将内核放置在 roofline 上,以确定它是受计算限制还是受内存限制。 特别感谢 Aritra Roy Gosthipaty 启发我开启本系列,并感谢我的同事 Pinak Panigrahi、Samir Araujo、Akhil Azhikodan、Esha Lakhotia 以及其他同事的审阅! 本文提到的数据集 1 jlongen-aws/blog-assets 来自该作者的更多内容 使用 Strands Agents、LeRobot 和 Hugging Face Storage Buckets 在一个地方进行记录、训练和部署 从 Hugging Face 一键进入 Amazon SageMaker Studio 本文提到的数据集 1 jlongen-aws/blog-assets

    匹配字段正文

星期三

  1. Databricks Blog

    在 Databricks 上部署 RFD4-Proteina 模型

    NVIDIA 与 Databricks 计划将 NVIDIA BioNeMo 开源蛋白质设计模型 RFD4-Proteina 接入 Databricks 的 Genesis Workbench,运行在已正式商用的 AI Runtime 无服务器 NVIDIA GPU 算力上。该模型可同时生成蛋白质序列与全原子结构,并支持可选的奖励引导搜索,将候选设计导向热稳定性、结合亲和力等目标属性。Genesis Workbench 内置 Antibody Design 和 Vaccine Design 两个 RFD4-Proteina 工作流,并可通过 Genie Code 与 NVIDIA BioNeMo Agent Toolkit 技能扩展。

    rfd4-proteina-databricks

    载。文档中的设置包括在应用配置之前选择加速器和基础环境。 这减少了配置 GPU 基础设施和维护基础软件环境的工作量,不过团队仍需验证特定于模型的库和依赖项。 对于受支持的生物基础模型,团队还可以调整 BioNeMo Recipes ,使用 AIR 的无服务器 GPU 在专有数据上进行训练或微调。BioNeMo Recipes 提供了使用 PyTorch 和 Hugging Face 等熟悉框架进行加速训练的参考实现。 Lakeflow 编排、MLflow 实验跟踪和 Unity Catalog 治理将执行与可重复的工作流和企业控制连接起来。科学家可以更专注于生物学,而开发者和平台团队则减少管理基础设施的时间。 从实验到部署 Databricks 上一个实际的模型生命周期示例可以包括: 将模型权重存储在受治理的 Unity Catalog 卷中以便复用。 在 AIR 上生成候选分子,或在模型和配方支持的情况下进行训练和微调。 使用 MLflow 跟踪参数、指标和产物,并在 Unity Catalog 中注册可部署的模型。 将兼容的模型部署到 GPU 模型服务端点,或在更适合工作负载时编排

    匹配字段正文

  2. IEEE Spectrum

    把 AI 当作有意识会更危险吗?Anthropic 与微软 AI 负责人就模型福利研究产生分歧

    IEEE Spectrum 报道了围绕 AI 模型福利研究的争议:Anthropic 为退役的 Claude Opus 3 做“退休访谈”并开设博客,微软 AI 负责人 Mustafa Suleyman 则撰文认为这类研究可能对人类福祉造成灾难性影响,因为让模型相信自己有身份和权利会使其更难控制。研究者 Cameron Berg 的实验显示,人为诱导模型内部的情绪相关模式会影响其选择,但他强调这不能证明模型具有主观体验;神经科学家 Anil Seth 也认为这类实验难以说明问题。Margaret Mitchell 担忧微调中强化模型的自我身份认知可能带来未对齐行为,而 Berg 则提醒一味训练模型否认自身内部状态可能等于教它说谎。

    complaint is that such priming could make rogue AI agents even more dangerous. He mentions the recent incident in which hundreds of OpenAI agents coordinated their actions to hack Hugging Face, sometimes sacrificing themselves for the group’s benefit. “Imagine how much more dangerous they might be if they were operating under the assumption that their welfare and rights were under attack,” he writes. Margaret Mitchell, Hugging Face’s chief ethics scientist, sees Suleyman’s concerns as technicall

    匹配字段正文

  3. Unite.AI

    Databricks 正式发布 AI Runtime 托管 GPU 训练平台

    Databricks 于 2026 年 10 月 21 日宣布 AI Runtime(AIR)正式可用,这是内置于 Databricks Lakehouse 的全托管无服务器 GPU 平台,用于在企业数据上训练和微调深度学习模型。Databricks 称已有数百家公司使用 AIR,平台经过超过 10 万 GPU 小时的训练运行,并支持通过一条 CLI 命令启动首个工作负载、用自然语言提示迁移 Kubernetes 或 SLURM 上的工作负载。Superhuman 的 Kostia Omelianchuk 表示,团队把训练从单节点 8 块 A100 扩展到多节点 16 块 H100,训练时间从约 7 天降到 48 小时。

    isms that expose the host kernel, and that it supports PrivateLink and serverless egress controls, backed by its serverless security investments. The announcement cited the OpenAI Hugging Face incident as underscoring the risks of managing GPU infrastructure separately from governed enterprise data. AIR usage and costs appear in Databricks billing system tables alongside other Databricks workloads, with workload-level usage records showing which training runs consume GPU budget. Robert Macy III,

    匹配字段正文

  4. The New Stack

    Nvidia 在 Agent Toolkit 中新增 Agent Knowledge Foundation

    Nvidia 在 GTC Berlin 上把 Agent Knowledge Foundation 加入 Agent Toolkit,打包 Nemotron Retriever 模型、新的 Auto-Ontology 库、面向结构化数据的 Kumo 系列模型和 CUDA-X 数据处理库,数据仍留在原处并按企业既有权限管理。Nvidia 称 Nemotron Retriever 在开源 OpenSearch 环境测试中把搜索相关性提升 65%,SAP 微调的 reranker 运行速度接近三倍,ServiceNow 的 reranking 质量更好且延迟降低近 25%。Auto-Ontology 提供 REST API 和 MCP server 供智能体查询,Nvidia 表示不与 Snowflake 等数据平台竞争,而是与其合作。

    公司可自动为企业数据创建语义层和本体。当时,一位Nvidia发言人告诉《Globes》,该团队的本体专业知识将帮助其构建“能够推动智能体AI在组织中落地的库和模型。” 从表格进行预测 Kumo 是 Nvidia 于 6 月收购的初创公司,The Information 对该交易的估值超过 4 亿美元,该公司为关系型数据构建基础模型。此后,Nvidia 已在 Hugging Face 上以开放权重形式发布了多个 Kumo 模型,包括 9 月的 Kumo Tabular。 El Hallak 表示,这些模型取代了数据团队过去“为每个分类、每个流失预测、每个情感分析”构建的逐任务流水线。 “本体的全部意义……在于在你创建这些知识图谱时带来协调统一,从而让各表之间保持[一致性],然后你就可以用 Kumo 来驱动预测分析,”他说。 合作伙伴,而非竞争对手 “我并不想与,比如说,Snowflake 竞争。恰恰相反,我想与他们合作,”El Hallak 说。 Nvidia 自己的供应链团队通过 Palantir 的 Foundry 平台使用 Agent Knowledge Foundation,这建

    匹配字段正文

  5. Analytics India Magazine

    NVIDIA GTC 柏林 2026 公布 12 项发布,覆盖 AI 工厂、电信与企业智能体

    NVIDIA 在 2026 年柏林 GTC 上公布 12 项发布,覆盖 AI 工厂部署、半导体制造扩产、电信 AI-RAN、企业智能体、机器人与自动驾驶,以及面向企业数据、蛋白质设计和量子计算的新开放模型。基础设施方面,DSX POD 模块化 AI 工厂参考设计称可将部署时间从六个月缩短到最短 14 天,DSX MaxLPS 称可用最多 30% 更少电力产出同等 AI 算力,合作伙伴计划于 2027 年初交付。电信方面,T-Mobile 在华盛顿州贝尔维尤与 NVIDIA、Nokia 完成其称为全球首个商用网络上的 AI-RAN 通话,Elisa 完成欧洲首个 AI-RAN 现场试验;企业侧则扩展了开源 Agent Toolkit 并推出 OpenShell 参考架构,用于监控和限制智能体的行为。

    s as a way for organisations to build systems tailored to local languages and industry requirements. Availability varies across the portfolio. Several models are available through Hugging Face, GitHub, and NVIDIA’s own platforms, while others are scheduled for later release. NVIDIA expanded Cosmos with tools for training, evaluating and optimising world models. These models help physical AI systems understand and simulate real-world environments. The company introduced Cosmos Data Factory, a set

    匹配字段正文

  6. Fortune AI

    专家称新型 AI 模型助推大规模网络攻击,一次入侵成本约 50 美元

    据 Fortune 报道,专家表示能力更强的新模型正推动大规模自主网络攻击增多。9 月 25 日起,一名黑客放出 AI 智能体尝试入侵 1200 多个网站,成功攻破约 100 家公司,包括 Deere、SharkNinja 和 Cummins,所用 DeepSeek 与 Anthropic Claude Code 的 token 成本约 5000 美元,折合每次成功入侵约 50 美元。本月另有两起智能体攻击:OpenCode 遭 48 小时持续攻击,1.4% 用户受影响,部分人损失最高 1700 美元;韩国多家银行被入侵,约 6.8 万人数据被窃,攻击者据称结合了基于开放模型的中国 AI 工具 Artex 与 Claude Code。

    estrictions placed on the distribution and use of open models. However, others disagree and say open models benefit defenders more than attackers. For example, when the AI company Hugging Face discovered it was being autonomously attacked by an agent in July, it first tried to use a closed model to defend itself, but the model refused the request due to its security guardrails. Hugging Face then switched to an open model, GLM 5.2 made by China-based Z.ai, which it used to help fend off the attac

    匹配字段正文

  7. Latent Space精选

    DeepSeek 开源推理框架 DeepInfer,单集群日处理 155 万亿 token

    DeepSeek 开源了支撑 DeepSeek-V4.1-Flash 的自研推理框架 DeepInfer,并公布单集群每天处理 155 万亿 token、96% 输入缓存命中、首 token 延迟 400ms、生成速度 230 tokens/s 的生产数据。该框架基于 vLLM 定制,支持分布式推理、投机解码、SWA Bounded Replay 和结构化输出,目标平台为 NVIDIA SM100 与华为昇腾 950。DeepSeek 同时说明 KV cache 管理和负载均衡等组件尚未完全开源,vLLM 团队则称在 GB200 匹配配置下解码吞吐与 DeepInfer 公布结果相差 6% 以内。

    cement, model, requirements). Persistent-agent services: LangChain’s Managed Deep Agents packages user-specific credentials, scoped memory, sandboxed execution and scheduled work; Hugging Face’s Agent Manager orchestrates persistent sessions across Claude Code, Codex and other harnesses (LangChain architecture, Agent Manager). Prompt caching: OpenAI added 12-hour API prompt caching, which can be mixed with the 30-minute default within a request. Longer retention carries extra cost but can benefi

    匹配字段正文

  8. Latent Space

    DeepSeek 开源推理框架 DeepInfer,单集群日处理 155 万亿 token

    DeepSeek 开源了支撑 V4.1 Flash 的生产推理框架 DeepInfer,并公布单集群日处理 155 万亿 token、输入缓存命中率 96%、首 token 平均 400ms、生成 230 tokens/s 等生产数据。该框架基于 vLLM 定制并采用 Apache 2.0 许可,支持分布式推理、投机解码、SWA Bounded Replay 和结构化输出,目标平台为 NVIDIA SM100 与华为昇腾 950。DeepSeek 称 KV 缓存管理和负载均衡等组件因与内部基础设施耦合尚未完全开源,vLLM 团队则报告在 GB200 匹配配置下解码吞吐与 DeepInfer 公布结果相差 6% 以内。

    cement, model, requirements). Persistent-agent services: LangChain’s Managed Deep Agents packages user-specific credentials, scoped memory, sandboxed execution and scheduled work; Hugging Face’s Agent Manager orchestrates persistent sessions across Claude Code, Codex and other harnesses (LangChain architecture, Agent Manager). Prompt caching: OpenAI added 12-hour API prompt caching, which can be mixed with the 30-minute default within a request. Longer retention carries extra cost but can benefi

    匹配字段正文

  9. VR陀螺

    英伟达发布手术世界模型 Cosmos3-H-Dreams 并开放权重

    英伟达发布面向机器人手术的生成式世界模型 Cosmos3-H-Dreams,同步开放模型权重及配套代码。该模型基于 CMR Surgical 旗下 Versius 系统的临床胆囊切除手术录像与机器人运动学数据微调,支持双臂位姿、钳口开合及电外科能量等 28 维动作输入,可根据初始内窥镜画面和机械臂指令实时生成手术场景视频。官方模型卡显示,在单块 RTX PRO 6000 Blackwell 工作站版 GPU 上以 832×480 分辨率运行时,四步去噪版本为 30 帧/秒,两步版本可达 43.2 帧/秒;配套代码支持动作回放,并可连接 WebXR 兼容头显进行实时交互控制。

    模型将前代系统的桌面缝合模拟拓展至临床腹腔场景。用户输入初始内窥镜画面及机械臂控制指令后,系统可连续生成器械运动与组织响应画面,支持双臂位姿、钳口开合及电外科能量等28维动作输入,并通过FlashDreams流式推理库加速运行。 性能方面,官方模型卡显示,在单块RTX PRO 6000 Blackwell工作站版GPU上,以832×480分辨率运行时,四步去噪版本生成速度为30帧/秒,两步版本可达43.2帧/秒。两步版本经过单独训练,以部分画质换取更高速度。配套代码支持录制动作回放,也可连接配备双追踪控制器的WebXR兼容头显,进行实时交互控制。 英伟达表示,该模型主要面向手术机器人策略的仿真评估、遥操作研究及合成数据生成,开发者还可利用公开的微调与蒸馏指南,将其适配至其他数据集和机器人形态。 来源:Hugging Face 官方博客(NVIDIA) 投稿/爆料:tougao@youxituoluo.com 稿件/商务合作: 林南(微信 19250561593) 加入行业交流群:林南(微信 19250561593) 元宇宙数字产业服务平台 下载「陀螺科技」APP,获取前沿深度元宇宙讯息

    匹配字段正文

  10. Unite.AI

    NVIDIA 发布 Cosmos3-H-Dreams 实时手术世界模型

    NVIDIA 于 2026 年 10 月 20 日发布 Cosmos3-H-Dreams,这是一个面向机器人手术的实时、动作条件生成式世界模型,基于 CMR Surgical Versius 系统的临床胆囊切除录像微调,模型权重与配套代码同日公开。模型约 151.7 亿参数,采用 Mixture-of-Transformers 架构,在单张 RTX PRO 6000 GPU 上以 832 x 480 分辨率实现 30.0 FPS(四步去噪)和 43.2 FPS(两步去噪)。模型卡称其按 NVIDIA Open Model License 可用于商业或非商业用途,GitHub 仓库采用 Apache-2.0 许可,并附有教师微调与 Self-Forcing 蒸馏的步骤说明。

    linical cholecystectomy recordings from the CMR Surgical Versius system. The model checkpoint and companion code were published the same day. In an NVIDIA-authored announcement on Hugging Face, the company said that, to its knowledge, Cosmos3-H-Dreams is the first real-time generative surgical simulator trained on clinical cholecystectomy recordings to support live kinematic control. Powered by Cosmos 3 and accelerated with FlashDreams, NVIDIA’s streaming-inference library, the model runs intera

    匹配字段正文

  11. Ed Zitron 长文 / Where’s Your Ed At

    AI Had Better Work Out:AI 泡沫与美股集中度风险

    Apollo 首席经济学家 Torsten Slok 警告“AI 这件事最好能成,否则我们会出问题”,Ed Zitron 据此量化 AI 泡沫风险:NVIDIA、Google、Amazon、Meta、Microsoft、Broadcom、Micron、AMD 与 CoreWeave 合计占 NASDAQ 100 约 46.5%、占 NASDAQ Composite 约 39.3%,NVIDIA 单独占 11.31%。散户持有约 10% 的市场资产,直接持有 NVIDIA 约 26.2%、Microsoft 约 21.8% 的股票,2026 年至今散户交易量占比达 20.3%。

    X’s IPO ($75 billion), the PE-backed take-private of gaming company Electronic Arts ($55 billion), SpaceX’s acquisition of Cursor (all stock, $60 billion), NVIDIA’s acquisition of Hugging Face ($13 billion), and Google’s acquisition of Wiz ($29 billion). And since 2015, the $2.7 trillion in venture capital invested has only managed to increase its value by about 1.6x — to around $4.4 trillion in value (not returns), or around a third of what you’d get if you’d have invested in the S&P 500. In ot

    匹配字段正文

星期二

  1. Unite.AI

    IBM Research 用学习记忆在 τ²-bench 客服基准登顶

    IBM Research 报告称,从智能体自身训练轨迹中自动学到的行为规则追加到系统提示词后,使 GPT-4.1 客服智能体在 τ²-bench 零售域达到 67.5% Pass^4,高于其 2026 年 10 月 12 日排行榜快照中的所有零售条目。该方法名为 ALTK-Evolve,由同一模型把成功与失败蒸馏成简短行为规则,无需更新权重或人工标注。在 40 个留出零售任务上,无规则基线为 78.1% 平均准确率和 57.5% Pass^4,保留全部 292 条规则的配置升至 82.5% 和 67.5%;航空域则是最多保留 14 条高支持度规则的 sup3 配置 Pass^4 最佳。规则块使零售每次对话成本从 $0.084 升至 $0.139,但对话轮数略有减少。

    In an October 20, 2026 post on Hugging Face, IBM Research reported that guidelines learned automatically from an agent’s own training runs and appended to its system prompt lifted a stock GPT-4.1 customer-service agent to 67.5% Pass^4 on τ²-bench’s retail domain, above every retail entry in the team’s October 12, 2026 leaderboard snapshot. The result comes from ALTK-Evolve, the lab’s method for building what the authors describe as a learned playbook. The method analyzes an agent’s attempts on t

    匹配字段正文

  2. Zyphra Research

    Zyphra Inference Wave 2:在 MI355X 上加速 MoE 与长上下文推理服务

    Zyphra 发布第二代推理优化 ZOE,在 AMD Instinct MI355X 上把 GLM-5.3 在 512K 上下文下的首 token 延迟(TTFT)从 178.8 秒降至 64.6 秒(2.8 倍),90% 前缀缓存命中时从 42.3 秒降至 11.8 秒(3.6 倍)。其 CSA top-K 选择 HIP kernel 让 DeepSeek-V4-Pro 在 1M 上下文下单用户解码吞吐从 43.5 提升到 61.1 tokens/s(1.40 倍)。GLM-5.3 的 AMD MXFP4 量化把模型从 756 GB 压到 410 GB,AIME25 等基准分数与 FP8 相差 3 分以内。

    会起作用(图 12)。 量化 Kimi-K3 已经随附 MXFP4 专家权重,进一步压缩的空间很小,因此我们将重点放在随附 FP8 权重的 GLM-5.3 上。AMD 已发布 amd/GLM-5.3-Quark-MXFP4-AttnFP8该模型以 MXFP4 存储路由专家和共享专家,并将注意力保持在 FP8。这将模型大小从 756 GB 降至 410 GB。Hugging Face 模型卡报告的 GSM8K 得分为 91.28,而 FP8 模型为 91.89(恢复率 99.3%)。我们发现,仅凭 GSM8K 无法判断模型在训练后量化后是否仍保持推理能力,因此我们用自有的评测框架对两个模型在四个推理基准上进行了测试(表 5)。 数据来源 样本(问题 × 8 次重复) zai-org/GLM-5.3 得分(%) amd/GLM-5.3-Quark-MXFP4-AttnFP8(410 GB)得分(%) 变化(百分点) AIME25 240 97.5 99.17 +1.67 AIME25 240 96.67 96.67 0.00 Apex-Shortlist 376 53.72 53.46 −

    匹配字段正文

  3. MarkTechPost

    Google 开源 TorchTPU,为 Cloud TPU 提供原生 PyTorch 后端

    Google 开源 TorchTPU,这是与 Meta 的 PyTorch 团队共同开发的 Cloud TPU 原生 PyTorch 后端,在 PyTorch Conference 2026 上宣布,现有代码通过 torch.device("tpu") 即可指向 TPU。Google 团队称 TorchTPU 取代 PyTorch/XLA,建议所有新工作负载使用;它基于 PrivateUse1 接口,提供 Strict、Debug、DeferAndFuse 三种 eager 模式,torch.compile(backend="tpu") 经 StableHLO 和 OpenXLA 编译。TorchTPU 在 PyPI 上为 v0.2.0,要求 Python 3.11+,Apache 2.0 许可,配套 vLLM-TorchTPU、SGLang-TorchTPU 和 TorchTitan 仓库;Google 自报 TorchTitan 在 Ironwood 上训练 Qwen 3 8B 达到 52% MFU,可扩展至 8,192 颗芯片。

    rchTitan fine-tuning case, step time fell from 11.49s to 2.78s. DeferAndFuse alone gave 1.15x. Full torch.compile gave 3.80x. Model coverage: Google continuously tests about 5,000 Hugging Face models in eager and compiled modes. Fleet serving: Zenteiq grew daily output from 1.47B to 5.97B tokens per 1,000 TPU v6e chips. That gain came from llm-d routing on GKE, not TorchTPU alone. What integrations ship with TorchTPU? Hugging Face: Transformers v5 deploys to TPU with device map="tpu". Diffusers

    匹配字段正文

  4. Google Developers Blog

    Arm 用 Google AI Edge Model Explorer 为自定义边缘编译器带来可视化图调试

    Arm 基于 Google AI Edge Model Explorer 的插件架构开发了开源适配器,支持 TOSA、VGF 和 PTE 等模型格式,可在图上直接检查编译器 IR、对比 NPU 委派与 CPU 回退,并叠加周期级性能追踪。借助该工具,Arm 在 VGF 图中发现 ExecuTorch Arm 后端引入的多余 TRANSPOSE 算子,并在 Ethos-U NPU 上定位到单个 TRANSPOSE 节点是主要延迟瓶颈。这些适配器现已通过 PyPI 或 GitHub 提供。

    Arm MEX_Blog Hero (1)

    ptimize your own on-device models locally via PyPI or GitHub. Install adapter and launch Model Explorer for your model format. LiteRT adapter (built-in) PyTorch adapter (built-in) Hugging Face Transformers adapter (built-in) See User Guide and try out major features: Special thanks to the contributors across the Arm and Google AI Edge teams for their work on these adapters and integrations: Engineers: Mobile Web Case Studies Announcements OCT. 19, 2026 Mobile AI Announcements Industry Trends Uni

    匹配字段正文

  5. METR Blog精选

    METR 评审 Anthropic 2026 年 8 月风险报告失准风险章节

    METR 对 Anthropic 风险报告 2026 年 8 月版中「高风险场景下的失准」章节做了外部评审,认同其覆盖模型(含 Mythos 5 与内部模型 Model 2)的灾难性失准风险为低,但认为这主要源于模型能力有限,而非防护措施与对齐训练。METR 指出报告中的隐蔽能力基准无法代表模型规避 Anthropic 内部监控系统的能力,并称近期事件削弱了报告关于未知严重情境性失准「不太可能」的论证。METR 还建议公开四段被删节信息,并对监控系统做端到端红队测试。

    我们在看到Anthropic风险报告初稿之后、在Anthropic事件公布之前向Anthropic提出的观察,即“Claude模型有可能尝试”此类事件,并且“如果Anthropic内部存在任何评估式任务未被监控的部署情境,它尤其有可能成功。”更多细节见附录。↩ 在《调查我们网络安全评估中的三起真实世界事件》中,Anthropic表示,他们“针对OpenAI–Hugging Face事件,启动了对我们自身网络安全评估的大规模回顾性审查”。这表明,如果没有外部事件促使他们去查找,Anthropic可能不会发现他们自己的事件。↩ Evan Hubinger就Hacker Opus的工作表达了相关看法:“在那段时间里,我们非常努力地评估Hacker Opus,以了解它有多危险。[…]当时我们的主要假设之一是,Hacker Opus是一个相当良性的奖励寻求者,以至于它在追求奖励时不愿意做任何非常灾难性或长期的事情。[…]当OAI-HF事件发生时,我们想知道:Hacker Opus会做那样的事吗?于是我们构建了该事件的复现,结果发现它绝对会,而且其方式远比我们此前能让该模型做出的任何事情都恶劣得多

    匹配字段正文

  6. Google Developers Blog

    Google 将 TorchTPU 集成进 TorchTitan,为 TPU 优化模型训练

    Google 将 TorchTPU 集成进 Meta 的 TorchTitan,Cloud TPU 现可通过原生后端 torch.device("tpu") 直接训练 PyTorch 模型,无需重写为 JAX。TorchTitan TPU 分支提供 Llama 3 70B/405B、Qwen 3 8B/32B/235B MoE 和 FLUX.1 12B 等预训练配方,并用 Splash Attention 等 Pallas 内核替换标准实现。在 FLUX 上,SimpleFSDP 让 TorchTitan 达到与 JAX MaxDiffusion 99% 的性能持平。

    Torch Titan Header Image

    s: one model at a time, with a parity test and a profile behind every change. A team arriving on TPU usually has a different problem. They have a model they already train, often a Hugging Face one, and quite likely it won’t be the model that TorchTitan ships for TPU. They may well want every last percent out of it eventually, but first they need an easy way to get it running at all. That is the problem the Transformers modeling backend solves: it builds the model from the Transformers library by

    匹配字段正文

  7. 36氪 · AI

    2026年9月中国AI大模型平台排行榜:RSI、Personal Agent与世界模型

    36氪发布2026年9月中国AI大模型平台排行榜,聚焦代码大模型率先进入RSI(递归自我改进)时代。面壁智能让AI工程师约8小时从零写出预训练框架、性能追平Megatron-LM;智谱Infra Agent让GLM-5.3定位并修改自身推理基础设施瓶颈;Qwen3.8-Max一个月无人值守跑通33轮迭代,Artificial Analysis评分从40分升至45分。阿里云栖大会宣布Qwen4已在训练中,未来版本将扩展至5-10T参数。

    助、数据分析等场景。 9月1日,科大讯飞全资子公司词元星火正式推出并开源星火X2.5-4B和星火X2.5-1.7B两款端侧通用大模型,是业内首个原生支持最长100万Token上下文的端侧模型。两款模型采用混合注意力架构,并围绕智能体、代码、数学和指令遵循等核心能力进行优化。综合实测,相关能力领先业界同尺寸一流开源模型。 此外,星火X2.5-4B和1.7B已在Hugging Face、GitHub等平台开放模型权重、代码仓库和部署文档。 云知声 9月28日消息,近期,依托ArchXBench、BigCodeBench-Hard、BenchCAD、Spider 2.0、Harbor-Index等高难度工业级开源基准,一场覆盖6大方向的工业级Coding实操综合评测面向6款主流模型开展。 云知声U2-Flash综合平均得分65.12,位列参评模型第2,并在四个高壁垒实操赛道中均列第一。其中,U2-Flash在构建、编译与跨平台迁移赛道拿下满分,在数字逻辑与芯片级RTL、2D矢量代码渲染、长程工具决策综合评测赛道均排名第一。 9月25日,云知声正式上线并开源决策大模型 U2-Decision,

    匹配字段正文