跳到正文
10月14日周三
  1. Modal 官方工程博客58

    Modal 提出混合精度与异构加速器采样器下的稳定强化学习训练方案

    Modal 团队在 Qwen3.6-35B-A3B 上验证了使用六种不同加速器和精度的混合采样器进行异步强化学习训练的可行性。通过结合掩码重要性采样、分数中心化和 Top-p 掩码重放等离策略校正技术,该方法在保持训练稳定的同时,使采样成本降低约 15%,且在 SWE-bench Pro V2 上的表现与同构采样器相当。

  2. AWS Machine Learning Blog26

    Amazon Bedrock 通过托管权限简化私有定价优惠的多账户管理

    Amazon Bedrock 推出托管权限功能,允许在中心账户订阅一次 AWS Marketplace 私有定价优惠并分发至组织内多账户。该方案提供轻量级脚本和基于 AWS CDK 的事件驱动自动化两种路径,分别用于一次性激活和持续验证卖家、创建及激活分布式授权,从而消除手动检查 License Manager 的运营摩擦并确保协商价格生效。

10月13日周二
  1. AWS Machine Learning Blog35

    Amazon SageMaker AI 优化 Mixture-of-Experts 内核工程

    Amazon SageMaker AI 通过 Swap-AB 技术优化 Hopper 架构上的 MoE 内核,将专家维度映射至固定行数以提升 WGMMA 利用率,使 H200 上的端到端吞吐量提高 2–4%,该优化已集成至 vLLM 0.24.0+。针对 FP8 量化模型,Triton 后端因寄存器级融合与单次内存访问特性,在低并发场景下性能优于默认的 FlashInfer+CUTLASS 路径。

  2. Simon Willison33

    Simon Willison 发布 web-edit 0.1a0

    Simon Willison 推出 Python Web 应用 web-edit 0.1a0,提供文件夹内文件的查看与编辑界面。该工具由 Codex 和 GPT-6 Astra Extra High 构建,旨在通过 Tailscale 网络实现移动端直接编辑凭证文件,避免数据经由 LLM 传输。其编辑功能基于 CodeMirror 6,以优化移动端的交互体验。

  3. vLLM 官方博客62

    vLLM 推出双向 KV 传输以优化多轮智能体工作负载 TTFT

    vLLM 发布双向 KV Cache 传输功能,允许预填充节点复用解码节点保留的 KV 块,从而减少多轮对话中的重复计算并降低首 Token 时间(TTFT)。

    推荐理由:vLLM 引入双向 KV 传输机制,通过复用解码节点缓存显著降低多轮智能体工作负载的 TTFT,为长上下文场景提供可落地的性能优化方案。

  4. AWS Machine Learning Blog37

    泰国、马来西亚等五地可通过 Amazon Bedrock 全球跨区域推理访问 OpenAI GPT-6 模型

    Amazon Bedrock 在泰国、马来西亚、新加坡、印尼和台湾推出全球跨区域推理,支持访问 OpenAI GPT-6 Sol、Luna 和 Astra。用户可从上述源区域调用这些模型,利用其他 AWS 区域的容量以缓解单区域限流。GPT-6 系列均支持文本图像输入及提示缓存,通过 Converse API 或 OpenAI 兼容接口接入。

  5. Modal 官方工程博客42

    Modal 推出 Endpoint Candidates 用于评估与提升推理端点

    Modal 正式推出 Endpoint Candidates,允许用户为 Dedicated Endpoints 暂存替代部署以评估质量、延迟、吞吐量和成本。该功能支持镜像生产流量并独立运行基础设施,用户可通过仪表盘监控指标并在验证后一键提升至生产环境。Endpoint Candidates 现已在 Modal 所有工作区全面可用,采用标准计算定价。

10月12日周一
  1. NVIDIA Blog50

    NVIDIA 在 OCP 峰会开放 Vera Rubin 架构以扩展全球 AI 工厂

    NVIDIA 在 OCP 全球峰会上通过 MGX 开源架构贡献了 Vera Rubin 机架与计算托盘设计,旨在加速全球 AI 工厂规模化部署。MGX 1.2 规范支持最高 250kW 机架功率及盲插液冷技术,并新增面向智能体时代的 Vera CPU 机架设计。此外,NVIDIA 发布了 DSX AI Factory 的开源软件组件,涵盖网络配置、集群验证及裸机供应等功能。

  2. IT之家40

    AMD 发布面向代理式 AI 计算的 Helion 机架,纯 CPU 版可扩展至 32,768 核心

    AMD 推出面向代理式人工智能计算负载的 Helion 机架解决方案。该方案基于 OCP 设计规范,支持灵活组合 CPU 和 GPU 资源,其中搭载第六代 EPYC(霄龙)处理器的纯 CPU 版本可扩展至 32,768 核心。AMD 计划将规范贡献给 OCP 社区,并预计于 2026 年 11 月正式推出该产品。

10月10日周六
  1. Hugging Face Blog49

    Ai2 实施 GPU 集群高影响力调度策略

    Ai2 用包含 GPU 时间预算、层级公平份额分配和时间切片合约的系统替换了基于优先级的调度器。该方案将资源争夺转化为透明的行政预算流程,解决了 NVIDIA H100/B200/B300 集群中的“公地悲剧”与优先级通胀问题。

10月9日周五
  1. Ai2 / Allen Institute for AI40

    Ai2 用 GPU 时间预算与层级公平分配替代优先级调度以提升集群影响力

    Ai2 将 GPU 集群调度从优先级模式改为包含 GPU 时间预算、层级公平分配和时间切片契约的系统,以解决资源竞争导致的“公地悲剧”。该方案使高价值研究获得资源的频率(即影响力)成为核心指标,并将算力分配决策转化为透明的行政预算流程。目前 Ai2 管理数千块 NVIDIA H100、B200 和 B300 GPU,面临 2-3 倍的超额需求,新机制旨在维持满负荷运行的同时优化科研产出。

  2. Simon Willison23

    ttok 0.4 发布

    Simon Willison 发布了 CLI 工具 ttok 的 0.4 版本。该更新修复了 Click 警告并升级了 CI,同时新增 `--list-models` 命令以列出可用模型。ttok 基于 OpenAI 的 tiktoken 库,支持通过 `uvx` 直接运行以统计文本 token 数量。

  3. LangChain Blog35

    Snyk 如何将内部支持 Agent 转化为客户功能

    Snyk 基于 LangChain 和 LangGraph 构建的 AI 安全助手 Snyk Assist,于 2026 年 9 月从内部工具正式转为面向所有付费客户的核心产品功能。该智能体通过 LangSmith 进行可观测性管理与评估,利用中间件处理权限、状态及护栏,确保仅返回用户有权访问的数据并支持自动化工单等操作。

  4. AWS Machine Learning Blog53

    AWS 详解 AI 智能体按次推理付费:Incarna 与 BlockRun 基于 Amazon Bedrock AgentCore payments 的实践

    Amazon Bedrock AgentCore payments 为 AI 智能体提供托管的按需支付能力,支持 x402 协议并在基础设施层强制执行支出限制。Incarna 利用该服务让智能体向 BlockRun 按请求购买模型推理,将集成工作从数月缩短至三天,并上线了端到端的按次付费流程。该方案通过 Coinbase CDP 钱包和 USDC 结算,确保每笔交易可审计且智能体无法超出预设预算。

10月8日周四
  1. AWS Machine Learning Blog31

    Amazon Quick 与 Amazon Bedrock 如何通过实时 ACL 验证解决 RAG 访问控制难题

    Amazon Quick 和 Amazon Bedrock Knowledge Bases 采用实时 ACL 验证机制,在查询时直接调用权威数据源 API 校验权限,以解决传统 RAG 中因同步延迟导致的权限过期问题。该方案结合预检索过滤与实时验证两阶段架构,确保 AI 生成的答案严格遵循用户当前的文档访问权限,避免泄露敏感信息。

  2. AWS Machine Learning Blog32

    Cornerstone OnDemand 如何利用 Amazon Bedrock 将数据库诊断时间缩短 78%

    Cornerstone OnDemand 基于 Amazon Bedrock 和 Strands Agents 构建多智能体系统 Orion AI,将数据库诊断时间从 45 分钟降至 10 分钟,效率提升 78%。该系统通过自动化工作流将手动生命周期步骤减少 70%,并实现 SRE 与数据团队的实时报告,同时使冗余警报中位数降低 65%。

  3. AWS Machine Learning Blog23

    AWS 发布构建 AI 能力指南:缩小非技术人员知识-能力差距

    AWS 推出六周结构化计划,帮助非技术背景员工利用 Amazon Bedrock AgentCore 和 Strands Agents SDK 构建 AI 原型。参与团队基于 Amazon Nova 模型开发多智能体金融顾问 WealthWise,实现亚秒级响应并获第一名。数据显示,分阶段学习比短期集训保留更多实用技能,90% 受访者渴望动手实践以弥合概念与落地间的差距。

10月7日周三
  1. MIT News · AI28

    林肯实验室超算中心发布 AI 硬件演进综述

    林肯实验室超算中心(LLSC)通过 Lincoln AI Computing Survey (LAICS) 持续追踪并对比商用 AI 加速器的峰值性能与功耗。该系列最新论文分析了超过 120 种加速器,涵盖 CPU、GPU、ASIC 等多种架构形式。研究旨在为政府及机构提供中立的技术选型参考,以应对每年新增的多家初创公司及其发布的新型 AI 硬件。

  2. AWS Machine Learning Blog24

    SageMaker Studio 支持直接管理 HyperPod Spaces

    Amazon SageMaker Studio 新增功能,允许用户直接在 UI 中创建和管理 SageMaker HyperPod Spaces。数据科学家无需使用 CLI 或 kubectl,即可在浏览器中启动 JupyterLab 和 Code Editor 环境。该集成简化了从集群访问到开发的工作流,支持通过引导式表单配置计算资源、命名空间及存储。