Ai2 发布 olmo-eval:面向 LLM 开发循环的评估工作台
Ai2 推出基于 OLMES 标准的 olmo-eval 评估工作台,专为 LLM 开发中的频繁迭代设计。该工具支持智能体与多轮评估,允许按需选择轻量直接运行或容器隔离环境,并提供逐题对比分析以区分真实改进与噪声。
Ai2 推出基于 OLMES 标准的 olmo-eval 评估工作台,专为 LLM 开发中的频繁迭代设计。该工具支持智能体与多轮评估,允许按需选择轻量直接运行或容器隔离环境,并提供逐题对比分析以区分真实改进与噪声。
Modal 发布开源库以解决 LLM 强化学习后训练的基础设施瓶颈。该方案通过 RDMA 技术将 Qwen3-8B 等模型的权重同步速度提升 100 倍,显著降低多节点集群成本。
Modal 向 Team 和 Enterprise 计划用户开放基于角色的访问控制(RBAC),旨在为人类开发者和 AI Agent 提供精细化的权限管理。该功能以 Environments 为安全边界,支持 Restricted Environments 限制 Agent 仅能在指定环境内部署和管理资源,并集成审计日志记录操作行为。