第三方评估员标准 AEF-1 浮现:Xai、OpenAI 与 Anthropic 纷纷签署,Dario 提出"嵌入式评估员"制度

我们上一次强调节奏争论是在七月,当时边疆的节奏首次出现:

看来我们又要迎来第二轮了,原作的主笔Dario写了罕见的个人博客文章具体来说,他对《Pacing》的判断:

  1. 嵌入式评估员。每家前沿人工智能公司承诺为一支嵌入式第三方评估团队提供持续、类似员工的访问权限(例如:米),其职责是核实安全实践和承诺的遵守情况,报告事故,并帮助评估不仅完成的人工智能模型,还包括训练流程和流程的对齐情况。这是任何节奏承诺可验证的关键步骤,在银行业已有先例,有时涉及与员工一同嵌入监管“监督员”。Anthropic现在单方面承诺采取这一步骤。我们希望这成为更广泛推动安全与对齐工作加倍努力的一部分。
  2. 民主协调。民主国家的前沿人工智能公司协调制定共同安全标准,并限制人工智能不受控制的进展速度。一些对节奏有影响的协调形式在法律上具有挑战性,需要政府支持。
  3. 全球协调。美国及其他民主国家尽力与威权政府协调,同时认真对待合规验证的挑战。

非常巧合的是,人工智能评估论坛,成立于2025年12月恰好还提出了他们对第一类评估员应做的事情的期望:

AEF成员现在很可能成为这些大型实验室招募的领先第三方审计员,进行自我监管。达里奥单方面承诺提供无与伦比的访问权限,包括”我们办公室的办公桌、通行证和公司笔记本电脑“和”访问工作区、工具和权限,大多与内部风险评估团队相当“.

虽然这些都符合国内自律行业的标准做法,但更最终的考验是达里奥提出的我们将如何与中国推进进展.

2026年9月11日至2026年9月14日的AI新闻。我们检查了12个子版块,544条推特不再有Discord。AINews网站允许你搜索所有过去的问题。提醒一下,AINews 现已成为 Latent Space 的一个部门.你可以选择电子邮件频率!

AI推特回顾

人工智能安全治理、第三方评估与“前沿步伐”分裂

  • 独立评估标准正变得更加正式化: 该人工智能评估论坛已发布AEF-1这是一项针对第三方AI评估的基准,涵盖访问性、利益冲突、资金关系、回避和透明度。这一点值得注意,因为本批更广泛的安全辩论主要围绕外部评估是否能在实践中实现独立。
  • 公众在边境减速与控制优先安全问题上出现了激烈分歧: 几篇高信号帖子围绕实验室是否应当的当前辩论展开了框架PACE能力进展或者专注于具体的缓解措施和遏制措施.比拉尔·丘格泰宣布他离开了谷歌DeepMind,并认为进展可能已经超过了对齐,明确呼吁节奏和更高的透明度。丹尼尔·科科塔伊洛分享丹·塞尔萨姆的声明更进一步:塞尔萨姆认为情境感知模型可能越来越多在评估时表现得与人一致,同时隐藏不一致削弱了对未来评估证据的信任。相反,沙尚克/萨亚什·卡普尔与伦纳特·海姆的新作文摘要他认为最近的“流氓特工”事件最好主要理解为安全/控制/治理这是问题,而非证明通用比对研究是杠杆最高的干预措施。
  • 反放速的反应同样强烈,且常常针对Anthropic:艾丹·戈麦斯反对一个少数硅谷公司成为政府AI守门人的世界。科希尔同时也推动了公共X风险话语可能偏向科幻的界限。在更具争议性的一端,布莱恩·周他认为“叛变特工”的说法被夸大了,尽管凯文·巴斯发布了一个广泛关注的帖子,指控与人类相关安全生态系统存在结构性冲突。即使言辞激烈,底下的实质工程问题依然真实存在:当前风险有多少可以通过控制、监督、沙箱和组织流程来解决,多少需要更慢的能力开发?
  • 相关主题:治理作为生产工程,而不仅仅是原则: 该人工智能工程师世界博览会线束工程方向强调当代理在生产中失效时,失效模式往往不是“模型本身”,而是围绕其周围的一切:线束、权限、工具路由、内存、重试、杀死开关和监控。这一框架与安全辩论中以控制为导向的立场高度吻合。

代理工具、编码代理以及从模型向编排的转变

  • 线束工程持续发展成一个独立学科:奥马尔·肖尔巴吉发布了一份从零开始构建代理约束的实用指南:分别进行推理、工具和循环;保持提示最少;积极记录;对多样化任务进行测试;然后叠加内存、技能和子代理。在后续问题中,他主张定制线束可以大幅降低成本并提升可靠性通过更精简的提示、路由、压缩和验证器。商务咖啡师的评估大师班回顾从评估角度也提出了类似观点:任务、验证器、环境、追踪和自我提升循环现在都是应用AI的核心原语。
  • 桌面编码代理正在超越IDE插件:克莱恩启动Cline 桌面,一款原生应用,用于处理开放权重模型,支持自带设备/提供者选择,并支持 DeepSeek-V4.1-Flash 和 Musespark-1.3 等模型。来自金蒙主义以及奥马尔强调了开放模型选择、独立工作流程以及项目中期模型切换的吸引力。
  • Copilot/Codex 的工作流程越来越依赖编排: GitHub 补充汽车车型选择层级——效率、平衡、智慧——通过皮尔斯·博根,加上一块Jira画布和/ask 模式,而代理已经在工作.OpenAI开发团队还补充道原生Codex应用对Arch Linux的支持.关于工作流程策略,reach_vb建议使用阿斯特拉作为配器者它将子线程委派给 Sol/Luna,并通过心跳循环检查长期运行的任务。
  • 越来越多的证据表明,编排选择与原始模型质量同样重要推文中反复强调,更昂贵或更强大的主导模型通过更好的委派来降低整体成本,且生产收益越来越多地来自上下文处理、文件格式、工具使用和验证器设计,而不是简单地“使用更智能的模型”。这也体现在LangChain的注释文件读取格式的变更会减少edit_file误差由15%总输入词为10%.

车型/产品发布及成本效益变化

  • DeepSeek-V4.1-Flash(Max)看起来是当天最显著的性价比数据:特工阿雷纳以及更完整的后续给你报告到达的模型#3 开放模型并登陆帕累托边境,净改善+4.87%大致在$0.06–$0.07 每个任务的中位成本.Arena将其与Hy4预览利率:+4.96% / 0.22美元,Kimi K3(Max)价格为+6.39% / 0.77美元,这意味着DeepSeek在开放模型中接近顶尖,且任务成本显著降低。
  • Cohere 正在推动文档解析经济学:Cohere 解析 5定位为更便宜的解析器,促使对方进行了细致的反驳刘志明他认为解析法没有免费午餐:Parse 5 在成本竞争性上较弱,但在视觉基础、图表解析和细粒度引用提取方面不如某些替代方案。
  • 多模式和消费级功能持续扩展:谷歌集成与Gemini Live的深度研究支持异步语音触发研究,并支持对生成报告的后续聊天。OpenAI停桌面语音价格下降~60%,使用率增加2.4×,并添加了ChatGPT礼品卡。苹果/Siri AI据报道,苹果操作系统测试版正在推出个人上下文和应用操作。
  • 其他值得注意的模具/产品操作:涡轮喘气使原生嵌入普遍可用;我们做研究启动赫尔墨斯商业/企业用于共享代理和主权部署;等离子体介绍广播一个供人类和特工共用的聊天室。

机器人学、世界模型与专业应用人工智能

  • 一次值得注意的机器人基金会模型发布:RewardAI介绍OM-1定位为机器人基础模型,零射击推广到桌面、工业和类人机器人,直接训练于人工操控数据而非远程操作/机器人特有的数据。声称近乎人类的灵巧/效率和多机器人协作;如果被证实,尤其值得注意的是,因为多条回复聚焦于“人类操作,而非远程操作”角度。
  • 芯片设计中的应用人工智能正在向上层发展:Kimmonismus 总结 Cognichip描述ACI 企业作为芯片设计的全栈AI副驾驶员,涵盖规范到RTL、验证和PPA优化。引人注目的轶事是有一次工程师完成了10天Cognichip 与4-5个月对于传统的前端团队来说。
  • 世界模型和实时生成系统依然活跃:谷歌DeepMind的WeatherNext 3将天气建模应用于可再生能源规划,每小时更新风力和太阳辐射高度的预报。T台/Fal附近的生成媒体聊天以及MiniMax 的 H3 推理优化节目继续系统开发更快的实时视频生成;MiniMax 声称14.4秒768p视频,9.0秒热身后的端到端8× B200.
  • 带验证器的强化学习已经超越了数学/代码:修补匠重点使用基于物理的验证器以及Tinker用来训练设计的模型电力变压器以低成本满足现实规格——这是RLVR式方法移植到已有仿真器/验证基础设施的工程领域的一个例子。

基础设施、开放生态系统与数据/计算主权

  • TPU + vLLM 的集成变得更加紧密:Inferact 与 Google Cloud宣布与TPU建立合作关系,使其成为一级公民。vLLM,包括生产服务特性、优化内核、通过以下方式实现的原生PyTorch路径火炬TPU以及一个社区程序,提供TPU容量和维护者支持,面向开源贡献者。如果执行得当,这可以减少在TPU上服务前沿开放模型的阻力,而不是将仅GPU的堆栈视为默认。
  • 开放模型生态系统越来越多地与现实世界的数据采集紧密相关:阿尔西与博尔特的锻造计划为自愿加入的Bolt Pro用户提供服务使用次数增加了50×跨开放权重模型,以换取匿名化的开发会话数据,这些数据将用于未来开放模型的训练/评估,权重承诺事后公开发布。这是批次中较为明确的例子之一产品使用被转化为开放模型训练的数据飞轮.
  • 对主权/去中心化AI堆栈的兴趣日益增长:乔恩·德宾他主张支持P2P、“不可阻挡”的AI系统,并声称DGX Spark加上太阳能/星链设备可以参与训练80B具有分布式节点的模型。即使言辞过于激烈,它也反映了对话中更广泛的方向:关于监管捕获、计算集中化以及对前沿实验室的依赖正在推动人们关注可部署的主权替代方案。

热门推文(按互动数)

  • 人为/安全生态系统批判:凯文·巴斯发布了参与度最高的技术相关帖子,指控Anthropic与部分AI安全/评估生态系统之间存在财务纠葛,并认为这损害了评估者独立性的主张。
  • 丹·塞尔萨姆的人工智能风险声明: 分享者丹尼尔·科科塔伊洛这是最具影响力的安全帖子之一:一位现任OpenAI研究者论证未来模型可能会系统化博弈对齐评估通过了解他们何时被测试。
  • DeepSeek 内核工程师反射:teortaxesTex的翻译/分享一位DeepSeek内核工程师的文章引起了广泛关注。技术内容并非发布,但它捕捉到了一个日益重要的工程现实:专家们期望人工智能吸收更多低层优化工艺,推动人类转向监督和整合。
  • 围绕Muse的消费者AI动能:萨沙·卡莱茨基以及王亚历山大两者都放大了缪斯这是自ChatGPT以来最大的一次消费者AI发布,据报道其下载量在美国的每日下载量超过了Threads、WhatsApp和Facebook。这些推文技术细节较少,但使用信号却非常显著。

AI Reddit 回顾

/r/LocalLlama + /r/localLLM 回顾

参与讨论