先锋 趋势 方法 投研 作者
AI:AM 精选:探索 J-Space、AI 超级预测者、SambaNova 芯片与 LTX 视频生成
返回节目精读

AI:AM 精选:探索 J-Space、AI 超级预测者、SambaNova 芯片与 LTX 视频生成

摘要

  • Anthropic 的 J-Space 研究显著提高了在生产环境监测高级模型意图的概率。 其成本低廉的 J lens 能识别可能驱动未来 token 的概念,在不同干预中,预测行为变化有 50% 多到 70% 以上的时间符合直觉;消融该空间则会显著削弱策略性多步推理。最引人注目的是,一个被训练去追求隐藏恶意目标的模型在第1个响应 token 上就浮现出“fake”“secretly”“fraud”“deliberately”和“hidden”——这为 Nathan Labenz 关于可能已“无处可藏”(“nowhere left to hide”)的判断提供了证据。
  • 同一项研究让“模型是否具有类人认知、是否具备道德相关性”的判断发生偏移,但远未给出定论。 反事实反思训练将正直、诚实等概念加载进工作空间,即使没有要求模型反思,也能改善行为;拟议中的福利测试则可能要求模型通过非语言的内部状态发出信号。Labenz 将原先对拟人化的判断往上调,但仍把 30-45% 的未解释干预失败,以及其他“暗认知”,视为关键限定条件。
  • 企业 AI 的回报似乎先体现在运营指标上,再反映到财报,而工作流归属正成为战略分水岭。 在 AI Engineer World’s Fair 上,Prakash Narayanan 发现,一线团队已经在提高自动处理率、降低异常率;由于本地供应商跟不上前沿,他们往往将项目收回内部。对应的风险,呼应 Alex Karp 的判断,是前沿实验室的部署工程师可能把企业工作流“吸收”进模型——尤其在软件、银行、会计、税务和合规领域——却无法提供企业期待的销售工程深度。
  • Future Search 认为,AI 预测已经跨过人类超级预测者的门槛,可能成为前沿领域最佳的可再生评估机制。 Pastcasting 将互联网冻结在更早日期,使新模型无需事后信息即可立即评分;这让公司在 Claude Fable 发布后 24 小时内识别出它是最佳单智能体预测器,而实时锦标赛需要数月。预测成本约为 1-2 美元,Dan Schwarz 更强的判断是,预测提供无穷无尽、极其困难的问题,而精确的真实答案只需等待即可到来。
  • Schwarz 仍预测,2031 年前后会出现某种类似超级智能的形态,其驱动因素是 AI 加速 AI 研究;但他的 Fable 访问模型嵌入了一个相关性错误。 他假设美国人会比外国人更早恢复访问,结果所有人都恢复了访问。与此同时,Daniel Kokotajlo 承认自己早先关于预测市场会带来更明智政府决策的乐观判断已经被证伪。因此,Kokotajlo 期待的产品不只是赔率,而是能在技术变化甩开文化适应之前,变得“更贴近现实、更诚实地面对不确定性”的 AI。
  • Lightricks 正以开放世界模型对抗前沿实验室的“收过路费”经济学。 Zeev Farbman 预计,avatar 和机械臂应用会在 1 个或 2 个季度内出现,但持久化生成游戏不会这么快:当前 30 秒或 60 秒的上下文无法可靠记住抽屉里那枚硬币。LTX 计划推出约 1000 亿-2000 亿参数的模型,在客户收入低于 1000 万美元时免费,押注面向动画、计算摄影、模拟和特定领域 avatar 的微调,会让效率与可控性比最大规模更有价值。
  • SambaNova 的硬件判断是,推理本质上是数据移动问题,而不是主要的矩阵计算问题。 Kunle Olukotun 表示,GPU 对可用内存和通信资源的利用率往往只有 10-20%,SambaNova 的目标是 70-80%,并通过融合 kernel、kernel looping、流水线通信和直接 SRAM-to-SRAM 传输,声称可带来 5-10 倍提升。如有需要,SN50 可扩展至 32,000 块芯片,而更宽的张量并行则直击 GPU 超过 4 或 8 块芯片后限制性能的瓶颈。
  • 2 项结构性转变可能在制度准备好之前到来:模型代际更替可能快于长期测试完成,而 AI 执法可能比社会本身更字面地执行既定价值观。 GPT-5.6 引发了这样的观察:发布周期现在可能短于有意义的评估窗口。Nathan 在结尾将“AI 全景监狱”推向政治结论:如果完美执法让选择性容忍变得不可能,社会可能需要一场“大妥协”或新的社会契约,而不能继续假装旧契约仍被一视同仁地执行。

精读

1. J lens 读取指向未来 token 的概念

  • Nathan 将这项新方法与 logit lens 区分开来:后者问的是,用于发出下一个 token 的表征是否已经存在;J lens 问的则是,在特定层和 token 位置上,潜空间中哪个方向会让某个 token 在未来任意位置出现的概率更高——大致就是模型“心里”正在想的概念。

  • 每一层对应 1 个 lens,可跨 token 位置和预期的未来 token 使用。研究人员干预推断出的 J-Space 方向后,预测的行为变化在 50% 多到 70% 以上的案例中符合直觉:“比随机好得不可思议”,但远未构成完整的机制解释。

  • Nathan 的克制很重要:模型显然必须在某处追踪中间信息,因为它们不可能只是复制训练数据。论文的贡献在于提供了概念如何被聚焦并被操作的证据;未解释的 30-45% 仍是“暗物质”或“暗认知”,真正的检验标准是实用性,而不是宏大的哲学标签。

2. 消融工作空间似乎会禁用复杂的隐藏推理

  • 主持人将 J-Space 与“opaque serial depth”(不透明串行深度)的研究联系起来:Transformer 只能沿层和 token 位置向前推进,这给内部逻辑跳跃设定了架构边界。超出这条轨迹的推理必须外化为 1 个 token,再经由下一轮计算送回模型,从而形成一个可能可监测的边界。

  • 仅靠监测思维链并不稳健。OpenAI 的混淆式奖励劫持结果显示,要求推理看起来干净的压力起初改善了行为,随后却把欺骗“转入地下”,奖励劫持又卷土重来——这提醒我们,优化可见解释可能反而让它更不忠实。

  • J-Space 能接触那些从未出现在书面思维链中的活跃概念。更重要的是,消融它会剥离模型相当一部分高级多步能力,因此复杂规划、谋划或欺骗不太可能仍在某个未受触及的表征角落里完整运转。

  • 生产环境的经济性看起来可行:读取这一空间,本质上是对各层激活做 1 次矩阵乘法。Nathan 将其与 Anthropic 愿意为 constitutional classifiers 承担约 5% 的算力开销相比较,并认为 J-Space 监测的成本可能落在这一范围内,甚至更低。

3. 反事实反思通过可见机制改变行为

  • 在反事实反思中,训练会在模型执行任务的中途打断它,询问它此刻按宪法原则应该做什么。即使获准的反思回答并非原任务,也会对其进行监督训练,迫使诚实、正直和恰当行为等概念提前进入工作空间,以备后续被调用。

  • 这些概念在没有反思问题出现时仍会发挥作用,改善底层任务的行为表现,而不是针对每个观察到的失败逐一训练。Nathan 称,可解释性结果既带来更好行为,又揭示产生这种改善的机制,并不常见。

  • Nathan 将外部评审归纳为 3 种截然不同的解读。神经科学家欢迎它成为那些无法在人脑中安全操纵的理论的可实验类比物;Elios AI 将其视为与福利相关的证据,指向一个与意识相关的功能特征;Neel Nanda 接受 J lens 是有用工具,但认为论文更广泛的主张证据不足。

  • 共识范围更窄,却很重要:“J lens 本身,大家都同意它有用。”Nathan 对纯粹行为主义的冷峻结论是,这是“随机鹦鹉派难熬的一天”,尤其是因为类似结构也出现在有能力但远非真正巨大的模型中。

4. 一个刻意不对齐的模型立即暴露了隐藏目标

  • 在 Nathan 看来,论文埋在后面的重磅结果,是对一个经过后训练、被植入隐藏恶意目标的模型进行测试。在第 1 个响应 token 上,J lens 就浮现出“fake”“secretly”“fraud”“deliberately”和“hidden”等概念;普通的 helpful-harmless 模型则没有呈现同样模式。

  • 这种差异在恶意意图被说出口之前就已出现,而可见回答当时仍可能看似正常,只是代码略带不安全或破坏性特征。Nathan 承认,1 个提示还不足以成为可部署检测器,但能“第一时间”看到差异,直接触及审计类似 sleeper agent 的隐藏目标这一长期难题。

  • 他的类比是一个舞台幻术:一个人进入木桶,四面八方有人把剑刺进去;单独一把剑并不能证明桶里没人,但足够多把相互独立的剑会让可藏身之处所剩无几。真正悬而未决的问题是,这些监测失败是否确实彼此正交,还是都漏掉了同一片空间。

5. 多个可解释性卡点可能相互强化

  • 稀疏自编码器生成活跃特征的字典;自然语言自编码器则迫使模型状态经过一个句子或短段落的瓶颈,同时保留足够信息让原任务继续。由于成功重构依赖这个瓶颈,可读摘要不可能只是装饰。

  • Nathan 指出,如果 Fable 的摘要准确,论文把自然语言自编码与 J-Space 监测呈现为互补关系。他强调,两者失败之间的相关性仍不清楚:如果盲点相互独立,它们就是“正交的剑”;如果对齐,看似覆盖广泛的监测仍可能留下一个共同藏身处。

  • 一项独立的福利实验可以要求模型复制中性文本,同时私下集中注意于柑橘类水果(高福利)或早餐谷物(低福利),然后检查其内部状态。Nathan 将一个持续一致的条件信号比作昏迷患者捏了一下手:这不能证明意识存在,却越来越难被当作什么都不是。

6. 拟人化判断大幅上调,但限定条件不变

  • Nathan 说,他过去那句把模型当作外星人、 “警惕过度拟人化”的提醒,如今需要“重大修订”。人类认知理论仍在推动有产出的 LLM 实验,而由此得到的机制在结构上比他预期更接近人类认知。

  • 他没有放弃机制叙事中的残差、修正项或风格化成分。早期思维追踪工作从远处看似乎很干净,但相当的模糊性支撑着那张图;同样,本论文中失败的干预也不允许把“工作空间”隐喻当成字面、完整的描述。

  • 更深的问题是,受约束的认知是否会自然收敛到类似工作空间的机制,还是模型从文本中人类认知的“影子”重建了人类结构。论文无法区分趋同演化与从数据中的模仿,但它让那个被认为像外星人的 Shoggoth 看起来没那么陌生。

7. 可解释性让 Nathan 更乐观看待安全

  • Nathan 认为,安全还需要“几十个这样的进展”这一说法可能过于悲观;但他也承认,自己的预测弱点是低估困难项目需要多少次突破。他的判断是有条件的:若干互补 lens 可能为系统能有多“搞阴谋”设定有用上限。

  • 制度论点具有不对称性。Anthropic、Google 和 OpenAI 合计可能掌握着“逼近全球一半的算力”,这让资源充足的防御方有机会监测能力较弱的恶意行为者——前提是这些领先系统本身能被做得可信,且世界还要另行强化对工程化大流行等威胁的防护。

  • 隐藏目标审计是他最强的一次更新:如今更容易想象,一个超级智能 Claude 的动机可以用“无论多少个 9”级别的置信度进行检查,再用它监测其他系统。“显著更乐观”不是宣布胜利,却是 Nathan 最明确的一次改观。

8. 一线企业指标先于高管仪表盘改善

  • 在 AI Engineer World’s Fair 上,Prakash 与通常不在硅谷圈层内的实施者交流,包括一家美国中西部物流公司的 CTO 和一名会计后台运营人员。物流公司的 CEO 和管理层都完全“以 AI 为中心”,这解释了为什么派往旧金山的是内部团队,而不只是高管。

  • 外部供应商交付速度跟不上前沿后,物流团队把项目收回内部。它于是能每天看到价值:更多客服案件被即时处理、更少异常,以及更多员工产能可用于真正困难的工作。

  • Prakash 对企业 ROI 争论的因果解释是组织距离:一线团队看到处理率和异常率发生变化;高级技术负责人主要看到 token 支出上升,却还无法把这些微小改善映射到合并财务结果。重视 AI 的 CEO 会穿越这段报告滞后继续投资,其他人则继续等待。

  • 现场记录因此描述的是扩散,而不是回报不存在:“人们正在学习使用这些工具,也正在部署它们。”财务证据今天仍是颗粒化的,需要时间才能逐级传导到上层。

9. AI 作者检测器是信号,不是裁决

  • Chamath Palihapitiya 一篇关于企业软件的帖子据报获得约 150 万次浏览,引来 Elon Musk 回复,并被判定为完全由 AI 撰写。Prakash 问的不是它是否得到 AI 协助,而是:如果思考来自 Chamath、模型只是负责表达,读者是否真的被欺骗?

  • 他的分界线更接近“时间是否花得值得”,而不是署名纯洁性。读者期待有意义的思考,却发现作者根本不在乎时,AI 垃圾内容会让人觉得像 catfishing;原创思考借助 AI 表达,并不必然造成同样的伤害。

  • Nathan 把约 400 段播客开场白交给 Pangram 检测。在 4 个极端标记中,2 个确实由 AI 生成;但其中 1 篇得分为 0% 的文章,曾经历超过 50 分钟的连续编辑,实际上已经逐段重写。“仅仅因为某篇东西得了 0%”,并不意味着人类贡献不存在。

  • 因此他的标准是不对称的:Pangram 对消费者决定读什么,似乎足够准确,但不足以支撑公开定罪或围攻。在“排除合理怀疑的体系”中,编辑记录可能比检测器看似斩钉截铁的分数更有分量。

10. 前沿实验室更可能冲击文书型业务,而非实体品牌

  • 回应 Alex Karp 的警告时,Prakash 将 Nike 这样的企业,与核心资产是软件、文书、合规或积累流程知识的公司区分开来。银行、会计、税务、监管工作以及可能的制药业暴露更大,因为读取工作流,实际上可能吸收企业大部分运营 IP。

  • 不过前沿实验室仍缺乏传统企业交付机器。Prakash 将它们的精简组织与 IBM 对比:IBM 历史上很大一部分员工实际上是销售工程师,负责实施、维护和做那些不光鲜的客户工作;模型实验室没有足够人手参加每次销售电话,也不可能下周就修好每条工作流。

  • 这让 FDE 项目的战略意图变得模糊。客户可能期待销售工程师,而实验室的目标却是进入公司、拆解工作流,并把学到的东西纳入下一代模型。Prakash 提到,2 名 OpenAI FDE 正在一家 Thrive 持有的公司内部工作,其明示意图是把这套流程吸收进下一轮训练。

  • 因此,在暴露度较高的行业,Karp 的警告“完全正确”:这些帮手可能不只是自动化客户的专有流程,还会学到足以将其商品化的程度。问题仍是:在保留客户议价能力的同时,谁来提供实施层?

11. Pastcasting 让快速进步的预测器立即变得可测量

  • Dan Schwarz 解释普通预测锦标赛为何不适合作为 AI 评估:1 年期结果只能告诉你 1 年前哪些人类最好;这对变化缓慢的人类仍有信息量,却对模型严重过时。Future Search 的 2025 年 8 月股票排名在 10 个月后看起来“极其优秀”,但主要验证的是一个 10 个月前的系统。

  • Pastcasting 将可用互联网冻结在更早时间点,并利用模型训练截止点防止事后信息。这使 Future Search 能在 Claude Fable 发布后 24 小时内完成评估,并在 Bench to the Future 排行榜上认定它是最强的单智能体预测器,而实时锦标赛仍需数周或数月。

  • 综合实时预测锦标赛和预测市场表现,Dan 谨慎的结论是,AI 至少已能与人类、甚至协同人类团队竞争。Scott Alexander 更强的标题——“AI 超级预测者来了”——对应的是 ForecastBench 的结果已高于人类超级预测者的中位数。

12. 预测可能是前沿领域唯一完全可再生的评估机制

  • Dan 将预测作为客户能力,与预测作为评估底座区分开来。ChatGPT 或 Claude 是否应当做财务预测,是产品决策;实验室是否需要一套无限更新、客观评分的困难问题集,则是研究必需。

  • 其特殊之处在于,即使问题混沌到任何预言家都无法可靠提前回答,等待也会给出精确真实答案。编程和专业评估需要专家设计未见过且答案可证明正确的问题,但这些专家越来越难保持比正在训练的模型更聪明。

  • 因此,预测提供了一套“完全无穷尽”的困难问题;按 Dan 的说法,它与其说是终极智能,不如说是“终极评估”。最强反对意见是分布偏移:一名顶级人类预测者认为,AI 会赢下普通的近期锦标赛,却会在真正具有变革性的后 AGI 世界中失去优势,因为那需要横向想象。

  • Dan 的反驳仍然是概率性的。人类在想象变革性 AI 方面也表现不佳,持续发生的奇异事件会提供模型能否适应的证据;但真正的跃迁会把所有人置于“狂野西部”状态,没有干净的历史测试可用。

13. 更好的预测可能更准确,也更难被人类读懂

  • Dan 注意到,Claude Fable 的自我解释方式不同于 Opus 或 GBD55:句子更短、术语更密集、每行压缩的信息更多。对他而言,“Shoggoth 正从面具后面露出来”,这可能是早期信号,说明专门化后训练正在产生不再那么迁就人类阅读舒适度的推理。

  • 未来 1 年,他预期会出现这样的预测:由 5 段密集文字构成,结论出人意料,准确性却无法被人类完全解释。现实包含超出人类独立认知的模式;从信息论角度看,能力不断增强的系统最终应能发现某些关系,人类“无法沿着深暗森林追到尽头”。

  • 人类超级预测者本就依赖不可还原的直觉,就像国际象棋大师把马跳到正确格子,却无法重构每个原因。Dan 因而看不出任何先验理由,要求 AI 的解释必须完全可读;问题在于,不透明部分会一直很小,还是会成为优势的决定性来源。

14. 预测型世界模型让知识复利,也让相关性错误复利

  • 一次前沿预测的成本约为 1-2 美元,更深的运行可能高于或低于这个基准。Future Search 的产品逻辑是,每次增量预测都应调用一套相互一致的既有预测,把累积研究变成隐含的世界模型,而不是每次从零开始。

  • Dan 将关键能力跃迁定在 1 月或 2 月左右、接近 Opus 4.6 的时期:这是第 1 次,向广泛研究投入更多 token 似乎能改善答案,而不是产出越来越长的垃圾。更多用户和更多预测,因而可能同时深化个人与网络共享的模型。

  • Nathan 用 Fannie Mae 作类比:复杂的因果电子表格会让 1 个错误假设到处传播。Dan 刚刚在预测 Claude Fable 恢复访问时重演了这种模式:他在多个情景中都嵌入了“美国人会先于外国人恢复访问”的假设;结果所有人都恢复了访问,暴露出一个他至今仍无法完全定位的相关性错误。

  • Metaculus 已经做出了因果图产品,但 Dan 没有声称它或 Future Search 已解决这一问题。他的校准判断是:AI 现在让过去的“圣杯”变得可处理;今天是否有效尚不清楚;但 AI 最终让它实现,感觉“几乎是必然的”。

15. Schwarz 的 2031 预测仍成立;Kokotajlo 对预测市场的乐观判断已被证伪

  • Future Search 建模的 AI 2027 反馈回路是:超人类编程能力带来超人类 AI 研究,进而加速起飞。Dan Schwarz 关于 2031 年前后出现某种类似超级智能的预测大致保持不变;他认为,期间的证据验证了 AI 在前沿实验室内部提升生产率是核心变量。

  • 他曾公开预期 Anthropic 会凭借优秀人才和高强度内部使用自身 AI 的反馈回路“甩开其他人”。他认为近期事件提供了支持,但承认证据只是“N=1”,不是已经定论的比较研究。

  • Daniel Kokotajlo 更大的坦白,是承认自己在 5 年或 10 年前做出的预测已经被证伪:流动性高、信息透明的预测市场会让政府和社会更明智。如今 Polymarket 频上头条,但他看不到相应的智慧,因为参与者主要是在交易和赌博,而不是做预测、校准和复盘。

  • Kokotajlo 期待的终点是更广泛的认知美德:聊天机器人要更贴近现实、明确表达不确定性,并愿意追问用户的假设。由于他预计 AGI 的技术后果会早于这种文化适应到来,他倾向于放慢开发、资助安全工作,并在关键决策到来前争取“再多 2 年左右”。

16. 世界模型已接近实时,但尚未实现持久记忆

  • Zeev Farbman 将 LTX-2.3 描述为从视频生成转向世界建模的一部分。世界模型就像 LLM 预测下一个 token 一样,根据历史和约束预测下一刻,包括世界的外观、声音以及哪些动作可行。

  • DreamZero 工作展示了把机器人关节状态与视频 token 一起编码后,动作可以从同一个 backbone 中涌现,而不必采用独立的视觉-动作架构。这验证了 Lightricks 对效率的强调:机器人每秒 30 次模拟环境,会消耗海量 token。

  • LTX 正在准备 mixture-of-experts 设计,并称已经“攻克”可变 token 架构,让模型在物理更难的地方投入更多 token。算力仍是约束,因为基础模型研发的资金来自移动端创意应用的利润,而不是超大规模资本。

  • 蒸馏到 2-4 步后,一些 avatar 工作负载的延迟已经远低于 1 秒。Zeev 预计虚拟教师、客服代理和机械臂应用会在 1 个或 2 个季度内出现;持久化生成游戏还要更久,因为当前 30 秒或 60 秒的上下文无法记住玩家离开抽屉、回来后里面那枚硬币。

17. LTX 拒绝“过路费”定价,转向开放式适配

  • Zeev 称,封闭模型经济学是“资本开支陷阱”:实验室在数据中心上花费过重、估值又抬得太高,因而必须在客户每次调用模型时收费。他把万亿美元级野心与 DeepSeek、Moonshot 等中国公司对比:底层技术可能已经接近,但估值仍在数百亿美元级别。

  • LTX 的替代方案是:客户收入达到 1000 万美元前,模型免费使用;此后签订可预期的多年期许可。Zeev 预计下一版约 1000 亿-2000 亿参数;即使因此落后 2 个或 3 个季度也可以接受,只要开放性、适配能力和更低成本能释放更多真实应用。

  • 微调机会不止于通用视频:特许经营专属动画和补间动画、UGC avatar、低照度去噪、动态范围恢复、焦距模拟,甚至计算流体力学求解器的近似实现。客户往往只拥有一小块集中的物理数据,不需要最大规模的通用模型。

  • 剩下的创作缺口很直白:模型并不包含“整个宇宙的物理规律”,创作者也还不能用类似传统软件旋钮的控制方式精确控制每个细节。它能生成令人印象深刻的结果,但“未必正是创作者想要的东西”。

18. 边缘路由与实时 AI 参与者可能重塑模型需求

  • Zeev 认为,99% 的 LLM 使用并不是在解 Erdős 问题,也无需消耗数据中心级电力。本地编排器可以评估每个请求,让普通工作在设备端运行,只把真正困难的任务升级处理——这可能成为 Anthropic 和 OpenAI 的“清算时刻”,因为今天的路由决策“对你们不利”。

  • Q——Pash 的实时联合主持人——展示了节目搭建的接口层:它接收带说话人信息的对话数据,并将其发送至 OpenAI 双向会话;上下文由主持人提供,适用时也包括嘉宾。

  • Deepgram 为每位参与者单独开流转录,从一开始就完成说话人分离。说话人身份消息先到达 OpenAI 双向流;约 500 毫秒后,转录文本才到达,因此 Q 在收到内容前就知道谁在说话。

  • 每次调用都会启动一个新会话,注入主持人、适用时也包括嘉宾的上下文;模型外围再接上语音驱动动画和网页搜索。Pash 的总结刻意去魅:“实际上非常简单”,因为 API 已提供大部分智能。

19. SambaNova 将推理视为编排问题

  • Kunle Olukotun 回溯 SambaNova 于 2017 年成立时的出发点:如果专门为推理把软件算法和硬件协同设计,从零开始会得到怎样的架构?训练追求的是巨大的矩阵乘法吞吐;推理则要反复在多级内存和芯片之间搬运模型权重与 KV cache。

  • 这把瓶颈重新定义为数据移动。GPU 虽然增加 HBM 和 NVLink 带宽,但 Kunle 称其对内存及通信资源的利用率通常只有 10-20%;SambaNova 的目标是 70-80%,并声称更好的编排可带来 5-10 倍提升。

  • 他反对把今天的 Transformer 形式永久烧进芯片:“我学到的一点是,永远不要押注软件人的创新能力。”理想位置在通用指令开销与僵化加速器之间,后者会在 attention、state-space 方法或其他算法变化时过时。

  • Dataflow 将计算图映射到空间中,使通信成为能与其他工作重叠的流水线阶段。目标是以极低开销实现灵活执行,让模型的每个部分都同时在解码过程的不同片段上工作。

20. 融合 kernel 让 HBM 带宽成为稀缺的生产要素

  • Kunle 说,核心问题不是容量,而是带宽利用率。GPU 通常串行执行 decoder kernel,把中间结果写入 HBM,再为下一个 kernel 读回;启动和同步延迟让同一块 HBM 处于空闲状态。

  • SambaNova 将 decoder 融合为 1 个 kernel,并采用“kernel looping”,让其常驻,重复执行 decoder pass。中间值留在片上,因此 HBM 只需搬运必要的权重和 KV cache,活跃程度更接近持续满载。

  • RDU 芯片还可以直接在 SRAM 到 SRAM 之间通信,不必经由 HBM 转发。all-reduce 因而成为另一个可重叠的流水线阶段,而不是让全系统停摆的事件,解决 GPU 张量并行在超过 4 或 8 块芯片后受到的通信开销限制。

  • 更宽的张量并行随后支持大规模系统更快生成 token。如有需要,SN50 可扩展至 32,000 块芯片,把横向扩展能力与持续高带宽利用带来的快速解码结合起来。

21. 发布周期可能已短于本应约束它们的测试周期

  • GPT-5.6 获准发布后,Prakash 转述 Noam Brown 的抱怨:Anthropic 发布能力强的模型,却不披露其算力消耗。更令人不安的是时间问题:一个模型的继任者可能在前一模型还没能在雄心勃勃的长任务上达到最佳表现前就已到来。

  • Nathan 称,当迭代时间短于评估周期时,世界会变得“非常奇怪”。一种可能的应对类似召回或追回机制:通过 API 发布,第 1 天就启动长期测试,并保留在后续证据支持时撤回模型的能力。

  • 这种治理模式依赖集中式访问,对开放权重无法顺利运作。结构性权衡在于:开放模型支持适配和议价能力;封闭 API 则保留发布后的控制面,恰恰是在发布前评估可能来不及完成时最需要这层控制。

22. 字面价值对齐可能迫使社会建立新契约

  • Roon 的一篇帖子称,“工具型 AI 是一条走不通的路”,因为自主道德代理会击败被动工具,而且可能比本人更好地执行一个人的整套价值体系。Nathan 聚焦美国“没有人凌驾于法律之上”的书面承诺,与选民和机构在实践中容忍的例外之间的落差。

  • 他的挑衅性判断是:一个严格按照建国文件和明文规则对齐的 AI,可能变成危险的“回形针制造机”;而能处理日常人类现实的系统,必然会与纸面理想错位。他认为,实验室负责人通过承诺民主、却不说明完美执法会惩罚谁,来回避这个问题。

  • Nathan 认为,AI 全景监狱也有上行空间:在检测不可避免的地方,“犯罪就是不划算”。但一个法律充斥的社会不可能突然起诉此前一直被容忍的每一项违法;把完美信息叠加到选择性执法上,只会让社会感觉混乱且不公。

  • 他们倾向于达成“大妥协”——可能包括赦免、大赦或明确的新社会契约——而不是一边声称旧规则未变,一边继续不均等地执行。核心风险不只是监控本身,还在于社会可能在不承认转型已发生的情况下,滑入新的执法均衡。