TheSequence

自驅動實驗室透過將AI與自動化實驗硬體結合，使系統能夠根據實驗結果自主決定下一步實驗，區別於僅執行預設指令碼的自動化。

阿里巴巴的Qwen模型家族推出機器人套件，旨在彌合感知與行動之間的鴻溝。三個新模型分別專注於導航、操作和世界建模，核心挑戰在於將物理動作轉化為可學習的token。

深入探討現代AI中最重要的技術之一——蒸餾，以及它如何解決大規模模型帶來的成本、部署和專業化問題。

LayerLens 推出 Stratix 杯，這是一場頂級 AI 模型在模擬環境中作為智慧體進行足球比賽，考驗規劃、適應和多智慧體協調能力。

AI市場上一週出現了一系列意想不到的轉折：SpaceX以600億美元收購Cursor，Noam Shazeer和John Jumper分別離開谷歌加入OpenAI和Anthropic，Midjourney推出全身醫用掃描器。

谷歌DeepMind釋出了DiffusionGemma，這是一種文本擴散模型，挑戰了傳統的Transformer架構。該模型不依賴從左到右逐令牌生成文本的方式，而是採用全新的生成機制。

本文總結了關於Transformer替代方案的系列文章，涵蓋四大類模型：遞迴/線性遞迴模型、狀態空間模型、文本擴散模型和液態/連續時間模型。同時宣佈將推出關於知識蒸餾的新系列。

上週AI領域發生四大重磅事件：Anthropic推出Claude Fable 5和Mythos 5，蘋果釋出Siri AI，SpaceX以史上最大IPO上市，貝佐斯的Prometheus融資120億美元。這些事件標誌著AI正從聊天視窗走向更廣泛的物理世界。

討論代理型AI時代企業軟體的新正規化：從記錄系統轉向行動系統。

論文《語言模型需要睡眠》提出，大語言模型存在“順行性遺忘症”，無法在訓練後學習新知識，建議引入類似生物睡眠的機制來鞏固記憶。

Transformer架構目前是AI領域的參考架構，因其出色的擴充套件性而成為工業標準，但其注意力機制的計算成本高昂。文章探討了Transformer是否會是最終架構，還是隻是第一個真正可擴充套件的架構。

一場新的AI足球錦標賽、主要模型釋出、融資活動以及Anthropic的S-1檔案。

輝達CEO黃仁勳將AI堆疊描繪成一個五層蛋糕，強調和諧共生。但從戰略角度看，這實際上是五個利潤池的垂直戰場，真正的控制權在於掌握稀缺層及其相鄰的接縫。

Claude Opus 4.8於2026年5月28日釋出，雖然版本號僅小幅提升，但在可靠性方面取得了重大進步，包括4倍的校準改進、修復靜默跳過工具呼叫、更好的壓縮恢復支援長期任務、動態工作流、自適應思考以及速度提升2.5倍且價格降低3倍的模式。該版本強調模型在長時間執行中的穩定性和誠實度，而非基準測試分數的提升，使其成為生產環境中代理迴圈的理想基礎設施。

本文探討了Transformer架構的侷限性，以及液態模型作為一種有前景的替代方案，後者更適用於低延遲、隱私保護的端側智慧場景。

Anthropic釋出Claude Opus 4.8，接近運營盈利；OpenRouter、Cognition等公司融資規模驚人；Snowflake與AWS簽下60億美元大單；Pope Leo XIV釋出通諭警告AI風險。AI行業正在從以模型為中心的競爭轉向以token為計價單位的商業模式。

在AI時代，擴充套件定律曾驅動進步，但現在遞迴——模型或系統自我審視、修正、搜尋和模擬的能力——正在成為新的擴充套件維度。這一轉變標誌著從單次前向傳播到迴圈計算的正規化轉移。

本文批評了大型語言模型中的思維鏈（CoT）推理方式，認為它效率低下，因為推理過程被迫離開殘差流變成離散的token。Sapient Intelligence的HRM-Text模型透過在潛在空間中進行推理來解決這個問題，為固定深度的Transformer提供可變的內部深度，從而挑戰當前的推理正規化。

文本擴散模型挑戰了傳統自迴歸語言生成正規化，將生成過程視為從噪聲或掩碼開始、逐步精煉的編輯過程。文章介紹了該領域的三個關鍵系統：LLaDA（證明擴散可擴充套件為大型語言模型）、Mercury（實現商業速度優勢）和Gemini Diffusion（前沿驗證），它們共同代表了新架構類的三階段：科學證明、工業部署和前沿驗證。

上週AI領域迎來重大轉折：Google釋出Gemini Omni及代理優先平臺；Andrej Karpathy加入Anthropic，專注於利用Claude加速預訓練研究；Anthropic與xAI達成價值450億美元的Colossus算力租賃協議；Cerebras IPO成功，市值近950億美元；SpaceX、OpenAI和Anthropic計劃在未來六個月內相繼上市，總估值可能超過3萬億美元。此外，多項前沿研究釋出，包括HRM-Text高效預訓練正規化、AI評審員效果評估、NVIDIA的聯合AR-擴散模型等。

AI代理的下一個階段將由對計算機的訪問定義——檔案系統、終端、瀏覽器等，而非僅僅是更好的模型。代理沙箱市場正在興起。

Thinking Machines的互動模型將即時對話、視覺、音訊和工具使用融合為一個持續學習的系統。

文本擴散模型作為自迴歸Transformer模型在語言生成領域的可信替代方案正在興起，克服了生成漂移和反轉詛咒等侷限。

上週AI領域迎來多個重要事件：Cerebras IPO使其市值飆升至950億美元；Thinking Machines推出將互動能力內建於模型本身的“互動式模型”；前Salesforce首席科學家Richard Socher創立Recursive Superintelligence，致力於透過自動實驗實現AI自我改進；前阿里巴巴Qwen負責人林俊陽以約20億美元估值創辦新AI實驗室。

隨著AI系統從聊天機器人升級為智慧體，評估正成為繼算力、資料和模型之後的第四大支柱。每個公司都需要建立自己的動態評估體系，而非依賴通用基準。

Anthropic 的新型自然語言自編碼器讓研究人員能夠直接獲取LLM思維活動的英語描述，這是可解釋性研究的重要進展。

狀態空間模型（SSM）憑藉線性時間複雜度和恆定記憶體推理，正在挑戰Transformer在序列建模中的主導地位。本文梳理了SSM的數學基礎、發展歷程及其在語言建模等任務上的表現，指出其已逐漸具備與Transformer競爭的能力。

本週AI領域呈現科學化、產品化和投機化並存的趨勢。Anthropic釋出了自然語言自編碼器，實現模型內部狀態的語言化解釋；OpenAI推出新語音模型，推動AI向原生介面演進；SubQ聲稱擁有1200萬token上下文視窗，挑戰現有RAG架構；中國AI實驗室DeepSeek和Moonshot估值飆升，市場將AI公司視為戰略資產。整體而言，AI正從模型競賽轉向基礎設施競賽。

本文探討AI代理如何重塑軟體行業，認為在代理經濟中，主導者不會是現有的科技巨頭。

NVIDIA的Nemotron 3 Nano Omni是一款多模態推理模型，將影片、音訊、影像和文本處理統一到單個高效模型中，用於智慧體工作流，避免了分離模型帶來的有損管道。