Databricks推出Lakehouse//RT:統一湖倉上的即時效能
Databricks宣佈推出Lakehouse//RT,由全新即時引擎Reyden驅動,直接在湖倉上實現毫秒級查詢速度,無需資料移動。預覽使用者見證了高達16倍的效能提升,響應時間低至10毫秒。該產品統一了即時服務與集中式Unity Catalog治理,消除了複雜架構和額外管道。
Databricks近日宣佈推出Lakehouse//RT,這是一款全新的即時資料倉儲,旨在為運營分析、BI應用和可觀測性工作負載提供毫秒級查詢效能。Lakehouse//RT由自主研發的即時引擎Reyden驅動,能夠直接在湖倉架構上執行,無需將資料複製到獨立的服務層。
傳統上,為了實現即時響應,企業不得不引入獨立的服務層,但這意味著資料從開放格式(如Delta和Iceberg)中提取並複製到專有儲存中,帶來了資料重複、治理碎片化以及額外的工程維護成本。Lakehouse//RT打破了這種妥協,允許使用者在同一份資料上同時支援即時工作負載和傳統分析,且所有資料仍受Unity Catalog的統一治理。
在預覽測試中,使用者獲得了高達16倍的效能提升,響應時間在較小資料集上低至10毫秒,較大數據集上也低於100毫秒。在標準分析基準測試中,Lakehouse//RT在每秒12,000次查詢下仍保持低於100毫秒的延遲。該引擎在負載、資料規模和查詢複雜度三個維度上均表現出色:在數千併發查詢下延遲保持平穩;從10GB到1TB的資料規模下效能一致;面對複雜查詢(如多表連線、視窗函式)時,比競品快25倍以上。
多家企業已在真實場景中驗證了Lakehouse//RT的效果。Meta企業分析團隊在供應量、財務等場景中實現了毫秒級響應;空間解決方案公司SES將查詢速度提升了20倍;能源資料平臺Enverus在某些查詢上實現了100倍的加速。此外,Magnite、Cisco、Halcyon、PointClickCare和Bally's等公司也報告了顯著的效能改進和架構簡化。這些客戶均表示,Lakehouse//RT使他們能夠摒棄獨立服務層,簡化架構並降低總擁有成本。
透過將即時效能直接融入統一平臺,Lakehouse//RT實現了三大核心價值:即時答案、簡化架構和一致治理。企業無需在效能與治理之間做出權衡,所有資料在Unity Catalog的單一安全策略下執行,從而加速從資料到洞察的轉化,減少工程開銷。隨著即時應用需求的持續增長,Lakehouse//RT為資料平臺現代化提供了新的方向。