在最新的一篇Databricks博客中,克拉肯(Kraken)全球數據轉型主管Kristy Mayer-Mejia與作者Aly McGue深入探討了數據在AI戰略中的核心地位。克拉肯作為全球最大的公用事業AI操作系統,管理着27個國家超過9000萬個客户賬户,其客户包括EDF、E.ON、國家電網和東京燃氣等。Mayer-Mejia的團隊負責幫助客户理解、採用並從克拉肯提供的數據中提取價值。她的核心觀點是:AI的成功不僅僅依賴更先進的模型,更需要紮實的數據基礎。
Mayer-Mejia指出,低質量、孤立的數據是組織從投資中獲取價值的最大障礙。她的團隊經常看到客户花費80%的時間清理數據,而不是從事有價值的工作。她強調,數據統一是“入門費”,只有將數據整合到一個平台,自助分析、AI和快速決策才能成為可能。此外,缺乏對數據的信任會導致決策癱瘓。例如,在數據統一之前,像“我們有多少客户”這樣的基本問題都難以準確回答,導致管理層花數週時間爭論數字的正確性。
有趣的是,AI本身正成為改善數據質量的“強制功能”。Mayer-Mejia解釋説,AI所需的數據輸入與人類相同:清晰的文檔、列的含含義和表之間的關聯。當數據難以使用時,自助分析的價值觀很難量化,但AI使這種價值變得可見,並迫使組織將清潔數據和文檔化作為非談判條件。同時,AI也提供了工具,如對話式接口,讓用户無需編寫SQL即可查詢數據。
元數據的重要性被低估了。傳統上,數據文檔以PDF或網頁形式存在,對人類足夠,但對AI無效。Mayer-Mejia強調,客户現在要求元數據與數據本身一同共享,以便AI模型理解上下文。Databricks的Unity Catalog和Delta Sharing技術支持這種上下文共享,這是AI能否推理數據的關鍵。
在實踐中,數據統一帶來了巨大變化。例如,一家公用事業客户從每月報告呼叫量,轉變為每兩小時更新一次的儀表板,併疊加預測模型。這使運營從月度回顧轉向近實時優化。在產品創新方面,清潔數據使客户能快速測試和優化電價方案。
自然語言接口(如Databricks Genie)正在打破分析瓶頸。Mayer-Mejia觀察到,這些工具將客户開始使用數據的時間從數週縮短到幾分鐘,而且降低了文化障礙。當數據訪問變得直觀時,數據驅動的文化就會自然形成。
她最常看到的高管錯誤是將數據視為IT平台,交給IT部門去準備。她強調,數據是業務資產,需要深度的業務上下文——數據如何生成、使用和解釋。技術基礎打好後,最難的部分是業務上下文,而這大部分工作屬於業務部門,而非數據團隊。因此,為AI準備數據的路線圖應是業務和技術共同承擔的。
展望未來,Mayer-Mejia認為AI正在迅速提高客户可能達到的高度。那些早期投資數據能力(包括技術、技能和文化)的組織現在行動最快,它們與後進者的差距只會越來越大。她建議客户從統一數據開始,然後逐步嵌入業務上下文,並培養數據素養文化。
這篇文章為任何正在構建AI路線圖的組織提供了寶貴見解。要了解更多,Databricks建議下載其《AI代理狀態報告》以對標投資。