Databricks近期釋出了Vital Skills,這是一套開源的Agent Skills,旨在為編碼代理賦予醫療與生命科學(HLS)領域的專業知識。通用編碼代理雖然能寫出看似合理的程式碼,但往往缺乏領域紀律性,例如會不經提示就選擇臨床閾值,或採用通用統計方法而非領域內標準的專業方法。Vital Skills透過打包的“操作手冊”解決了這一問題,這些手冊基於開放的Agent Skills標準構建,幫助代理明確該問哪些問題、哪些步驟不可省略,以及應使用哪些經過驗證的工具。
Genie Code是Databricks最佳化的編碼代理,允許使用者透過聊天而非編寫程式碼來完成資料和AI任務。其與Unity Catalog的整合確保代理理解企業資料,並遵循與平臺其他部分相同的安全和治理規則。然而,即便是Genie Code這樣的先進代理,也缺乏領域特異性,可能採用不符合HLS標準的通用方法和臨床閾值。Vital Skills正是為了彌合這一差距而設計,它使生成的程式碼與受治理的資料緊密相連,並讓使用者獲得一個完整的系統,而不僅僅是一個沙盒環境。藉助Databricks生態系統,使用者可以基於所有資料資產、實現端到端的治理、獲得包括模型服務、GPU和Apps在內的綜合平臺,並保持開放選擇——支援任何雲、任何模型和任何框架。
在評估方面,Databricks在BiomniBench這一公開的生物醫學資料分析基準上測試了Genie Code(有無Vital Skills)。結果顯示,在技能覆蓋的5個任務上,Genie Code的平均得分從71.9提升至76.9(滿分100);而在18個範圍外的任務上,得分保持穩定(無技能69.1,有技能71.2),表明技能在不需要時不會產生干擾。此外,配備技能後,Genie Code在每次範圍內執行中都能正確開啟對應的技能,並且在某個佇列任務中,基線版本靜默丟棄了一半合格患者,而使用技能後所有患者都被正確納入。
每個Vital Skills技能都由曾多次為客戶解決該問題的現場工程師主導開發,並遵循三項原則:首先,“先詢問再假設”——當決策應由分析師做出時(如臨床閾值),技能會暫停並提供選項讓使用者選擇;其次,“信任經過測試的工具,而非即興程式碼”——對於敏感工作,Genie Code執行經過測試的工具和程式碼,而不是每次編寫新邏輯;最後,“用資料證明”——每個技能都在相同任務上與無技能的Genie Code進行並行執行對比。
技能目錄覆蓋了醫療與生命科學價值鏈的多個環節,包括生物資訊學(如bulk-rnaseq用於尋找差異表達基因、open-weight-models用於打包和部署開源HLS模型、pathway-enrichment-analysis用於通路富集分析、sc-rnaseq用於單細胞RNA-seq分析)、臨床分析(如cohort-builder用於構建可復現的患者佇列、rwe-cohortstudy用於比較效果研究、semantic-builder用於構建語義層、phi-deidentifier用於HIPAA安全港去標識化),以及其他技能如presentation-builder用於生成演示幻燈片、report-writer用於撰寫報告、accelerators用於路由到相關HLS加速器、skill-eval用於基準測試技能本身。這些技能可以直接使用,也可以根據使用者需求進行定製,以利用使用者在特定學科中的深厚專業知識。
以cohort-builder技能為例,分析師用自然語言描述人群(如“患有2型糖尿病且血糖控制不佳的患者”),技能將其轉化為可復現、可解釋和可辯護的佇列。該技能能處理結構化和非結構化資料,在關鍵決策點暫停詢問而非猜測,先檢查可行性並顯示合格患者數量,解釋每個患者的納入理由而不暴露原始臨床筆記,並確保每次執行結果一致。在配對評估中,自由文本佇列的F1分數從0.62提升至1.00。另一個例子是open-weight-models技能,它幫助科學家將Geneformer、TEDDY等生物基礎模型部署為受治理的模型,過程中會詢問執行方式(即時端點、批處理作業、應用或管道),固定模型及其工件以確保可復現和可審計,在Unity Catalog中註冊並測試模型,並監控推理流量。在一個TEDDY單細胞模型部署任務中,無技能的Genie Code完成了27項檢查中的19項,而有技能時27項全部完成。
為了評估技能效果,Databricks還提供了skill-eval技能,可為每個技能構建定製的評估工具,包括適當的任務、資料、評分器和預期結果。此外,在BiomniBench上的三次測試進一步驗證了Vital Skills的價值。使用者可以在Genie Code中瀏覽並安裝Vital Skills,並將多個技能串聯起來完成複雜任務,例如在部署開源模型後建立並排程批處理推理作業,或為嵌入模型建立向量搜尋索引。