OpenAI 联合创始人兼总裁 Greg Brockman 用一个简单的比喻描述了没有公司数据的 AI:“就像雇佣了一个拥有 20 个博士学位的人,却从不邀请他参加会议。” 这正是企业面临的挑战:他们希望利用 OpenAI 的前沿模型处理已在 Databricks 中治理的业务数据,并将 AI 推广给更多员工。为此,OpenAI 与 Databricks 建立了合作伙伴关系,使这一愿景成为可能。OpenAI 构建人们日常使用的前沿模型、Codex 和 ChatGPT,而 Databricks 则提供这些工具在公司内部运作所需的上下文:受治理的数据、业务定义和访问规则。Genie Ontology 是 Databricks 中的上下文层,存储着这些定义并展示公司数据的关联方式,因此使用 Genie 的 ChatGPT 在开始工作前就能理解贵公司“收入”或“活跃客户”的含义。
Databricks 联合创始人兼 CEO Ali Ghodsi 与 Brockman 在本周发布的一场对话中讨论了从聊天机器人向自主代理的转变,以及企业从中获得真正价值所需的条件。
大多数公司通过以下三种方式之一开始使用 OpenAI 和 Databricks:加速业务用户的工作、实现企业级治理的编码、以及通过自定义代理转型业务流程。下面将逐一介绍。
1. 通过 ChatGPT 和 Genie 插件加速业务用户的工作
过去,需要数据做决策的员工无法编写 SQL,因此他们要么求助分析师,要么将数据粘贴到不了解公司定义的 AI 工具中。等待分析师会拖慢决策速度,而基于错误定义的答案则会导致错误决策。现在,他们可以使用 Databricks Genie 插件在 ChatGPT 中自行提问。例如,产品经理可以问:“按计划层级划分,每周活跃用户 adoption 与目标的对比情况如何?” ChatGPT 会使用 Genie 理解公司的指标定义、找到相关数据、在 Databricks 中运行查询,并以可视化图表形式返回结果。该插件运行在 Genie MCP 上。曾经缓慢的决策过程现在变得迅速,且员工对底层数据更有信心。
Genie 使用 Genie Ontology——Databricks 中的上下文层,存储公司批准的指标、业务定义以及数据的关联方式。Genie 应用公司自己的定义,因此 ChatGPT 中的收入与财务报告中的收入一致。用户只能看到他们已有权限查看的数据,每个答案都链接到 Databricks 中的来源。由于 ChatGPT 拥有来自 Genie Ontology 的业务上下文,它不仅能回答问题,还能提供更多帮助。用户可以要求 ChatGPT Work 推荐下一步行动和参与人员,通过 Slack 或电子邮件分享发现,并通过连接的工具执行他们批准的操作。要开始使用,请在 ChatGPT 中安装 Databricks Genie 插件。
2. 使用 OpenAI Codex 和 Databricks Unity Gateway 实现企业级治理的编码
AI 编码代理通常以团队为单位扩散,领导者难以追踪谁在使用、成本多少以及代码和数据的去向。Databricks Unity Gateway 使这种推广变得易于管理,让公司可以为每位工程师提供 OpenAI Codex,同时保持可见性和控制。开发人员像往常一样使用 Codex。Codex 使用 Databricks 凭证登录,OpenAI 密钥保留在 Gateway 中,每个请求都被记录。工程领导者可以设置预算、按团队审查支出,并选择由哪个 GPT 模型处理哪项任务。要开始使用,请安装 Unity Gateway CLI 并运行 ug codex。具体步骤见“将 Codex 连接到 Unity Gateway”。
3. 利用 OpenAI GPT 模型、Model Serving 和 Databricks Apps 转型业务流程
能够改变核心业务流程的代理往往在投入生产前停滞,因为它们所需的数据受到严格的安全和治理规则保护。在 Databricks 上,OpenAI 前沿模型在 Unity Catalog 治理下与这些数据一起运行。当 Databricks 提供模型服务时,无需管理外部 API 密钥。团队可以在 Agent Bricks 中构建和评估代理,或使用 OpenAI Agents SDK 编写代理并将其部署为 Databricks Apps。要开始使用,请打开 Databricks 工作区,转到“+ 新建”>“应用”,选择“Agent - OpenAI Agents SDK”模板。代理快速入门将引导您完成操作。
OpenAI 与 Databricks 合作伙伴关系的架构
这三大模式背后是一个统一的合作伙伴关系。OpenAI 模型、Codex 和 ChatGPT 直接连接到 Databricks,而多个 Databricks 产品运行在 OpenAI 模型上。Databricks 可以提前访问新的 OpenAI 模型,并且 OpenAI 模型在 OfficeQA(Databricks 用于真实文档工作的基准测试)上处于领先地位。ChatGPT 是员工提问和完成工作的地方,Codex 是工程师编写和审查代码的地方,Databricks Apps 托管团队构建的自定义代理和应用。OpenAI 前沿模型在所有这些场景中提供推理能力。Databricks Model Serving 在公司数据旁边运行 GPT 模型,因此团队可以从 SQL、笔记本和代理中调用它们,而无需管理单独的 API 密钥。Unity Gateway 路由每个模型请求,按团队设置预算,并保留审计日志。Genie 插件在 ChatGPT 和 Codex 中回答业务问题,并利用 Genie Ontology 提供业务上下文以供行动:公司定义、数据以及每个人的访问权限。Lakehouse 在 Unity Catalog 治理下存储公司数据,而 Lakebase(一个托管的 Postgres 数据库)为代理保存记忆和状态。
其他 OpenAI 与 Databricks 集成
两家公司还构建了以下集成:
- Databricks 上的 OpenAI GPT 模型:包括 GPT-6 系列和开放权重的 gpt-oss 模型在内的近期 OpenAI 模型,可从 SQL、笔记本和代理中调用。
- Codex 的 Neon 插件:让开发人员从 Codex 创建 Neon 无服务器 Postgres 项目、运行 SQL 和管理迁移。
- Codex 的 Databricks Agent Skills:官方指令,教 Codex 使用 Databricks CLI 和 SDK。
- Codex 数据科学插件:在 Databricks Lakehouse 上运行 Codex 数据科学工作流。
- ChatGPT 数据分析师插件:让用户在 ChatGPT 中基于通过 Genie 连接的数据创建和编辑仪表板。
- 一键 ChatGPT 连接:无需管理员设置即可将 ChatGPT 连接到 Databricks,并应用每个用户的现有权限。
下一步
未来几周内,我们将针对每种模式发布单独的文章,包含架构细节、设置步骤和客户经验。已经在使用 ChatGPT 和 Codex 的团队可以从 Genie 插件和 Unity Gateway 开始。在 Databricks 中构建的团队可以从那里的 OpenAI GPT 模型开始。无论哪种情况,都适用相同的 Unity Catalog 权限和 Unity Gateway 成本控制。
常见问题
- 什么是 OpenAI 与 Databricks 的合作伙伴关系? OpenAI 和 Databricks 合作,使企业能够在 Databricks 中受治理的业务数据和上下文上使用 OpenAI 模型和工具。OpenAI 提供 GPT 模型、Codex 和 ChatGPT,Databricks 提供数据平台和治理。
- 如何将 ChatGPT 连接到我的 Databricks 数据? 使用 Databricks Genie 插件,它运行在 Genie MCP 上。Databricks 管理员启用 Genie,然后用户将其连接到 ChatGPT。每个人只能看到他们被允许看到的数据。
- Databricks Unity Gateway 如何治理 OpenAI Codex? Codex 通过 Unity Gateway 发送请求,而不是直接调用 OpenAI。开发人员使用 Databricks 凭证登录,而 OpenAI 密钥保留在 Gateway 中。领导者可以设置预算并按团队查看支出,每个请求都被记录。
- 我可以在 Databricks 上使用 OpenAI 模型构建 AI 代理吗? 可以。Agent Bricks 让您可以构建和评估代理,或者您也可以使用 OpenAI Agents SDK 编写代理并将其部署为 Databricks Apps。当 Databricks 提供模型服务时,无需外部 API 密钥。
- Databricks 上有哪些可用的 OpenAI 模型? Databricks 提供近期 OpenAI GPT 模型,包括 GPT-6 系列和开放权重的 gpt-oss 模型。支持的模型列表显示了当前可用的模型。
在 ChatGPT 中查看 Databricks Genie 插件的实际应用。