Databricks
Databricks 是2013年创立、总部位于美国旧金山的数据与人工智能公司,起源于加州大学伯克利分校的 Apache Spark 研究团队。公司提供结合数据工程、分析、治理、机器学习和 AI 应用开发的云平台,并参与 Spark、Delta Lake、MLflow 和 Unity Catalog 等开源项目。
本页目录9 节
词条资料
2013—2016年:从 Berkeley 研究团队到云服务
2018—2020年:云合作与开源工具扩展
2018年3月22日,Azure Databricks 正式商用。Microsoft 将其与 Azure 的数据与计算服务整合,当时提供虚拟网络对等连接、Power BI 的 Spark 连接器和 Azure Data Factory 等集成能力,使企业可以在 Azure 环境中运行协作式数据分析。[4]
同年,Databricks 在 Spark + AI Summit 推出 MLflow,用于管理机器学习开发过程中的实验记录、代码与数据版本、可复现运行和模型部署。[5]
2021年扩展到 Google Cloud
2021年2月,Google Cloud 与 Databricks 宣布合作,将 Databricks 带到 Google Cloud,并与 Cloud Storage、BigQuery、Looker、Pub/Sub 和当时的 AI Platform 连接。公告介绍了基于 Google Kubernetes Engine 的运行方式,使同一数据平台能与 Google 的存储、分析及模型服务共同工作。[7]
2023—2024年:生成式 AI 与数据格式互通
2023年7月19日,Databricks 宣布完成收购 MosaicML。后者提供大模型训练平台及 MPT 模型系列,收购的产品方向是让客户基于自有数据训练和部署定制模型,并保持对数据的控制。完成交易公告同时表示,MosaicML 产品仍可单独购买,双方将在后续推进与 Databricks Lakehouse 的结合。[8]
2024年6月,Databricks 宣布达成收购 Tabular 的协议。Tabular 由 Apache Iceberg 的原始开发者 Ryan Blue、Daniel Weeks 以及 Jason Reid 创立;交易的技术目标是改善 Iceberg 与 Delta Lake 等开放数据格式之间的兼容性。公告把 UniForm 作为近期实现互通的途径,并明确更长期的统一标准需要社区持续合作,不能把这一目标理解为两种格式已经完全合并。[9]
2025年Neon 与事务型数据库
2026年8月战略融资与产品组合
2026年8月13日,Databricks 宣布完成50亿美元战略融资,估值为1900亿美元,投资方包括 CoatueCoatueCoatue 是 Philippe Laffont 于1999年创建、以科技和创新为核心的投资管理机构,业务同时覆盖公开市场和私募市场。当前官网把 Thomas Laffont 列为联合创始人兼私募投资首席投资官;2026年7月29日 Form ADV 披露监管资产管理规模为927.05722582亿美元。点击查看完整词条、BlackstoneBlackstoneBlackstone是一家另类资产管理机构,服务机构与个人投资者。其官网披露,截至2026年6月30日,管理资产规模超过1.3万亿美元。点击查看完整词条、MGX、T. Rowe Price 相关账户及 Sixth Street Growth。公司同时称季度收入同比增长超过80%,收入年化运行率超过70亿美元;年化运行率反映某一阶段收入速度,并非已确认实现的全年营收。[12]
公告将新资金的重点列为 Lakebase、Genie 和 Unity AI Gateway:Lakebase 是无服务器 PostgreSQL 数据库,Genie 利用企业数据提供问答和操作协助,Unity AI Gateway 用于多模型治理、路由与成本控制。这一组合将原有数据分析业务进一步连接到企业 AI 应用和代理的运行需求。[12]
2026年9月新加坡扩展计划
平台架构与公司组织
Databricks 的平台采用 lakehouse(数据湖仓)架构,把数据湖存储与数据仓库的分析和管理能力结合,用于数据工程、批量与流式处理、商业分析、机器学习和 AI 开发。Spark、Delta Lake 和 MLflow 等开源项目构成其中的重要基础;平台还提供统一治理、数据共享及面向 Python、SQL、笔记本和开发环境的工具。[15]
来源
- About Databricks(在新窗口打开)
- Databricks Founders(在新窗口打开)
- 10 Hot Data Science Companies with Berkeley Roots(在新窗口打开)
- March 2018: Azure Databricks is now generally available(在新窗口打开)
- The MLflow Project Joins Linux Foundation(在新窗口打开)
- The Delta Lake Project Turns to Linux Foundation(在新窗口打开)
- Databricks on Google Cloud(在新窗口打开)
- Databricks Completes Acquisition of MosaicML(在新窗口打开)
- Databricks Agrees to Acquire Tabular(在新窗口打开)
- Neon and Databricks(在新窗口打开)
- About Neon(在新窗口打开)
- Databricks Grows >80% YoY, Surpasses $7B Revenue Run-Rate(在新窗口打开)
- Databricks to Invest More Than US$350 Million in Singapore(在新窗口打开)
- Databricks Partners with EDB and IMDA(在新窗口打开)
- Data Lakehouse Architecture(在新窗口打开)