Databricks
# Databricks

Databricks es una empresa estadounidense de software empresarial fundada por los creadores de Apache Spark. Databricks desarrolla una plataforma basada en web para trabajar con Spark, que proporciona gestión automatizada de clústeres y cuadernos de estilo IPython. La empresa desarrolla Delta Lake, un proyecto de código abierto para aportar fiabilidad a los lagos de datos para el aprendizaje automático y otros casos de uso de la ciencia de datos.

## Historia

Databricks surgió del proyecto AMPLab de la Universidad de California, Berkeley, que participó en la creación de Apache Spark, un marco de computación distribuida de código abierto construido sobre Scala. La empresa fue fundada por Ali Ghodsi, Andy Konwinski, Arsalan Tavakoli-Shiraji, Ion Stoica, Matei Zaharia, Patrick Wendell y Reynold Xin.

En noviembre de 2017, la empresa fue anunciada como un servicio de primera parte en Microsoft Azure a través de la integración Azure Databricks.

En junio de 2020, Databricks adquirió Redash, una herramienta de código abierto diseñada para ayudar a los científicos y analistas de datos a visualizar y construir cuadros de mando interactivos de sus datos.

En febrero de 2021, junto con Google Cloud, Databricks proporcionó integración con el motor Kubernetes de Google y la plataforma BigQuery de Google. Fortune clasificó a Databricks como uno de los mejores grandes "Lugares de trabajo para millennials" en 2021. En ese momento, la compañía dijo que más de 5000 organizaciones utilizaban sus productos.

En agosto de 2021, Databricks finalizó su octava ronda de financiación recaudando 1.600 millones de dólares y valorando la empresa en 38.000 millones.

En octubre de 2021, Databricks realizó su segunda adquisición de la empresa alemana no-code 8080 Labs. 8080 Labs fabrica bamboolib, una herramienta de exploración de datos que no requiere codificación para su uso.

En respuesta a la popularidad de ChatGPT de OpenAI, en marzo de 2023, la empresa presentó un modelo de lenguaje de código abierto, llamado Dolly en honor a la oveja Dolly, que los desarrolladores podían utilizar para crear sus propios chatbots. Su modelo utiliza menos parámetros para producir resultados similares a los de ChatGPT, pero Databricks no había publicado pruebas comparativas formales para demostrar si su bot igualaba realmente el rendimiento de ChatGPT.

Databricks adquirió la startup de seguridad de datos Okera en mayo de 2023 para ampliar sus capacidades de gobernanza de datos. Al mes siguiente, adquirió la startup de IA generativa de código abierto MosaicML por 1.400 millones de dólares.

## Financiación

En septiembre de 2013, Databricks anunció que recaudó 13,9 millones de dólares de Andreessen Horowitz y dijo que su objetivo era ofrecer una alternativa al sistema MapReduce de Google. Microsoft fue un inversor destacado de Databricks en 2019, participando en la Serie E de la empresa con una cantidad no especificada. La empresa ha recaudado 1.900 millones de dólares en financiación, incluida una Serie G de 1.000 millones de dólares liderada por Franklin Templeton con una valoración posterior al dinero de 28.000 millones de dólares en febrero de 2021. Otros inversores son Amazon Web Services, CapitalG (una empresa de capital de crecimiento dependiente de Alphabet Inc.) y Salesforce Ventures.

Rondas de financiación :

| Serie | Fecha | Importe (millones de $) | Inversores principales |
| - | - | - | - |
| A | 2013 | 13.9 | Andreessen Horowitz |
| B | 2014 | 33 | New Enterprise Associates |
| C | 2016 | 60 | New Enterprise Associates |
| D | 2017 | 140 | Andreessen Horowitz |
| E | Feb. 2019 | 250 | Andreessen Horowitz |
| F | Oct. 2019 | 400 | Andreessen Horowitz |
| G | Ene. 2021 | 1,000 | Franklin Templeton Investments |
| H | Ago. 2021 | 1,600 | Morgan Stanley |

## Productos

Databricks desarrolla y vende una plataforma de datos en la nube utilizando el término de marketing "lakehouse", un portmanteau basado en los términos "data warehouse" (almacén de datos) y "data lake" (lago de datos). Lakehouse de Databricks se basa en el framework de código abierto Apache Spark, que permite realizar consultas analíticas contra datos semiestructurados sin un esquema de base de datos tradicional. En octubre de 2022, Lakehouse recibió la autorización FedRAMP para su uso con el gobierno federal y los contratistas estadounidenses.

Delta Engine de Databricks se lanzó en junio de 2020 como un nuevo motor de consulta que se superpone a Delta Lake para aumentar el rendimiento de las consultas. Es compatible con Apache Spark y MLflow, que también son proyectos de código abierto de Databricks.

En noviembre de 2020, Databricks presentó Databricks SQL (antes conocido como SQL Analytics) para ejecutar informes de inteligencia empresarial y analítica sobre lagos de datos. Los analistas pueden consultar conjuntos de datos directamente con SQL estándar o utilizar conectores de productos para integrarlos directamente con herramientas de inteligencia empresarial como Tableau, Qlik, SigmaComputing, Looker y ThoughtSpot.

Databricks ofrece una plataforma para otras cargas de trabajo, incluido el aprendizaje automático, el almacenamiento y procesamiento de datos, la analítica de streaming y la inteligencia empresarial.

La empresa también ha creado Delta Lake, MLflow y Koalas, proyectos de código abierto que abarcan la ingeniería de datos, la ciencia de datos y el aprendizaje automático. Además de construir la plataforma Databricks, la empresa ha coorganizado cursos online masivos y abiertos sobre Spark y una conferencia para la comunidad Spark llamada Data + AI Summit, antes conocida como Spark Summit.

## Operaciones

Databricks tiene su sede en San Francisco y está presente en Canadá, Reino Unido, Países Bajos, Singapur, Australia, Alemania, Francia, Japón, China, Corea del Sur, India, Costa Rica y Brasil.

