Databricks

Databricks is een softwarebedrijf dat een Data Intelligence Platform bouwt waarin data engineering, data science en machine learning in één omgeving samenkomen. Het platform is opgezet rond een lakehouse-architectuur, die de functionaliteit van een data warehouse en een data lake combineert in één centrale databron. Het wordt gebruikt door meer dan 15.000 organisaties wereldwijd, waaronder ruim 60% van de Fortune 500.

Het bedrijf is in 2013 opgericht in San Francisco door ingenieurs en onderzoekers die betrokken waren bij academisch werk aan UC Berkeley. Uit dat werk ontstond Apache Spark, het open source framework voor grootschalige dataverwerking dat de basis vormt van het platform. Databricks droeg daarnaast Delta Lake (betrouwbare opslaglaag voor data lakes), MLflow (beheer van de machine learning-levenscyclus) en Unity Catalog (data governance en catalogisering) bij aan de open source-gemeenschap.

Het technische werkterrein beslaat data engineering, data science, machine learning, big data processing, ETL-pipelines, data warehousing, generative AI en ML-lifecycle-management. Het bedrijf opereert wereldwijd en bedient klanten en partners uit uiteenlopende sectoren.

Volgens Databricks is de missie om data en AI toegankelijk te maken voor iedereen, niet alleen voor technische specialisten. Het bedrijf combineert die ambitie met een sterke inzet voor open source software.