APACHE-ICEBERG

Format de table data lake avec ACID + time-travel.

Définition

Iceberg structure ses tables en metadata.json → manifest list → manifests → data files. Spec v2 ajoute row-level deletes, v3 (en draft 2025) DataFusion column statistics. Catalogs : REST, Hive, Glue, Nessie, Snowflake Polaris. Compatible Spark, Trino, Flink, DuckDB.

Origine

Créé par Netflix en 2017 ; donné à Apache Software Foundation en mai 2020 ; top-level project en novembre 2020.

Exemple en contexte

Apple stocke ses 100 PB analytics dans S3 en Iceberg avec catalog Nessie pour assurer reproducibility analytique.

Termes liés

• Delta Lake — concurrent Databricks.