Apache Hudi V2

Apache Hudi 1.0 stable octobre 2024.

Définition

Hudi 1.0 stabilise table format spec, ajoute optimized metadata table, secondary indexes (avec record index Apache Lucene-based), expression index, time travel queries précis. Deux types tables : Copy-on-Write (CoW) et Merge-on-Read (MoR). Compatible Apache Spark, Apache Flink, Apache Hive, Trino, Presto.

Origine

Uber Engineering 2016 (Vinoth Chandar), donation Apache Software Foundation 2019, Top-Level Project mai 2020.

Usage

Adopté Uber, Robinhood, Walmart Labs, ByteDance. Force streaming upserts + CDC (Change Data Capture) cas usage.

Termes liés

• Apache Hudi — fiche socle.
• Apache Iceberg V3 — concurrent.
• Delta Lake V4 — concurrent.